Ich habe da mal geschaut, die WLAN-Geräte können untereinander kommunizieren, Ping ging auch.
Hab es jetzt "gelöst":
Ich habe bei Windows Drucker und Scanner aufgerufen und habe den WLAN-Drucker als nicht verbunden angezeigt bekommen (vorher mit noch aktivem Internet habe ich den schon mal verbunden und installiert gehabt). Habe anschließend oben auf "Drucker oder Scanner hinzufügen" geklickt und dann auf "Wifi-direkt Drucker hinzufügen" (das kannte ich bisher noch nicht, es ist ein neuer Drucker, mit nur WLAN und Bluetooth Anschluss). Dann konnte ich den besagten Drucker noch mal auswählen und gerade als ich das tat, sprang der untere Eintrag des eben noch nicht verbundenen Druckers auf bereit... also einfach nur verwirrend ohne Ende, aber immerhin geht es jetzt. Scheint dann ja eher an Software/Treiber zu liegen, oder? Jedenfalls vielen Dank für die Hilfe.