Im Grunde brauchst Du erstmal digitales "Karopapier" - also ein Raster. Ich mach mir da meist eine neue Datei mit um die 500 x 500 Pixel, Hintergrund weiss - das ist quasi Dein Blatt, auf dem der Dungeon entsteht.
Dann lege ich die erste Ebene r?ber (stell Dir Ebenen wie bemalbare Klarsichtfolien vor, die Du neu anordnen und wieder entfernen kannst). Auf diese Ebene kommt dann meist erstmal das K?stchenmuster rauf, bei 500x500px benutze ich meist 30x30px K?stchen.
Dann 'ne neue Ebene und dort die K?stchen schwarz f?rben, die schwarz sollen (F?llwerkzeug, Einstellung: Grenzen - also die K?stchenrahmen - aller Ebenen ber?cksichtigen).
Geht das schon mal n etwa in die Richtung, die Du wissen wolltest?
Bei den Downloads gibt es ein OpenOfficeDokument (freeware), bei dem Du auch die K?stchen schon vorgegeben hast und per Zellenfarbe einf?rben kannst: