Fischer gründete 1901 im Ratskeller des alten Steglitzer Rathauses den "Wandervogel". An der Seitenfront des Rathauses befindet sich eine Gedenktafel für den "Wandervogel", die an dieses Ereignis erinnert. 1933 wurde der "Wandervogel" aufgelöst. 1904 trennte sich Fischer vom "Wandervogel" und gründete im selben Jahr den "Altwandervogel", aus dem er zwei Jahre später austrat. Ab 1920 lebte er als freier Schriftsteller in Berlin. 1951 erfolgte die Gründung des Karl-Fischer-Bundes in Steglitz. Die Grabstätte Fischers befindet sich auf dem Friedhof Steglitz, Bergstraße.