Leider nein, der sichtbare Teil den du einfach so wegwischen kannst ist wie gesagt leider nur der Teil der die weiteren Sporen bildet und verteilt.
Da diese Sporen das sind was beim Einatmen Krankheiten verusacht (verursachen kann) ist das Problem durchs wegwischen natürlich erstmal geklärt.
Trotzdem wirst du da aber weitere Teile des Schimmels haben die du nicht so einfach siehst und welche sobald es mal wieder etwas feuchter werden sollte direkt wieder einen sichtbaren Teil bilden können. Das heißt da muss man sehr genau aufpassen wenn man das mal hatte.
Wenn nach dem wegwischen des Pilzes trotzdem ständig ein modriger Geruch bleiben sollte dann ist es sowieso klar das da noch mehr irgendwo versteckt ist und man sollte mit Schimmel auch nicht zu leichtfertig umgehen weil die Gefahr groß ist das man Allergieen entwickelt.
PS: Man hat übrigens immer und überall (außer vielleicht im abgeriegeltem Labor) einen gewissen Anteil an Schimmelsporen in der Luft welche auch ungefährlich sind. Gefährlich wird es erst wenn dieser Anteil zu hoch wird, zum Beispiel halt dadurch das irgendwo ein Pilz sitzt der fleißig Sporen produziert.