Hallo Fabian,
ich nehme mal an, die Audioquelle ist ein PC. Dann hat der PC vielleicht getrennte Ausgänge für Kopfhörer und Lautsprecher, die du dann über die Soundeinstellungen umschalten kannst (nächste Annahme : Windows).
Umschalter gibt es zwar einige und die können natürlich das Audiosignal an eines von zwei Geräten schalten, der Ausgang zum aktuell nicht genutzten gerät wird aber schlicht unbeschaltet sein, was das Brummen im Lautsprecher nicht unterdrücken wird.
Das könnte man aber durch das Einlöten von zwei Widerständen zwischen linken / rechtem Audiokanal und Masse wahrscheinlich sehr effektiv bekämpfen, ohne dass das Audiosignal verfälscht würde.
Wenn du also jemanden in der Umgebung hast, der weiß, an welcher Seite der Lötkolben heiß wird, dann kann der einen solchen Umschalter sehr einfach zusammenbauen. Es reicht ein zweipoliger Umschalter, drei Klinkenbuchsen, zwei Widerstände 1kOhm und ein Kästchen, in das alles hineinpasst. Bei Bedarf mache ich dir eine Skizze, wie das alles miteinander verschaltet werden müsste, das würde der angesprochen "Lötfähige" aber wahrscheinlich auch aus dem Kopf können.
Gruß computerschrat