Nun glaube ich sind diese 3-fach Schalter so gebaut, das die zwei nicht geschaltenen Antennen gegen Masse liegen.
Nicht unbedingt, das kommt auf den Schalter an. Es gibt einfache, da ist das nicht der Fall und etwas teurere, dort wird gegen Masse geschaltet, ggf. sogar noch mit einer Blitzschutzpatrone versehen. Durchmessen ist aber sicher kein Problem. Aber wo ist die Beschreibung Deines SWR-Problemes aus dem man weitere Schlüsse ziehen könnte?
Grundsätzlich würde ich (!) eine Polarisationsumschaltung direkt unter Dach oder am Mast machen mit zwei gleich langen (bzw, eher kurzen) Koax-Kabeln und einem dafür geeigneten Umschalter. Je länger die Kabel sind, desto mehr Wahrscheinlichkeit hast Du, daß die SWR H und V von einander wegdriften. Bei den "normalen" Umschaltern hast Du auch oftmals eine Frequenzbeschränkung auf KW bis ggf. noch den 2m-Bereich. Vielleicht liegts ja schon daran, daß es "nicht richtig" läuft?!