Was hast du laut deinem ISP für eine Leitung? Wenn die Leitung mit aktivem VPN schneller ist als ohne, dann stimmt etwas an der Konfiguration des Routers/Modems nicht. Oder irgendein anderes Gerät am Anschluss verlangsamt die Leitung künstlich, welches durch die Tunnelung einfach ignoriert wird. Ich hatte mal ein ähnliches Phänomen beobachtet, als ich dmz und Portworwarding zu meiner Firewall aktiv hatte. Bremste ordentlich aus und mit VPN wurde dieser Umweg einfach umgangen. Betraf jeden Verkehr auf dem Router.
Gruß
Ernalo