Fünfmal hat Tailscale bei mir gehakt, seit die FortiGate das Netz bewacht. Dreimal war es die Firewall, einmal das iPhone und einmal ich selbst. Hier die ganze Geschichte, mit Logs und Befehlen.

Worum es geht

Ich nutze Tailscale, um von unterwegs ins Heimnetz zu kommen. Tailscale baut auf WireGuard auf (ein schlankes, modernes VPN-Protokoll) und kümmert sich um das Lästige: Schlüssel verteilen, Geräte finden, durch NAT kommen. Zu Hause läuft dafür ein kleiner LXC-Container auf dem Proxmox-Server. Der dient als Subnet-Router (macht das Heimnetz im Tailnet erreichbar) und als Exit-Node: Das iPhone schickt dann seinen ganzen Internetverkehr über mein Zuhause, praktisch im Hotel-WLAN.

Seit Oktober steht zwischen Heimnetz und Internet eine FortiGate 40F mit Security-Profilen: Virenscan, Webfilter, IPS und App-Control. App-Control erkennt Anwendungen an ihrem Verkehr statt am Port und kann sie nach Kategorien sperren. Genau da fing der Ärger an.

Voraussetzungen

  • FortiGate 40F, FortiOS 7.6.7 (seit Ende Oktober 7.6.8)
  • Tailscale 1.104.7 in einem unprivilegierten Debian-LXC-Container auf Proxmox VE (1 Kern, 512 MB RAM reichen locker)
    • Damit Tailscale im Container einen Tunnel anlegen darf, braucht er /dev/net/tun und nesting=1. In /etc/pve/lxc/<ID>.conf:

      features: nesting=1
      lxc.cgroup2.devices.allow: c 10:200 rwm
      lxc.mount.entry: /dev/net/tun dev/net/tun none bind,create=file
      
  • Tailscale-App 1.104.6 auf dem iPhone
  • Kabelanschluss, erst hinter der UniFi Dream Machine (doppeltes NAT), seit dem 12.10. direkt an der FortiGate

Runde 1: App-Control hält Tailscale für einen Proxy

Kurz nach dem Umzug auf die FortiGate ging der Exit-Node nicht mehr. Im Log stand die Erklärung: Meine App-Control-Liste Home-App sperrt die Kategorie Proxy, und die FortiGate stuft Tailscale genau so ein. Die Verbindungen zu controlplane.tailscale.com wurden mit drop-session verworfen. Der Control-Server ist der Koordinationsdienst, bei dem sich jedes Gerät anmeldet und die Schlüssel der anderen abholt. Ohne ihn geht gar nichts.

Aus Sicht der Firewall ist das gar nicht falsch: Ein Exit-Node ist ein Proxy. Meine erste Lösung war eine eigene Regel für den Tailscale-Container, vor der allgemeinen Internet-Regel:

  • Quelle: nur der Tailscale-Container
  • Ziel: Internet, aber keine privaten Netze (RFC1918)
  • Virenscan, Webfilter, DNS-Filter und IPS an, App-Control aus
  • alles protokollieren

Wichtig ist das „nicht RFC1918“. Wer den Exit-Node nutzt, soll darüber ins Internet kommen und nicht quer in meine internen Netze. Dafür gibt es eigene, schärfere Regeln.

Danach lief der Speedtest über den Exit-Node sauber. Ein Workaround war es trotzdem, und der hat mich in Runde 5 wieder eingeholt.

Runde 2: „Die Firewall ist schuld!“ – war sie nicht

Einen Tag später war Tailscale unterwegs einen ganzen Nachmittag lang zäh oder ganz weg. Mein erster Gedanke war natürlich: die neue Firewall.

Also habe ich ausgewertet: FortiGate-Traffic-Log, Proxmox-Statistik des Containers und das Journal von tailscaled. Ergebnis: Die FortiGate hatte nichts geblockt. Jede Verbindung des Containers lief über die Regel aus Runde 1, und die Verbindung zum Control-Server stand seit fast einem Tag.

Das Problem saß am anderen Ende:

  • Mein iPhone baute immer wieder eine Direktverbindung auf, die sofort wieder abriss. Im Journal stand fast 600-mal new contact. Irgendwann meldete es sich gar nicht mehr am Relay an.
  • Das zweite iPhone im Haushalt startete seinen Tailscale-Client etwa alle zwei Minuten neu, zu erkennen an ständig neuen Disco-Keys.
  • Der Heim-Knoten lief den Handys hinterher und wechselte das Relay im Minutentakt: Amsterdam, London, Paris … und zwischendurch New York und Honolulu.

Diese Relays heißen bei Tailscale DERP-Server. Klappt keine Direktverbindung, läuft der verschlüsselte Verkehr über sie. Wenn ein Handy in Deutschland Honolulu wählt, ist das kein gutes Zeichen für das Mobilfunknetz. Meine Vermutung ist eine Mischung aus schlechtem Netz, Netzwechseln und iOS, das den VPN-Dienst bei Speichermangel beendet. Mit aktivem Exit-Node passiert das gerne.

Die Befehle, die mir dabei geholfen haben:

# im Tailscale-Container
tailscale netcheck                        # UDP? NAT-Verhalten? nächstes Relay?
J='journalctl -u tailscaled --since "13:45" --until "18:20"'
eval $J | grep -iE "now using|disco"      # Direktverbindungen und Schlüsselwechsel
eval $J | grep -c "does not know about peer"
eval $J | grep -iE "derp.*(connect|close|error)"   # Relay-Wechsel
# FortiGate: Traffic-Log eines Hosts
execute log filter reset
execute log filter category 0
execute log filter field srcip 10.0.20.12
execute log filter view-lines 200
execute log display

Zwei Learnings aus dieser Runde:

  1. Das Memory-Log der 40F reicht nicht weit zurück. Am Abend war der Nachmittag schon überschrieben, weil ich alle Internet-Regeln auf logtraffic all gestellt hatte. Am nächsten Tag habe ich die Logs per Syslog an Loki geschickt. Seitdem kann ich auch zurückschauen.
  2. iOS benennt alle iPhones nach dem Modell. Beide Geräte hießen im Tailnet fast gleich (iphone183 und iphone183-1). In der Admin-Konsole umbenennen kostet zwei Minuten und erspart beim nächsten Log viel Rätselraten.

Runde 3: Der WAN-Umbau und sieben Zombie-Sessions

Am 12.10. kam das Kabelmodem direkt an die FortiGate, die Dream Machine flog raus und damit auch das doppelte NAT. Der Umbau dauerte sieben Minuten, und fast alles lief sofort wieder. Fast: Der Tailscale-Container meldete „Unable to connect to the Tailscale coordination server“.

Die Ursache waren alte Sessions. Eine Firewall merkt sich jede laufende Verbindung samt NAT-Übersetzung. Vor dem Umbau war die WAN-Adresse der FortiGate eine private Adresse im Transfernetz zur Dream Machine, danach eine öffentliche. Sieben Verbindungen von Tailscale wurden aber weiter auf die alte Adresse übersetzt. Weil Tailscale seine Verbindungen dauerhaft offen hält, laufen diese Sessions nie aus. Sie liefen einfach ins Leere.

Die Lösung war, gezielt nur diese Sessions zu löschen:

diagnose sys session filter clear
diagnose sys session filter nsrc 10.0.81.2     # alte, genattete Quelladresse
diagnose sys session list | grep -c "session info"
#  → 7
diagnose sys session filter                    # Kontrolle: nur der nsrc-Filter ist gesetzt
diagnose sys session clear
diagnose sys session filter clear

Tailscale war sofort wieder online.

⚠️ Achtung: diagnose sys session clear ohne gesetzten Filter löscht alle Sessions auf der Firewall. Deshalb vorher mit diagnose sys session filter (ohne Argumente) prüfen, was gerade gesetzt ist.

Das steht jetzt in meinem Migrationsplan: Nach jedem Wechsel der WAN-Adresse alte NAT-Sessions gezielt aufräumen.

Runde 4: Direkt statt über Frankfurt – meine bewusste Ausnahme

Nach dem Umbau lief alles, aber vom Handy im Mobilfunk nur über das Relay in Frankfurt, mit 53 bis 466 ms. Im Mobilfunk sitzt man meist hinter CGNAT (Carrier-Grade NAT, der Provider teilt sich eine öffentliche Adresse auf viele Kunden auf). Wenn dann auch zu Hause kein Port erreichbar ist, findet Tailscale keinen direkten Weg.

Eigentlich habe ich eine einfache Regel: keine Portweiterleitungen ins Heimnetz. Hier mache ich eine Ausnahme. Mit voller Absicht und mit Begründung:

  • Freigegeben ist nur UDP 41641, und zwar nur zum Tailscale-Container.
  • Dahinter lauscht WireGuard. WireGuard antwortet grundsätzlich nur Gegenstellen, die einen gültigen Schlüssel haben. Für alle anderen ist der Port stumm, auch für Portscanner.
  • Der Container steht im Server-VLAN und hat selbst keine Sonderrechte nach innen.

Damit tailscaled immer denselben Port nutzt, ist er fest eingestellt (/etc/default/tailscaled):

PORT="41641"

Auf der FortiGate brauchte es dann einen Service, eine VIP (so heißt bei Fortinet das Ziel-NAT) und eine Regel:

config firewall service custom
    edit "SVC_TAILSCALE"
        set udp-portrange 41641
    next
end
config firewall vip
    edit "VIP_TAILSCALE"
        set extintf "wan"
        set extip 0.0.0.0
        set mappedip "10.0.20.12"
        set portforward enable
        set protocol udp
        set extport 41641
        set mappedport 41641
    next
end
config firewall policy
    edit 97
        set name "WAN-to-TAILSCALE"
        set srcintf "SDWAN"        # SD-WAN-Zone (früher Interface/Zone "wan")
        set dstintf "VL20_SERVER"
        set srcaddr "all"
        set dstaddr "H_TAILSCALE"
        set action accept
        set schedule "always"
        set service "SVC_TAILSCALE"
        set logtraffic all
    next
end

Danach liefert tailscale ping zum iPhone eine direkte Verbindung mit 40–43 ms. Das hat auch den späteren Umbau auf SD-WAN überlebt: Die VIP hängt weiter am physischen wan-Port, der jetzt als Member in der SD-WAN-Zone steckt.

Ob man das so machen will, muss jeder selbst entscheiden. Ohne die Weiterleitung funktioniert Tailscale auch, nur langsamer. Ich habe hier Geschwindigkeit gegen einen offenen Port getauscht und halte das bei WireGuard für vertretbar. Für jeden anderen Dienst würde ich das nicht machen.

Runde 5: x509-Fehler am iPhone – die FortiGate antwortet selbst

Anfang November wollte ich mich am iPhone im Heim-WLAN in der Tailscale-App ab- und wieder anmelden. Die App sagte:

Could not log out: fetch control key: Get "https://controlplane.tailscale.com/key?v=148":
x509: Zertifikat „controlplane.tailscale.com" wird nicht vertraut

Ein Zertifikatsfehler beim Control-Server klingt erst mal beunruhigend. Mein erster Verdacht war SSL-Deep-Inspection. Dabei bricht die Firewall die Verschlüsselung auf und signiert mit eigenem Zertifikat neu. Das nutze ich aber nirgends. Alle Regeln laufen nur mit certificate-inspection, also mit einem Blick auf das Zertifikat, ohne die Verbindung aufzubrechen.

Das App-Control-Log zeigte die Ursache:

policyid=60 applist="Home-App" action="block" appcat="Proxy" app="Tailscale" appid=51457 hostname="controlplane.tailscale.com"

Es war derselbe Block wie in Runde 1, nur diesmal in der Regel für die normalen Clients. Wenn die FortiGate eine HTTPS-Verbindung blockt, antwortet sie selbst, mit einer Sperrseite und einem eigenen Fortinet-Zertifikat. Dem vertraut das iPhone zu Recht nicht. Der x509-Fehler war also nur die Folge, die eigentliche Ursache war die Sperre.

Das erklärte nachträglich auch die Meldung „Network may be blocking Tailscale“, die mir die App im Heim-WLAN schon ein paar Tage vorher angezeigt hatte. Die hatte ich dem SD-WAN-Umbau zugeschrieben.

Diesmal wollte ich es richtig lösen, statt wieder einen Workaround zu bauen. Mein erster Versuch: Tailscale bekommt in Home-App eine Ausnahme ganz oben, vor den Sperren für QUIC und Proxys.

config application list
    edit "Home-App"
        config entries
            edit 99
                set application 51457      # Tailscale
                set action pass
                set log disable
            next
            move 99 before 1
        end
    next
end

Die Einträge werden von oben nach unten abgearbeitet, der erste Treffer gewinnt. Danach habe ich die Regel aus Runde 1 wieder mit App-Control versehen, der Workaround war weg. Die Anmeldung am iPhone klappte, im Log stand action="pass" mit dem echten Zertifikat. Problem gelöst, dachte ich.

Zu breit gelöst

Beim Schreiben dieses Artikels ist mir dann aufgefallen, wo Home-App überall hängt: an den Internet-Regeln für Clients, LAB, Gäste, IoT, Media, Arbeit und Server. Die Ausnahme galt also überall. Eine gekaperte Glühbirne im IoT-Netz oder ein kompromittierter Container im Server-Netz hätte sich per Tailscale einen Tunnel nach draußen bauen können, an allen Filtern vorbei. Genau das soll die Sperre der Kategorie „Proxy“ ja verhindern.

Also habe ich mich gefragt: Wer braucht Tailscale zu Hause eigentlich wirklich? Die Antwort: nur der Tailscale-Container. Er hält die Verbindung zum Control-Server, nimmt die Direktverbindungen an und ist der Exit-Node.

Ganz so einfach war es dann doch nicht, denn das iPhone lässt die App ja auch zu Hause an. Bei gesperrtem Tailscale meldet es dann „Network may be blocking Tailscale“, und mit aktivem Exit-Node hat es im Heim-WLAN gar kein Internet mehr. Die Lösung dafür liegt auf dem iPhone: VPN on Demand in der Tailscale-App. Sobald das iPhone in meinem WLAN ist, trennt die App den VPN von selbst. Zu Hause braucht es ihn ja nicht.

Damit konnte die Ausnahme auf eine einzige Regel schrumpfen. Ich habe die Liste kopiert und die Kopie nur an die Regel des Containers gehängt:

config application list
    clone "Home-App" to "Home-App-TS"
end
config application list
    edit "Home-App-TS"
        set comment "Wie Home-App + Tailscale pass (99) - nur Policy 79"
    next
end
config firewall policy
    edit 79
        set application-list "Home-App-TS"
    next
end

Erst danach habe ich die Ausnahme aus der allgemeinen Liste entfernt. Andersherum hätte ich mir für ein paar Minuten den Zugang von unterwegs abgeschnitten.

config application list
    edit "Home-App"
        config entries
            delete 99
        end
    next
end

Getestet habe ich in drei Schritten:

  1. Mobilfunk: WLAN aus, Tailscale an. tailscale ping vom Container zum iPhone läuft direkt, wie vorher.
  2. Heim-WLAN: Das iPhone verbindet sich, die App trennt den VPN nach ein paar Sekunden von selbst.
  3. Gegenprobe: Im Heim-WLAN Tailscale von Hand einschalten. Jetzt soll es scheitern, und im Log steht es auch so:
execute log filter reset
execute log filter category 10          # 10 = App-Control
execute log filter field app Tailscale
execute log display
policyid=60 applist="Home-App" action="block" appcat="Proxy" app="Tailscale" hostname="controlplane.tailscale.com"

Erlaubtes Tailscale über Regel 79 taucht im Log übrigens gar nicht auf, weil Eintrag 99 auf log disable steht. Ob die Regel greift, sieht man deshalb nicht im Log, sondern daran, dass der Container online ist.

Zwei Dinge sollte man im Hinterkopf behalten:

  • VPN on Demand gilt bei mir nur für das Haupt-WLAN. Ist das iPhone mal im Gäste-WLAN, bleibt Tailscale an und wird dort geblockt.
  • Bekommt ein Notebook im Client-Netz Tailscale, gilt dasselbe: zu Hause aus, sonst kommt es nicht durch.

Stolperfallen & Learnings

  • Nicht vorschnell die Firewall beschuldigen. In Runde 2 war die FortiGate unschuldig. Die Logs auf beiden Seiten anzuschauen hat sich gelohnt, und tailscaled ist im Journal erstaunlich gesprächig.
  • App-Control ist kein Portfilter. Sie erkennt Tailscale als Proxy, egal über welchen Port. Ausnahmen gehören in die Liste selbst, ganz nach oben, nicht in Sonderregeln ohne App-Control.
  • Ausnahmen so eng wie möglich. Eine Ausnahme in einer Liste, die an acht Regeln hängt, ist eine Ausnahme für acht Netze. Lieber eine eigene Liste nur für die eine Regel, die sie braucht.
  • Ein x509-Fehler hinter einer Firewall heißt oft „blockiert“, nicht „gefälscht“. Die Sperrseite kommt mit dem Zertifikat der Firewall.
  • Nach einem Wechsel der WAN-Adresse alte Sessions gezielt löschen. Dauerverbindungen wie die von Tailscale laufen sonst ewig ins Leere. Und immer erst den Filter prüfen, bevor man clear tippt.
  • Das Memory-Log ist nur ein Kurzzeitgedächtnis. Wer Fehler vom Nachmittag am Abend noch finden will, braucht zentrales Logging.
  • Geräte im Tailnet eindeutig benennen. iphone183-1 sagt einem um Mitternacht gar nichts.

Fazit

Tailscale und FortiGate vertragen sich gut, wenn man der Firewall erklärt, dass dieser „Proxy“ gewollt ist – und zwar nur dort, wo er gebraucht wird. Gekostet hat mich das fünf Runden. Am meisten gelernt habe ich aus der Runde, in der die Firewall gar nichts damit zu tun hatte.

Was als Nächstes kommt

  • Failover-Test, sobald die zweite Leitung (Starlink oder 5G) am SD-WAN hängt: Schaltet Tailscale sauber um, oder gibt es wieder Zombie-Sessions?
  • Und die größere Frage: Den Control-Server von Tailscale selbst betreiben, mit Headscale auf einer kleinen VM zu Hause. Dann liegt auch die Koordination in meiner Hand. Darüber schreibe ich, sobald es läuft – oder spektakulär scheitert.