Doppelbesteuerung nach Rückzug nach Deutschland

Wir (Ehepaar) wurden informiert, daß bei einem Wechsel des Hauptwohnsitzes von Deutschland nach Österreich erst nach längerer Zeit, z.B. nach 5 Jahren, eine endgültige Zuordnung der Steuerpflicht gemäß Doppelbesteuerungsabkommen erfolgt.
Würden wir oder ein Ehepartner z.B. aus privaten Gründen vorher nach Deutschland rückverziehen, könnte Deutschland auf einem Besteuerungsanspruch/Zuständigkeit für die Zeit des Auslandsaufenthalts bestehen und trotz bereits bezahlter Steuern in Österreich nachträglich Steuerforderungen für diese Zeit in Österreich an uns stellen, als ob wir gar nicht verzogen wären.
Es könnte ein langwieriger Rechtsstreit bzw. ein sog. Verständigunsverfahren drohen, mit entsprechender Rechtsunsicherheit, Zeit- und Kostenaufwand und der Pflicht, zumindest zunächst oder teilweise auch noch in Deutschland "nachzuversteuern".
Ist dies tatsächlich geübte Praxis oder nur eine theoretische Möglichkeit? Gibt es Erfahrungen mit den Verständigungsverfahren und welche Aufenthaltszeit wird im allgemeinen als Grenze für eine eindeutige steuerliche Zuordnung der Ansässigkeit in Österreich von den deutschen Finanzämtern angesehen?