I.V.A. abitazione principale

Buongiorno,
Tizio acquista un appartamento destinato ad abitazione principale ed ottiene il beneficio IVA al 4% anziché al 10%.
Dopo alcuni anni decide di vivere in affitto in altra città e mantenere la proprietà dell'appartamento.
Mi accennavano che se passano più di 5 anni è tutto OK.
Viceversa, se passano meno di 5 anni dovrà pagare la differenza IVA; è corretto?
Tizio acquista un appartamento destinato ad abitazione principale ed ottiene il beneficio IVA al 4% anziché al 10%.
Dopo alcuni anni decide di vivere in affitto in altra città e mantenere la proprietà dell'appartamento.
Mi accennavano che se passano più di 5 anni è tutto OK.
Viceversa, se passano meno di 5 anni dovrà pagare la differenza IVA; è corretto?