¿Puedo desgravar como vivienda habitual sin residir en ella?

Hola

En el 2008 compramos una vivienda en Asturias y nos fuimos a vivir allí hasta el 2014.

Por motivos laborales me traslado a Madrid de alquiler, pero me sigo desgravando y hacienda me manda una carta diciendo que por el bajo consumo eléctrico entienden que no es mi residencia habitual.

Tenía entendido que habiendo vivido y estar empadronado en ella más de tres años podía seguir desgravandome por ella.

Un saludo y gracias por vuestra ayuda