Налоговый вычет и рефинансирование

Три года назад взял ипотеку. Каждый год подавал документы на получение налогового вычета. И каждый год получал его. Теперь хочу рефинансировать ипотеку в другом банке. Где- то слышал, что получить налоговый вычет после этого будет невозможно, но не понял почему. Сам поискал информацию, но разобраться не смог. Действительно ли нельзя получить налоговый вычет после рефинансирования ипотеки?