Гражданский муж не собирается забрать силой ребенка у бабушки

Добрый день, мы с моим гражданским мужем (не расписаны, но ребенок записан на него, сделана процедура установления отцовства) поругались. На данный момент я только вышла на работу, а ребенка отвезли к моей маме во Владимирскую область по совместному решению. Сейчас он угрожает что заберет и привезет ко мне в квартиру (квартира в моей собственности и прописаны только я и ребенок), и что бы я сидела, что типо ребенок должен жить там где прописан что бы он мог с ним видется когда захочет. И в понедельник планирует, или пугает подавать в суд.