Как защитить права матери и ребенка в сложной ситуации с отцом?

С отцом ребенка расписаны не были. Во время беременности и после рождения в течении года, особого участия не проявлял. Все время говорил, что ребенка не любит и ему он не нужен. Вместе не живем полгода. За все это время дал на ребенка 40 тыс. Были нормальные отношения с отцом ребенка, видел когда хотел, иногда брал на выходные, я не препятствовала. Разрешила ему взять ребенка на неделю. После моего звонка, сказал что привезет, не как договаривались, а через 4 дня. Поехала чтобы увидеть сына. Он начал меня оскорблять, т.к. у меня сейчас другой мужчина и я хочу с ним жить. Он стал говорить что хочет чтоб ребенок неделю жил с ним, неделю у меня. Своего согласия я на это не дала. После чего он заявил что ребенка мне не отдаст, что если хочу забрать сына, подавай в суд. Вызвала милицию, написала заявление. Сейчас он мне угрожает что отберет у меня ребенка. Этот человек морально не устойчив, Чуть что хватается за нож. Начал проявлять заботу о ребенке, после того как узнал что я хочу уехать с ребенком за границу. Ребенком ему нужен только для того чтобы я осталась тут. Подскажите пожалуйста, как лучше поступить. В свидетельство о рождении вписан с моих слов, есть бумага об установлении отцовства, в его паспорт ребенок до сих пор не вписан, ребенку почти 2 года.