куда мне обратиться на человека, чтоб он отказался от меня и оставил покое.

Так игнорируйте его, Вы прекрасно понимаете, что его угрозы не имеют никаких оснований. Никто и никогда Вас не лишит родительских прав без оснований согласно статье 69 Семейного кодекса. Более того - оставить Вас "без всего" - из области фантастики. Советую Вам с него ещё и алименты взыскивать на содержание ребенка.

Он не сможет лишить вас родительских прав на первого ребенка, если он его не усыновлял. К тому же для лишения родительских прав требуются основания, которые еще надо доказать суду. Если основания отсутствуют, вам не о чем беспокоиться.

СК РФ, Статья 69. Лишение родительских прав

Родители (один из них) могут быть лишены родительских прав, если они:

уклоняются от выполнения обязанностей родителей, в том числе при злостном уклонении от уплаты алиментов;

отказываются без уважительных причин взять своего ребенка из родильного дома (отделения) либо из иной медицинской организации, воспитательного учреждения, организации социального обслуживания или из аналогичных организаций;

(в ред. Федеральных законов от 24.04.2008 N 49-ФЗ, от 25.11.2013 N 317-ФЗ, от 28.11.2015 N 358-ФЗ)

(см. текст в предыдущей редакции)

злоупотребляют своими родительскими правами;

жестоко обращаются с детьми, в том числе осуществляют физическое или психическое насилие над ними, покушаются на их половую неприкосновенность;

являются больными хроническим алкоголизмом или наркоманией;

совершили умышленное преступление против жизни или здоровья своих детей, другого родителя детей, супруга, в том числе не являющегося родителем детей, либо против жизни или здоровья иного члена семьи.

Я жила с этим человеком три года и родила от него ребенка, а сейчас разошлась с ним, теперь он хочет лешить родительских прав на обоих детей (первый ребенок от первого брака) и оставить без всего.

этот человек от вас не отвяжется. Решайте спорные вопросы по согласию.