Возраста не обязаны были бы содержать своего бывшего папочку?

Родители (один из них) могут быть лишены родительских прав, если они:

уклоняются от выполнения обязанностей родителей, в том числе при злостном уклонении от уплаты алиментов;

отказываются без уважительных причин взять своего ребенка из родильного дома (отделения) либо из иного лечебного учреждения, воспитательного учреждения, учреждения социальной защиты населения или из аналогичных организаций;

злоупотребляют своими родительскими правами;

жестоко обращаются с детьми, в том числе осуществляют физическое или психическое насилие над ними, покушаются на их половую неприкосновенность;

являются больными хроническим алкоголизмом или наркоманией;

совершили умышленное преступление против жизни или здоровья своих детей либо против жизни или здоровья супруга.

Лишение родительских прав производится в судебном порядке. При рассмотрении дела о лишении родительских прав суд решает вопрос о взыскании алиментов на ребенка с родителей (одного из них), лишенных родительских прав.

В Вашем случае ситуация несколько противоречива: во-первых он какие-то из обязанностей родителей выполняет, например, общается с детьми, во-вторых, Вы сами не захотели возбуждения УД против него, а приговор по УД мог бы подтвердить именно злостный характер уклонения от уплаты алиментов.