Как защитить свой дом от прописанных жильцов - семейные сложности и правовые меры

Как не потерять дом, полученный в наследство, если прописанный человек, который там сейчас проживает завёл в нём семью?

У меня умерла сестра 2 года назад, в наследство нашей маме перешёл дом, в котором жила покойная сестра с гражданским мужем (брак не регистрирован). После вступления в наследство по доброте душевной в дом прописали этого мужчину, поскольку ему было тяжело и привык к этому дому. Живёт и платит комуналку. По словесной договоренности разрешили ему проживать, но при условии что он уйдет, когда решит завести семью с кем то. Он в тайне привёл в наш дом женщину, без нашего согласия. Простили. Приняли. Понимаем что одному тяжело. Поскольку он сказал что это "уходящая, приходящая". Хотя словесный договор уже был нарушен. В итоге он в тайне женился на ней и она уже ждёт ребёнка. Когда ребенок родится он сможет его там прописать. В итоге в нашем доме живёт совершенно чужая полноценная семья. Комуналку сейчас оплачивают они, но с нашей стороны тоже были не малые вклады, погашения долгов, плата налогов и тд. Давали деньги на ремонт, установку пластиковых окон, натяжные потолки, но лично в руки. Учитывая современные законы, собственник практически никаких прав не имеет. Человек прописан, живет и в любой момент могут отжать дом полностью, мол мы платим - значит фактически собственники. Как в такой ситуации правильно поступить и не потерять дом? Выписать через суд? Или какой то договор заключить? Продать тоже не можем в течении нескольких лет ещё. Но и ближайшие несколько лет пока жить в нём не можем сами. При прописки этого человека, на такую ситуацию не расчитывали - нам говорилось одно, по итогу другое. Создалось впечатление что это затевалось давно, уж больно быстро появилась эта женщина, будто давно он планировал отжать этот дом.