Стычка с соседом - как решить вопрос с размежеванием участка и предотвратить обвинения в доведении до смерти.

Мы с несовершеннолетней дочерью купили участок с домом. Дом разделен пополам (смежная только стена), к дому - небольшой участок земли. По границам с соседом, с которым делим дом, вопросов нет. А вот прилегающий к нашему общему дому участок недавно размежевали и теперь хозяин этого участка требует нас (двух собственников) подвинуться. Причем двигать забор он начал сразу как получил результаты межевания (мы вызывали участкового, соседу объяснили что без нашего согласия делать этого нельзя, а мы в свою очередь отказались). Отказались мы потому что если подвинут забор не будет соблюдено мин. растояние до дома, а дом сносить мы понятное дело не хотим (сосед настаивает что хочет именно этого, требует за покупку своей доли неподъемную для нас сумму в разы больше ее реальной стоимости). Сейчас честно не знаю что делать. Участок мы купили сразу с домом, получается что границы были не корректны. Могу я отказаться сдвигать забор и остаться при своих границах в рамках закона (возможно повлиять тем, что один собственник несовершеннолетний)? А еще нас обвиняют в доведении до смерти отца соседа, который умер якобы потому что не захотел жить по соседству с такими вредными соседями (мы его честно говоря и не видели там ни разу, дружить не дружили, а заборы у нас высокие, да и нас дома нет почти, общались только с его сыном, на которого тот переписал участок и который собственно и затеял дележку) и был вынужден с чистого воздуха вернуться в квартиру, что его и сгубило. Подскажите, с чего начать и как быть?