Забор по меже между соседями

У нас участок на два собственника. Межевание не проводилось, но сосед самолично поставил забор, прорубил в нем калитку с замком и ходит через эту калитку, устроив у меня под окнами проходной двор. На свою огороженную территорию естественно не пускает. После моих обращений убрать калитку и не устраивать у меня шатания, отвечает угрозами и оскорблениями. Вчера у меня во дворе, под моим окном веселились трое: сосед и два его приятеля. Я вышел и вежливо попросиль не шуметь и уйти с моей территории. В ответ они набросились на меня поломали ребра, угрожали что будет еще хуже и тп. В полицию я не стал обращаться, решил, что это крайний случай если подобные действия повторятся. Подскажите пожалуйста, как можно в моем случае запретить им ходить по моему двору, убрать калитку, а забор поставленный им не трогать (боюсь что только он спасет меня от их действий)до окончательного решения вопроса с межеванием не прибегая к помощи полиции. Надеюсь на содержательный ответ, для меня это сейчас действительно вопрос жизни.
Еще раз хочу уточнить, что межевание еще не проводилось и забор был установлен соседом самолично.