zasiedzenie a nowo wybudowany dom

Witam.Mialam sprawe o zasiedzenie nie skończyła się dla mnie korzystnie,mało tego sąsiedzi domagaja sie dalszego zasiedzenia gruntu.Jeżeli tak się stanie,to granica działki będzie znajdować przy moim nowo wybudowanym domu.Mam pytanie odnośnie tego,a mianowicie czy w takiej sytuacji mogę uważać że pozwolenie na budowę zostało wydane zgodnie z prawem ale mimo tego że jest obciązona według zasiedzenia prawem osób trzecich to już nie będzie spełniać walorów działki budowlanej,bo wtedy zostane pozbawiona wjazdu.Czy ktoś mi za to odpowie ?I co z moim nowo wybudowanym domem?