Adaptacja poddasza - forum prawne

Mieszkam w mieszkaniu w budynku dwulokalowym. Sąsiad ma dol i ogród a ja górę i podasze nieużytkowe. W akcie notarialnym jest zapisane ze sąsiad użytkuje ogród na własność jednocześnie mi udostępnia poddasze zezwalając na jego adaptację. Wszystkie formalności adaptacyjne zostały zgloszone i dokonane a prace remontowe zrobione. Zostało podpisać nowy akt notarialny.
Czy sąsiad może sie teraz nie zgodzić ?