Działka na cele nierolnicze a budowa domu

Witam.
Posiadam działkę na której chciałbym się wybudować lecz w UMiG powiedzieli mi że nie mam szans ponieważ jest to działka rolna i nikt faktycznie nie dostaje takiego pozwolenia.Jednak odkopałem mój akt notarjalny z 2001r i się okazało że jest tam zapis jaką działkę kupuję i jakie ma przeznaczenie: na cele nierolnicze (jako teren zagospodarowania rekreacyjnego,urządzenia obsługi komunikacji i turystyki oraz strefa W III ochrony archeologiczno-konserwatorskiej) .Dlatego mam pytanie czy to coś zmienia co wolno mi na takiej działce postawić?
Z góry dziękuję za odpowiedz.
Pozdrawiam