rozbiórka zabytkowego budynku

Kupiłem sobie działkę na której stoi bardzo stary należący do zabytków, rozwalający się budynek z zgniłymi ścianami i dziurami w niej, sypiącym się dachem. po moim kupnie tek działki dowiedziałem się że jest ten budynek w rejestrze zabytków! czy nie da się nic zrobić aby móc go zburzyć?