budynek gospodarczy na działce siedliskowej

Witam, chcielibyśmy z mężem kupić działke siedliskową na której znajduje się dom, budynek gospodarczy, stodoła i suszarnia tytoniu. Chcielibyśmy adaptować budynek gospodarczy na mieszkalny, wiem już że konieczna będzie przebudowa i nie obędzie się bez chodzenia po urzędach. Moje pytanie jest takie: czy nie będąc rolnikami możemy przebudować budynek gospodarczy bez konieczności odralniania działki?