Budynek sąsiada już stał jak nabyłem działkę. Czyli jak stoi to mogę się do niego dostawi bez jego zgody?

Witam.
Sąsiad ma postawiony budynek gospodarczy na granicy. Czy Ja muszę posiadac zgodę sąsiada na postawienie budynku gospodarczego "plecami" do śąsiada o takiej samej długości lub mniejszy?