erfafscheiding muur

Voorjaar 2008 hebben wij onze tuin opnieuw aangelegd.Wij hebben bestraat en tegen de schutting een bloembak aangemaakt ook heb ik de schutting geschilderd.De buurman gaf toen te kennen dat hij in de loop der tijd graag een muur wilde i.p.v een schutting.wij hebben toen aangegeven dat de schutting prima was volgens ons maar als hij dat graag wilde dat we het daar dan wel over eens konden worden.Nu voorjaar 2009 is al in de loop van de tijd aangebroken helaas.we zijn net klaar en kunnen nu weer opnieuw gaan beginnen.Mijn buurman heeft een eigen huis en ons huis is een huurwoning.Aangezien de schutting nog in goede staat was hebben wij aangegeven dat wij er geen problemen mee hebben dat hij daar een muur voor in de plaats zet maar dat wij niet in de kosten willen delen.Voor hem is het een waardevermeerdering voor zijn huis voor ons heeft het geen enkel nut.De buurman heeft een bouwvergunning gekregen en de schutting is inmiddels verwijderd.Nu bestaat er onduidelijkheid over de erfgrens.Na wat meten en overleg hebben we samen opnieuw de erfgrens bepaald.Mijn gemetselde bloembak staat precies op de erfgrens en mijn buurman vind dat wij deze af moeten breken om de fundering te kunnen leggen.En hier gaat het fout.Wij hebben vorig jaar onze tuin gedaan zodat we klaar waren.Als de buurman gelijk had gezegd dat in de loop van de tijd volgend voorjaar zou zijn dan had ik die bloembak niet gemetseld en die schutting niet geschillderd.Kan de buurman mij verplichten om mijn tuin af te breken zodat hij de muur precies op de erfafscheiding kan plaatsen?