onverschuldigde betaling waarborgsom

Ik zat ernstig verlegen om een woning toen zich de mogelijkheid voordeed om een appartement te huren. Nadat de toenmalige bewoner mij in 5 minuten rondgeleid had, besloot ik contact te zoeken met de particuliere verhuurder. Deze gaf meteen aan dat er meerdere serieuze gegadigden waren en dat ik, als ik als eerste aanspraak wilde maken op het appartement, z.s.m. een waarborgsom a 2 maanden huur (euro 1042,-) moest overmaken. Achteraf gezien lijkt er van meerdere serieuze gegadigden geen sprake te zijn geweest. Op 31 oktober maakte ik de waarborgsom over, er vanuit gaande dat ik een optie nam op het appartement. Het huurcontract kreeg ik pas 7 november in handen gedrukt en ik kon, zonder deze samen door te nemen, weer vertrekken. Het bleek om een standaardcontract te gaan waarin hij zelfs niet de kleine voorwaarden had opgenomen waarom ik gevraagd had. Op 17 november kreeg ik een kort telefoontje met de mededeling van de verhuurder dat hij per direct 2 weken op vakantie ging en pas op 1 december terug zou keren, de dag dat de huur in zou gaan! In de loop van november verslechterde mijn werksituatie zodanig dat duidelijk werd dat ik per 1 januari naar nieuw werk uit zou moeten kijken. De huur van het apartement waar ik in mijn ogen slechts een optie op had, zou ik onmogelijk nog kunnen opbrengen. Ik besloot het contract niet te ondertekenen en heb de verhuurder dit medegedeeld op 1 december, de dag dat hij terugkwam van vakantie. De verhuurder weigert nu mijn waarborgsom terug te betalen. In mijn ogen is dit een onverschuldigde betaling van mijn kant. De verhuurder kan in mijn ogen geen enkel recht doen gelden op de waarborgsom, die ik niet verplicht was om te betalen vóórdat de huurovereenkomst was afgesloten en dient deze m.i. dan ook volledig te retourneren. Heb ik hierin gelijk en wat kan ik doen om dit terug te krijgen? Er schijnt geen jurisprudentie te zijn in deze.