Ich hatte auch einen merkwürdigen Vermieter, der Geld einbehalten wollte unter dem Vorwand der Abnutzung. Das ist leider klassisch. Also die Gesetze sind da klar: normale Abnutzung geht auf Kosten des Vermieters. Kleine Flecken an den Wänden, leichte Kratzer, Verfärbungen der Tapete nach Jahren - das ist alles sein Problem, nicht deins. Er darf Geld nur einbehalten, wenn du echte Schäden verursacht hast (Loch in der Wand, kaputte Fliesen, beschädigtes Parkett, so was). Nagellöcher oder leichte Spuren fallen nicht in die Kategorie "Schaden".
Das Verfahren sieht so aus: er muss dir die Kaution spätestens zwei Monate nach dem Auszug zurückgeben, es sei denn, er teilt dir ein detailliertes Inventar mit Fotos und klaren Begründungen für jeden Einbehalt mit. Wenn er Geld behält, ohne dir die Schäden mit Kostenvoranschlägen nachzuweisen, ist das Missbrauch. Fordere ihn schriftlich auf (E-Mail, beglaubigter Brief), genau zu begründen, was er behält und warum. Wenn du Fotos vom Apartment beim Einzug oder beim Auszug hast, behalte die als Beweis. Ehrlich gesagt, wenn es nur um Kratzer geht, hat er null rechtliches Argument. Drück ziemlich hart darauf herum, dass normale Abnutzung seine Sache ist, nicht deine.