Sí, tienes derecho a negarte a trabajar horas extras sin retribución. En España, las horas extras son voluntarias a menos que el convenio colectivo de tu sector diga lo contrario, y en cualquier caso deben pagarse. Tu jefe no puede obligarte legalmente a quedarte sin compensación, y amenazarte con afectar tu evaluación por negarte a trabajar gratis es una presión ilegal. Lo que está haciendo entra en el territorio del abuso de posición de poder.
Lo que deberías hacer es documentarlo todo: apunta fechas, horas que te obligas a hacer cada día, y guarda cualquier mensaje o correo donde tu jefe mencione esto. Si tienes un delegado de personal en la empresa, habla con él. Si no, plantéate una conversación directa con tu jefe por escrito (correo electrónico funciona bien) donde dejes claro que no continuarás trabajando sin compensación y que esas horas deben pagarse o no las harás. Si la empresa continúa presionándote o hace represalias en tu evaluación, tendrías motivos para denunciar ante la inspección de trabajo.
También mira tu convenio colectivo específico, porque algunos sí contemplan horas extras obligatorias bajo ciertas circunstancias, pero incluso en esos casos debe haber remuneración. De todas formas, lo que describes (dos horas diarias sin pagar) suena más a explotación que a práctica legal estándar, así que no dejes que te intimide.