Lo de no ir al trabajo tres días seguidos sin justificación canta a la legua que es para justificar un despido cuando eras tú la que quería dejar el empleo sin tener que renunciar a una prestación que no te corresponde. Así que sí, es posible que sospechen de tus trapicheos y se concluya que debes devolver lo recibido.
