Yo que tu hablaría ya de ya con Recursos Humanos y cuéntales la situación tal cual lo has contado aquí. Está claro que afectaría a tu trabajo, y que valoren ellos si les compensa.
Mucho ánimo, mucha suerte! Ojalá salga bien, estos cabrones que rozan el perfil de maltratador, actúan igual en el trabajo con sus compañeros, no deberían ser bienvenidos.