No hagas caso a las amargadas de este foro. Cuando se entere, se cabreará, pensará que has hecho algo mucho peor y te dejará con toda la razón del mundo.
Díselo y si te quieres ir, vete aunque se enfade (si de verdad estás en ese punto). Luego será de justicia que te organices para que él pueda hacer lo mismo. Que seguro que no eres la única que está harta