¿Y tanto te desagrada que no te plantearías darle ni una oportunidad a ver qué pasa? Por lo que comentas estáis los dos solteros. Y sí sale mal pues ya tienes una buena excusa de peso para mandarle bien a la mierda y montarle pollos si te lo encuentras por ahí »de casualidad».
Otra opción es que si tu piso no está en propiedad te plantees mudarte a otro. Como dices él no está haciendo nada ilegal (salvo que te haya puesto un localizador, pero tendrías que encontrarlo primero), por lo que tampoco veo opción de denunciarlo y pedir orden de alejamiento o similar. Además tú misma has dicho que es muy querido en la comunidad, igual testigos se ponen a su favor.