No creo que tengas que decírselo directamente, habéis cortado la relación en ese sentido no le debes nada, aunque tampoco hace falta que le pasees al chico nuevo en las narices, actúa normal, no haces nada malo. Lo que parece es que tú no quieres esa relación normal que tienes con tu ex, si es así dale distancia o díselo claro, no tienes por qué mantenerlo en tu vida y te diría que incluso aunque fuerais súper amigos necesitáis los dos un tiempo para descansar el uno del otro