Para mí el tema de la infidelidad implica más MENTIR a la pareja en cuestiones que supongan sexo que impliquen a otras personas. Por ejemplo: tener conversaciones subidas de tono con otra persona sin que la pareja lo sepa me parecería infidelidad, sin embargo, acostarte con otra persona con conocimiento de tu pareja ( porque se tenga alguna especie de acuerdo o algo…), no me lo parecería.
Así yo lo hablaría con él. Si ya sabe que te pone el rollo relato, explícale en qué consisten estos chats y le propondría que él también probara. Si no quiere, dile que a tí te gustaría probar… a ver qué te dice.
Y respecto a tu duda de si es o no infidelidad… si te dice que le da igual, no se puede considerar infidelidad. Si le resulta incómodo y aún así decides hacerlo a sus espaldas, sí lo consideraría infidelidad.