Hola!
Por una experiencia super reciente, te digo que salgas de ahí, ahora que aún estás a tiempo y no tienes unos sentimientos demasiado intensos por él. Este chico tiene pinta de ser el típico que va huyendo de las relaciones convencionales porque le han ido mal y quiere dárselas de abierto, anarquista y poliamoroso -de ahí que te diga que puedes ver a más gente- y tampoco sentirse atado a una «pareja». Pero en el fondo, es un mar de inseguridades, por eso te dice que «POR FAVOR NO LE CUENTES NADA», porque eso le haría sentir que tal vez no seas su «prioridad». Huye, en serio, es del tipo de gente que quiere libertad y cero ataduras para sí misma, pero que si observa que su vínculo/pareja/novia/whatever ejerce la misma libertad, se raya y se monta una película de celos en su cabeza (que se callará porque si no, no parecía un moderno de cara a la galería). El poliamor es muy complicado y la mayoría de la gente se mete en relaciones así por la apariencia y por sentir que son «más libres» que en una relación monógamo (que tampoco es malo ser monógamo, pero bueno, al menos que lo reconozca, no?).
Yo he estado 8 meses en una relación así, «sin etiquetas», en la que nos decíamos te quiero y todo, y conocíamos a mucha gente del otro, la mayoría de iniciativas serias las tuvo él. Al final, se acabó agobiando al ver que lo nuestro progresaba y, al mismo tiempo, se rayaba y ponía celoso ante la posibilidad de que otras personas pudieran desplazar el sitio que él ocupaba en mi vida (en serio, unos marrones, planteando situaciones rocambolescas que probablemente nunca sucederían…). Ahora estamos en contacto cero a petición mía y, la verdad, que fácil para mí no está siendo la situación.
Si mantienes la relación, con el tiempo se irá consolidando y acabarás pasándolo peor que si te retiras ahora, porque él probablemente se agobiará al ver que os convertís en algo «serio» ante los ojos de los demás. Ánimo.