Lo de coger el móvil no está bien, no merece la pena, si no confías en él es mejor que lo dejes y además es un motivo de peso para hacerlo, la confianza es fundamental y cuando estás bien de verdad no hay desconfianza, sobretodo en tu caso que nunca has sido una persona celosa.
Además si su reacción ha sigo tal y como cuentas creo que él esta manipulando la situación.
No sé, pinta mal, yo no estaría nada bien en esa situación y creo que estar en pareja es para estar bien.
Un abrazo