No cedas. Usar un condón no le afecta en nada. En cambio, como ya te imaginarás, cualquier anticonceptivo hormonal que uses te va a traer efectos secundarios, en mayor o menor medida, pero cualquiera te va a afectar, ya sea la libido, el estado del ánimo, el peso, sangrados, etc.
Háblalo seriamente con él y si sigue pensando que está bien no usar condón a costa de que tú te veas afectada sin quererlo, plantéate qué tan bueno es realmente estar con un tipo así.