¡Hola! En mi opinión deberías hablar con él sobre lo que pasó, por que no le contestaste…etc. Probablemente él estará molesto por eso, aclara las cosas con él y si todo va a mejor y volveis a estar bien, genial. Si no pues a otra cosa, por lo menos te habrás quitado la duda de si él quiere algo o no.
Sobre lo de que te da miedo porque no tienes experiencia es normal, pero cuando una persona de verdad quiera estar contigo entenderá tu situación y te ayudará perder ese miedo.