El himen puede romperse con un golpe en un columpio o montando a caballo. Así que no, no tienen manera de saber si eres «virgen» o no.
Y lo entrecomillo porque, como han dicho por arriba, la virginidad es una construcción social que busca el control de la sexualidad femenina. No se necesita un pene o la penetración para dejar de ser «virgen», es decir, para tener algo de experiencia sexual. Y la experiencia que tienes tú contigo misma es igual de válida que la que tengas acompañada.