Se llama amaxofobia, y es más corriente de lo que parece. La mejor solución es acudir a una autoescuela especializada y hacer unas prácticas para ir perdiendo el miedo. Un par de visitas a algún psicologo/a también te vendrían bien. Conozco a varias personas que han pasado por eso, y todas han acabado conduciendo otra vez. Con más o menos ganas, pero sin pánico ni angustia.
Ánimo, intentalo si quieres, que seguro que lo sacas adelante. Un gran abrazo.