Hola!
Si los dos os echáis de menos, a lo mejor deberías decirle que sientes cosas bonitas por él! Quizás él también por ti y por eso insiste tanto en veros. Sería una pena que por no hablar os perdáis cosas.
Y si él no siente igual, al menos entenderá por qué necesidas tiempo.