Hola!
Pues díselo tal cual, con asertividad, algo como «oye, me pillaste fuera de juego y te seguí el rollo por no montar un número, estuvo bien aunque no lo estaba buscando y me pilló por sorpresa. Lamento haberte confundido. Gracias por tu tiempo.» O algo así.