Lo mejor es que tengas la custodia compartida con tu pareja, a la larga es lo mejor para el niño ya que puede disfrutar el mismo tiempo de ambos padres. Por lo que comentas de que se lo lleva el fin de semana parece que es un padre que también se implica.
La mayoría de los niños siempre pasan por épocas de sentir más afinidad con un progenitor que por el otro pero es algo completamente normal y en ningún momento quiere decir que te quiera menos. Así que no te preocupes por eso, siempre será tu hijo y si eres buena madre te querrá igual que querrá a su padre si es buen padre.
En cuanto a las relaciones claro que es posible. No todo el mundo queremos relaciones con gente con hijos pero hay mucha gente que si quiere.