En normal que no quieras quedar con ellos si te apetece hacer otros planes y tienes todo el derecho en hacer lo que creas conveniente y prefieras. Eso si, si ellos están bien tal y como están ¿para que forzar que hagan lo que tú quieras? Ellos no te obligan a estar ahí, tampoco puedes obligarles a dejar de hacerlo.
No pasa nada por alegarse de gente que no te aporta nada, busca gente que si comparta tus mismos intereses.