A mí me parece perfectamente normal y razonable que si te vas a vivir con él a su país quieras irte a vivir con él a su país. No con su hermano ni con su amigo ni con su prima. Sino con él.
Y también me parece que si él no es capaz de cambiar ni siquiera eso, mucho interés en que estéis juntos tampoco tiene.
No se trata entre elegir entre su hermano o tú. Se trata de elegir entre tener una relación con su pareja o ser compis de piso. Además, qué es eso de que él no puede mudarse? Ha intentado siquiera buscar trabajo en tu país?
En tu caso, igual ya lo has hecho, pero mira también con tu empresa si de verdad puedes trabajar desde otro país. Porque al cambiar de país de residencia hay aspectos legales que tus jefes deben de tener en cuenta.