Cuñado en casa. desesperación total

Hola. A ver si alguien puede ayudarme. Llevo 6 años viviendo con mi novio, tenemos un hijo de 5 años y estamos a tres meses de tener el segundo. El hermano de mi novio lleva viviendo con nosotros 4 años. Al principio lo acepté bien y me caía bien. Pasados dos años ya no lo aguantaba, nos peleamos y ya no nos hablamos.
Ya le pedí a mi novio que por favor le pida a su hermano que se vaya, ya no podemos vivir así. Su hermano es de mi edad y trabaja, y no tiene ninguna discapacidad ni incapacidad. Me parece que podría salirse a rentar a cualquier otro lado en lugar de estar aquí. Ya no cabemos en el departamento y ya viene el nuevo bebe. Quiero arreglar la habitación para el bebe, sacar su ropita, pero no puedo, nada cabe! No quiero que viva aquí el hermano para cuando llegue mi bebe.
Tal vez estoy siendo egoísta, por favor alguien que me ayude con esto porque llevo años sin poder lograr que se vaya o en quedarme conforme con el viviendo aquí. Gracias.