Прекратите практику осуждения (словесного или взглядами, вздохами) того, что он «опять с этими идиотами…» или «опять ушел в свою комнату».
Понятно, что вы тоже устаете. И он это понимает.
Только прямой спокойный разговор БЕЗ ПРЕТЕНЗИЙ может установить рамки для вас обоих.