Муж ушел к любовнице, но продолжает приходить к нам

Здравствуйте. У меня ушел муж почти 4 месяца назад. Двое детей, дочь 12 лет и сыночек, годик. Прожили в браке 14 лет. Думала, на всю жизнь, а нет, вот как бывает. Узнала о любовнице будучи на 4м месяце беременности. Муж ничего не отрицал, сразу признался во всем, но отказаться от этих отношений прямым текстом отказался. Из семьи не уходил, но все вечера и выходные проводил с ней. Уговоры не разрушать семью, мои попытки наладить отношения ни к чему не привели. А любовница ставила вопрос ребром, но он долго не решался. Тогда она решила с ним прекратить отношения, но он сам не свой гонялся за ней почти три месяца. Она вернулась к нему, и он, соответственно, ушел из семьи. Приходит к нам почти каждый день, и официально воскресенье для любовницы он с детьми, такой уговор. Ни разу за все это время он не говорил серьезно, как дальше будем жить. И никаких извинений я не слышала. Кроме того, что это жизнь, люди расходятся. Проблема в том, что я живу с его родителями, в его доме. Идти мне некуда, я в декретном отпуске, заработка нет. Приходит в любой момент без предупреждения, ну конечно, это его дом, и он имеет на это полное право. Но меня это очень напрягает. Считаю, уходя уходи. Тяжелы для меня такие приходы набегами. О разводе пока не говорит. Дети к нему тянутся, скучают. Но если какая проблема, он прежде решает ее там, а потом уж дело доходит до нас. Самое печальное, я не вижу выхода. Измену, предательство простить никогда не смогу. Жить так невмоготу. Ведь тоже хочется какой-то своей "личной жизни".