Помогите понять, что делать

Начну с того что мне 30, есть двое детей от двух предыдущих браков, отношения в которых я заканчивала сама и на то были причины, нет не измены, а просто в какой то момент я понимала, что не люблю, а для меня это все таки очень важно. Может это плохо, но я никогда не буду жить с отцом своих детей, чтобы детям было лучше, потому что считаю, что в семье, где партнёры не хотят быть по сути вместе, детям хорошо не будет.
Теперь про то что хочу понять. Чуть меньше года назад у меня начались отношения с мужчиной, у него тоже двое детей и жена с которая подавала на развод в момент начала наших отношений. Я это знаю не от него, а от общих знакомых, которых у нас много, то есть тут нельзя сказать, что он что то мне придумал, так было. Потом он ей рассказал про то что у него появилась другая женщина и на этом моменте развод она решила остановить и сделать все чтобы он проводил время где и как угодно, главное чтобы не вместе со мной. И тут с одной стороны я понимаю, что настаивать на разводе я не буду никогда, это дело его и ее и их решение. Я готова на то чтобы отойти и не мешать им, потому что в планах рушить семью у меня не было, но как только я начинаю об этом говорить он начинает клясться в любви, говорить, что все будет хорошо и пр. Он очень много работает, когда не работает , это ну дня три четыре в месяц, он проводит их с детьми, к чему у меня никогда не было и не будет претензий, ни к работе, ни к детям. И живут они все вместе так как некуда разъезжаться. Так вот вопрос, в том, что меня держит полное непонимание ситуации, если любит меня, то сейчас это проявляется только на словах, потому что мы видимся сейчас раз в месяц и мне конечно непросто это все, потому что я сижу и жду непонятно чего, а с другой стороны очень сложно уйти, потому что я его люблю, но это мое чувсово и я могу вместе с ним и уйти, но больше всего мешают уйти его слова о том что я ему нужна и он тоже любит. Разговоры переговорены уже сто раз и я понимаю, что тут надо понять и решить мне все самой, но это ужасно сложно, особенно когда каждый раз я слышу от него эти слова о том что он любит