как реагировать на такие слова сына?

Предыстория, в разводе 2 года. Сыну было 3, когда мы уехали жить отдельно от папы. Объясняла ему все, почему так вышло. В общем, приезжает к папе раз в неделю, вроде нормально.
Но я вижу что ему скучно что мы вдвоем живем, тянется к родственникам, любит в гости ходить все время приглашает кого-то. Моя сестра сейчас беременна вторым, сын мой ждет ещё одну двоюродную сестричку с радостью) А вчера он мне говорит, жаль, что мы сюда переехали, лучше б остались у папы, потом правда перескочил на то, что давай с нами кто-нибудь будет ещё жить ( спрашиваю кто, он говорит, не знаю,реши сама) у тебя же есть место в комнате.
И итоговое обсуждение, а будет ли у нас такой же малыш, как у Кати и Леры ( это сестра и племянница мои).
Я правда растерялась, сказала, что с папой можно видится в любое время как он пожелает, кто-то когда-нибудь будет жить с нами и возможно будет малыш, но не сейчас, а позже..
Но на душе так погано стало. Кто сталкивался с этим? как правильно говорить с ребёнком на эту тему в возрасте 5 лет
Спасибо