Он стал проводить свободное время без меня

Встречаемся с молодым человеком уже второй год. За это время пережили очень многое, два расставания. Первое очень болезненное, он встречался со мной и девушкой (с которой 3 года вместе), и меня в итоге оставил, когда стало все выясняться, мы не общались два месяца. Потом опять начали общаться и встречаться, он расстался с ней. За то время, когда мы не общались с ним, я не могла встречаться с другими, хотела очень забыть, но не могла. Вот и сейчас все было хорошо, у нас были замечательные отношения, но последний месяц я вижу, что все как-то остывает, хотя он говорит, что все хорошо. У него нет на меня времени, он все время занят, а в свободное время он предпочитает отдыхать дома с семьей, я уже не вхожу в его свободное время. Я вижу, что он остыл ко мне, мои вопросы на эту тему его только раздражают, и ответов ноль, говорит просто, что все хорошо. Я чего-то не понимаю. Как быть в такой ситуации?