Его скрытность меня напрягает

Два года назад узнала, что у мужа есть близкая подруга, бывшая коллега по прежнему месту работы. Они общались уже лет 6, а он никогда даже не упоминал ее имени для меня. Когда я пристала с расспросами, удивился, что я знаю, но тут же сказал, что это только дружба, что она хороший человек и очень помогла ему, что он мне не изменяет. Мои претензии, почему не рассказал, ответил, что я бы не поняла и вообще, что тут говорить, было видно, что разговор ему не приятен. Внешне отношения у нас хорошие, мы много общаемся, отдыхаем только вместе, если я не могу куда-то с ним пойти, вижу, что он огорчается. Нежен со мной. Я не могу удержаться и периодически лезу к нему в телефон и вижу, что они общаются. Но когда пытаюсь расспросить он очень напрягается, вроде и не скрывает, но сразу пытается сменить тему разговора. Если это только дружба, зачем так от меня скрывать?? Надо ли пытаться говорить с ним об этом? Разговора не получается и мне это нелегко дается. Если бы не это, я бы считала, что у нас в семье все очень хорошо. Но его скрытность меня напрягает.