Тихий секс и ни каких разговоров

Здравствуйте. Вообщем я замужем,недавно появился мужчина(любовник),тоже женат. Работаем вместе,но по работе мало пересекаемся. Отношения начались 2месяца назад,хотя присматривался он долго,это было видно,мне он тоже нравился давно, но я думала не моего поля ягода,да и раньше я не изменяла мужу. Потом однажды просто притянул к себе и как бы на прощание поцеловал молча. В следующий раз бынастойчив,поцеловал более страстно и руки стал распускать. Я как то не ожидала и сказала что меня ждут и ушла. В следующий раз у него в кабинете он опять проявил инициативу,я сказала что могут войти,он закрыл дверь на ключ и дошло до секса. После молча поцеловал,попращались и я ушла. И так теперь и продолжается,секс и все,ни слова о том что я ему нравлюсь или ещё какие либо слова. Просто всегда все начинается и заканчивается молча. Встречаемся 1-2 раза в неделю у него в кабинете. Разговариваем только о работе или отстраненные темы. Кто мы друг другу,и что чувствуем не обсуждаем. Почему пошли на измену супругам тоже не обсуждали. Меня это как то напрягает. Но начать сама разговор незнаю как. И вообще надо ли? Нам просто хорошо вместе,по крайней мере я так думаю и ВСЁ! Ни звонков, ни СМС ,только на работе. Реально напрягает его молчание. Может кто-нибудь подскажет как быть? Дальше молчать или завести разговор? Как его вывести на разговор?