Сплетни о том, что сплю с начальником

Всем доброго дня. У меня следующая ситуация. Мне 32, устроилась на работу в одну организацию. Работаю там 4 месяца и все это время ходят слухи о том, что я сплю с начальником, хотя на самом деле у нас ничего нет. Общаемся мы с начальником реже, чем с ним общаются другие коллеги. На работе я соблюдаю строгий дресс-код, вообще не выгляжу вызывающе. Даже туфли на каблуках перестала носить, чтобы "не выделяться" из толпы. Однако, слухи реально не утихают. Работать в такой атмосфере тяжело. Невозможно просто зайти к начальнику, чтобы подписать документы, сразу заметны многозначительные взгляды в коридоре офиса из типа "Опять она к нему пошла". Самого начальника эти сплетни тоже уже выводят из равновесия. Потому что в последнее время он эмоционально негативно реагирует лишь на то, что я ему говорю "Здравствуйте" в присутствии других сотрудников. Прошу вашего совета в этой ситуации. Увольняться-не лучший вариант, Т.к. пачкать трудовую книжку частыми записями о новой работе не очень хорошая идея. Если у Вас была такая ситуация, как вы вышли из неё?