Воронов и сам вёл жизнь богача и звезды: снимал первый этаж первоклассного отеля, содержал двух любовниц, большой штат прислуги, секретарей, охранников и шофёров. Впрочем, и его законные жены не жаловались на недостаток внимания со стороны супруга, но первые две умерли одна за другой, лишь третья пережила своего мужа.
Слава Воронова была немного «засалена», как говорят французы. Доктор не скрывал, что его операции ведут в том числе к бурной сексуальной активности, отсюда нездоровый ажиотаж вокруг его деятельности. Манипуляции с яичками стали темой множества анекдотов и эстрадных куплетов в Старом и в Новом Свете. Во Франции в эти годы вошла в моду пепельница, украшенная статуэткой обезьяны, прикрывающей лапами гениталии, и надписью: «Нет, Воронофф, меня не возьмёшь!» С другой стороны, вдумчивые авторы высказывали опасения – ведь никто не знал, какие последствия ждут пациентов Воронова в будущем и каким будет их потомство.
В действительности эффект операций Воронова, как и инъекций Броун-Секара, оказался непродолжительным. Впоследствии учёные установили, что вещество, содержавшееся в яичках, – это тестостерон, он оказывает лишь временное воздействие на организм человека. Научное сообщество отвернулось от Воронова, газеты, прославлявшие его эксперименты, теперь издевались над ним. На него возводили напраслину, например, уже в 1990-е годы высказывались предположения, что это он в ходе своих операций занёс вирус СПИДа человеку. Только в последнее время медицина вновь признала заслуги Воронова в борьбе со старостью.