Биограф Байрона, французский писатель Андре Моруа, довольно подробно описал в своей книге «Письма к незнакомке» этот шокирующий факт в жизни поэта: «Когда я писал книгу о его жизни, мне пришлось заниматься довольно щекотливыми разысканьями по этому поводу. Многие английские ученые отрицали, что Байрон и Августа Ли вступили в преступную кровосмесительную связь. В конце концов, его родственница (в то время ей было 85 лет) допустила меня к тайным семейным архивам. Я провел волнующую ночь, расшифровывая интимные дневники и письма.
К утру я уже все знал и с некоторым смущением отправился к достопочтенной хозяйке дома.
— Увы, леди Ловлас, — сказал я ей, — отпали все сомнения… Я обнаружил доказательства кровосмешения. Как добросовестный историк, я буду вынужден рассказать обо всем этом в полном согласии с документами… Заранее прошу меня извинить.
Она с изумлением воззрилась на меня:
— А, собственно, в чем вы извиняетесь?.. — спросила она. — Байрон и Августа? Ну конечно.
Неужели вы в самом деле сомневались?.. Как же иначе? Два юных существа разного пола оказались вдвоем в занесенном снегом мрачном замке и провели взаперти много времени… Как же, по-вашему, они должны были вести себя?
Из этого разговора я понял, что пресловутый запрет соблюдался в Англии XIX века не столь уж и неукоснительно».
Чтобы выпутаться из создавшегося положения, спустя два года Байрон женился на Анне Изабелле Милбэнк, происходившей из состоятельной аристократической семьи, строго придерживавшейся условностей света и требований церкви.
С самого начала семейной жизни жена Байрона стремилась приобщить его к религии, была против его общественной деятельности, которую он вел, став членом Комитета по управлению театром Друри-Лейн. В это время он много пил и, напившись, бил и ломал дорогие вещи, грозился привести в дом свою очередную любовницу, актрису Сюзан Буасси. На этой почве в семье постоянно возникали размолвки.
В декабре 1815 г.
у Байрона родилась дочь Ада Августа, а в январе 1816 г., то есть через год семейной жизни, жена Байрона ушла от него, фактически обвинив мужа в гомосексуальных наклонностях, что каралось тогда в Англии смертной казнью. Родители жены предприняли активные действия, чтобы начать бракоразводный процесс.
Байрон в эти дни писал ей: «…Относительно предъявленных мне обвинений ваш отец и его советники дважды отказались что-либо мне сообщить.