Смята се, че забременява своята полусестра, след което се жени за богата наследничка, но се развежда и през 1816 г. напуска Англия, за да избяга от всички слухове по негов адрес. През годините пребивава в различни страни. Смята се, че докато е живял в Италия, Байрън е имал 5 петела, две кокошки и един египетски жерав в дома си. Преди животът му да приключи на 36-годишна възраст, Байрън успява да запише още редица странности в личностната си характеристика, но това не променя факта, че той остава в историята и като един знаменит британски поет, водещо перо на английския романтизъм. Една от най-известните му поеми е „Дон Жуан“.