拜倫的母親本以為她和這個海軍軍官之間是真正的愛情，可是當她發現他隻是為了錢才娶她時，她也深深後悔。但是，她又是那麼愛他，她寧可死也不願意離開他。
１７８７年，傑克為了躲避債主逼債，再次潛逃到法國；當時，大腹便便的戈登小姐，當然也緊跟著到了法國。戈登小姐已經有了身孕，行動非常不便。
這時的傑克早已囊空如洗，他每天從妻子那裏拿一點錢來負責一家的吃穿用，還把自己和前妻所生的女兒奧古絲塔交給她撫養！
可憐的戈登小姐，不僅一句法語也不會說，還懷著身孕，可是她仍然對她的丈夫一往情深。她一直待到快要生產時，才帶著那小女孩回到英國，把她交給孩子的祖母，自己則在倫敦找了一個地方住下來等待臨盆。
在這種糟糕的境遇下，拜倫出世了。那是１７８８年１月２２日。母親給他取名為喬治·戈登·拜倫。
拜倫的出生並沒有給這個家庭帶來一點歡樂。拜倫的母親每年隻有１５０英鎊的收入，這些收入要供養保姆和仆人，還要給拜倫的父親去法國遊玩。她的日子過得很辛苦。於是她變得很敏感和脆弱，經常拿剛出生的小拜倫出氣。每當拜倫啼哭的時候，她都會大聲地叫罵、嗬斥這個幼小的生命。
當拜倫學走路的時候，他們發現他的腿有問題——他是“瘸子”。
這讓拜倫的母親更加惱火，父親是糊塗蟲，兒子是“瘸子”，這樣不幸的事情對於一個女人來說是多麼殘酷。拜倫的母親幾乎要崩潰了。她非常想讓兒子看起來正常一些，可是她不是醫生，對於拜倫的跛腳，她無能為力。
拜倫的父親在拜倫３歲的時候在法國的郊區死去了。他貧病交加，幾乎是餓死的。
在極度絕望過後，拜倫的母親會突然發起狂來。她把跛腳的拜倫看作是上天對她的懲罰。她把拜倫的跛腳看成是兒子故意和她作對，所以她會說出很多惡毒而又難聽的話來。在拜倫稍微長大一點之後，她便命令女仆每天晚上用繃帶綁著他的腳睡覺。這類似於中國古代女人“裹腳”之類的矯正方法，使得拜倫非常痛苦。
有一次，女仆帶著拜倫在阿伯丁的街上散步。一個婦人經過他們旁邊，她看著拜倫說：“呀！多麼漂亮的孩子！可惜是個瘸子！”
拜倫用燃燒著憤怒的目光盯住她，用手上玩的鞭子抽打她，大聲說：“不許你這樣講！”
幼小的拜倫對這種腳部的殘疾感到羞恥，想到自己不能像別的孩子一樣正常走路的時候，他覺得自己像中了上帝的詛咒一樣。為此他經常偷偷在床上哭。
除此之外，他還要忍受母親的怪脾氣。對於這個生來就比別人加倍敏感的孩子來說，這樣的心理負擔實在是太沉重了。他的性格逐漸變得憂鬱。他已經不像其他的孩子那樣天真活潑了。
拜倫的母親本以為她和這個海軍軍官之間是真正的愛情，可是當她發現他隻是為了錢才娶她時，她也深深後悔。但是，她又是那麼愛他，她寧可死也不願意離開他。
１７８７年，傑克為了躲避債主逼債，再次潛逃到法國；當時，大腹便便的戈登小姐，當然也緊跟著到了法國。戈登小姐已經有了身孕，行動非常不便。
這時的傑克早已囊空如洗，他每天從妻子那裏拿一點錢來負責一家的吃穿用，還把自己和前妻所生的女兒奧古絲塔交給她撫養！
可憐的戈登小姐，不僅一句法語也不會說，還懷著身孕，可是她仍然對她的丈夫一往情深。她一直待到快要生產時，才帶著那小女孩回到英國，把她交給孩子的祖母，自己則在倫敦找了一個地方住下來等待臨盆。