在那裏，我所受的待遇並沒有我起初擔心的那麼可怕，因為我並沒像其他人一樣被帶到皇宮，而是被海盜船長留了下來，成了他的戰利品，給他做奴隸。這是因為我年輕伶俐，很合他的需要。我由一個商人變成了可憐的奴隸，這種境況的突變使我頓時沮喪到了極點。我回想起父親的預言，他說過我一定會受苦遭罪、孤立無援。他的話果然應驗了。我的處境實在再糟不過了，我已經受到上天的懲罰，永無出頭之日了。然而，唉，我的苦難隻不過才剛剛開始，真正的苦難大家看下文就知道了。
自打我的主人把我帶到他的家裏之後，我就滿懷希望地盼著他再出海時把我帶上，這樣他總有一天會被西班牙或葡萄牙的戰艦擒獲，到那時我就可以獲得自由了。但是我的這個希望不久便成了泡影。因為每次他出海都不是把我留在岸上看守花園，就是留在家裏做苦役。而每當他從海上巡邏回來，又讓我睡在船艙裏替他看船。
在這裏，我整天想著逃跑的事，盤算著用什麼辦法才能逃脫，可是總沒有什麼好主意。從當時的情況來看，我是不可能逃成的。因為我沒有人可以商量。除了我之外，沒有別的奴隸，或者其他的英格蘭人、愛爾蘭人、蘇格蘭人。就這樣過了兩年，這期間我雖然常用幻想寬慰自己，卻沒有看到一點使我的幻想得以實現的希望。
大約過了兩年，我的環境發生了特殊的變化，爭取自由的念頭又浮現在我的腦海裏。這個時期，我的主人待在家裏的時間比較多，不大去做他的海上生意了。據說這是由於沒有錢。每個星期，他都有一兩次，天氣好的時候甚至三四次坐著大船上的舢舨到海口去捕魚。每次去，總是叫我和一個名叫馬瑞斯科的小孩替他劃船。我們倆都很能討他的歡心，同時我的捕魚技術也很高明。因此有時他也叫我和他的一個摩爾人親屬，還有那叫馬瑞斯科的小孩三個人一起去替他捕魚吃。
一個風和日麗的早晨，我們正在海上捕魚，忽然起了大霧，雖然離岸還不到一海裏，但已經看不見岸了。我們漫無邊際地劃了整整一天一夜。到第二天早晨才發現我們不但沒有劃向岸邊，反而劃到海裏去了，離岸至少有兩海裏遠。不過，我們費了很大的勁才冒險劃了回來。那天早晨風很猛，並且我們都還餓著肚子。
這次意外使我們的主人提高了警覺，他決心以後出海要更加慎重。好在他有一艘大舢舨，是從我們英國大船上搶來的。他決定以後出海捕魚的時候帶上羅盤和糧食。他讓他船上的木匠——也是一個英國奴隸——在那舢舨的中間建一個小艙，跟駁船上的小艙一樣，艙後還要有一個可以容一個人掌舵、操帆的地方。前麵也要有可容一兩個人操作船帆的地方。這長舢舨上用的是一種三角帆，帆杆橫垂在艙頂上。船艙做得舒適緊湊，可以容他自己和一兩個奴隸在裏麵睡覺，還可以擺下一張吃飯的桌子，桌上安有些抽屜，裏麵放著幾瓶他愛喝的酒，還專門放置了麵包、米和咖啡。
我們經常乘這隻舢舨去捕魚，我的主人因為我很會捕魚，所以每次出海總帶上我。一次，他要和兩三位當地有地位的摩爾人一起坐這隻船到海上去閑蕩或捕魚。為了款待他們，他吩咐我們大肆準備。頭一天晚上就讓人把許多食品送到船上，還讓我把他那艘大船上的三支短槍和火藥準備好，因為他們不光捕魚，還想打鳥。