郭靖和黃蓉，此次來嘉興，原本是打算召集丐幫長老處理幫務，順便打聽洪七公與黃藥師的下落，但遇到楊過中毒，隻有先行歸島。
楊過雖然兩世為人，卻從來沒有見過大海。楊過立在船頭，極目遠眺。望著一望無銀的大海，心胸寬了許多，覺得自己也應該像大海一樣，容納百川，包容一切。這幾日四小已經混熟，郭芙見楊過獨自站在船頭便邀楊過一起玩耍，楊過左右無事便隨她去了。
郭靖和黃蓉，見四小相處融洽，很是高興。提起楊過，郭靖說道：“蓉兒，你知我素來有一個心願，今日天幸遇到過兒，我的心願有望了！”當年郭靖之父郭嘯天與楊過的祖父楊鐵心義結兄弟，兩家妻室同時懷孕。二人相約，日後生下的若均是男兒，就結為兄弟，若均是女兒則結為金蘭姊妹，如是一男一女，則為夫婦。後來兩家生下的各為男兒，郭靖與楊過之父楊康如約結為兄弟。但楊康認賊作父，多行不義，終於慘死於嘉興王鐵槍廟中。郭靖念及此事，常耿耿於懷。此時這麼一說，黃蓉知他是想將郭芙許配給楊過，當下便道：“我不同意”。
郭靖愕然道：“怎麼不同意？”黃蓉道：“芙兒怎麼能許配給這小子！”郭靖道：“他父雖然行止不端，但郭楊兩家世代交好，我瞧他相貌清秀，聰明伶俐，今後跟著咱倆，將來不愁不能出人頭地。”黃蓉道：“我就怕他聰明過份了。”郭靖道：“你不是聰明得緊麼？那有甚麼不好？”又道：“我爹爹就隻這麼一個遺命，楊鐵心叔父臨死之際也曾重托於我。可是於楊康兄弟與穆世姊份上，我實沒盡了甚麼心。若我再不將過兒當作親人一般看待，怎對得起爹爹與楊叔父？”言下長歎一聲，有憮然之意。黃蓉柔聲道：“好在個兩孩子都還小，此事也不必急。將來若是過兒當真沒甚壞處，你愛怎麼就怎麼便了。”
郭靖站起身來，深深一揖，正色道：“多謝相允，我實是感激不盡。”黃蓉也正色道：“我可沒應允。我是說，要瞧那孩子將來有沒有出息。”郭靖一揖到地，剛伸腰直立，聽她此言，不禁楞住，隨即道：“楊康兄弟自幼在金國王府之中，這才學壞。過兒在我們島上，卻決計壞不了，何況他這名字當年就是我給取的。他名楊過，字改之，就算有了過失，也能改正，你放心好啦。”黃蓉笑道：“名字怎能作數？你叫郭靖，好安靜嗎？從小就跳來跳去的像隻大猴子。”郭靖瞠目結舌，說不出話來。黃蓉一笑，轉過話頭，不再談論此事。
幾日後，桃花島到了。船將近島，楊過已聞到海風中夾著撲鼻花香，遠遠望去，島上鬱鬱蔥蔥，一團綠、一團紅、一團黃、一團紫，端的是繁花似錦。郭芙笑道：“怎麼樣漂亮吧？”小武忙道：“漂亮！真漂亮！從未見過這麼多，這麼好看的花。”郭芙甚是得意，笑道：“這有什麼？若在陽春三月，島上桃花盛開，那才教好看呢！”。上得島來，有郭大小姐充當導遊，楊過和大小武開始遊覽桃花島。
楊過服了黃蓉配置的解藥，身上餘毒已清。這幾日楊過沒有同三小捉迷藏，鬥蟋蟀，而是將桃花島逛了個遍。在試劍鋒的山腰找到了一個山洞，在其他地方也發現了幾個比較隱蔽的地方。他準備把這些地方作為他日後練武的場地。
楊過幾日沒有洗澡，身上難受，他不喜歡用澡盆洗澡，見大人們都在精舍之內閑聊，三小在淸嘯亭捉迷藏。便偷偷溜到海岸邊的巨石之後，脫了精光，歡叫一聲，越入海中。他自小在江邊長大，水性極好，洗淨身體後在海中暢遊了好一陣子，直到精疲力盡，才上的岸來。身體未幹，也不急著穿衣，就地打起太極拳來。幾招下來就感覺疲憊盡消，渾身舒坦，竟然進入到武林中人夢寐以求的物我兩忘境界中。
第二遍拳打道白鶴晾翅時，身邊忽然傳來一聲穿金裂石的尖叫“啊”，楊過從物我兩忘境界中退了出來，下次再想進入就不知何年何月了，心中一陣氣惱。抬眼望去就見郭芙用手捂著臉，站在那裏。原來他與大小武玩捉迷藏，漸漸的範圍越玩越大，這次輪到大武找人，郭芙便想到巨石之後躲藏。剛好看到楊過在裸“舞”，她哪裏見過這等風景，便本能地發出尖叫。見楊過看來，趕忙轉身又羞又怒道：“楊過你在作死嗎？臭流氓，你不穿衣服在這裏亂扭什麼？”楊過心中有氣，心道“好啊，我還沒有怪你打擾我練功，你返道怪起我來，真是豈有此理？”慢慢穿著衣服，口中冷冷道：“哼，得了便宜還賣乖，明明是你偷看我洗澡，卻說我耍流氓。放心，我不會逼你負責的。”郭芙一聽這話登時被氣得一佛出世二佛升天，轉身指著楊過罵道：“臭流氓，你胡說八道！誰偷看你洗澡了···明明是你不尊禮數······”看到楊過那風清雲淡模樣，罵著罵著便罵不下去，急的大哭起來，楊過心中有氣也不理她。