那個時候，還沒有淩府，他爹爹淩遠峰還沒有娶二娘，爹、娘、她三個人與紅拂師父母子二人住在無涯山莊。他爹爹每日研讀詩書，她娘親織布種田，和普通人家一樣過著雖然簡單但卻快樂的生活。她也偶爾跟著顧傾城向師父學點防身之術。
他爹爹還告訴過她，紅拂師父，也就是顧傾城的娘親，和她的娘親葉素素本是同門師妹，曾經是江湖上小有名氣的“紅粉雙俠”，因為一些變故，她們退出了江湖，繼而隱居在此。淩雨霏猜測，這變故也許是因為顧傾城的爹吧！從開始記事起就從沒聽到過關於他的隻字片語，這裏麵一定是有原因的。
在無涯山莊的日子，是溫馨而又甜蜜的。在她的記憶裏，葉素素總是穿著樸素的衣衫，做著可口的飯菜，看到她吃得香甜樣子，總是溫柔地笑著，眼中的光彩是慈愛的，是美麗動人的，哪裏看得出一絲江湖俠女的氣息？
而淩遠峰一點也不像現在這樣膽小勢力，唯唯諾諾，連自己的女兒都保護不了。那個時候淩遠峰在她眼中的形像是高大，正直的。他飽讀詩書，學富五車，出口成章，淩雨霏總是為自己有這樣的爹和娘而自豪！
爹爹能文，娘親能武，師父總是笑著說，我們霏兒以後一定會是文武雙全的妙女子。而總愛調皮搗蛋的顧傾城這個時候就會跳出來叫道“娘，我以後的娘子一定是要像師妹這樣文武雙全的妙女子！”師父和娘親總是相視一笑。
再後來，顧傾城一見到她，就自然而然地“娘子”來，“娘子”去了。那時候淩雨霏還小，還不知道何謂娘子，更不會生氣臉紅，她隻會哇哇大哭，因為隻要這家夥一出現，除了欺負她，就還是欺負她，好像以此為樂。等師父安慰好她，不哭了，顧傾城就又會笑她“我娘子是個愛哭鬼！”
時間久了，小小的她心裏便埋下了一顆要報仇的小種子。師父和她娘一樣，會燒一手好菜。他們常常是兩家人在一起吃飯，要麼師父做，要麼是她娘做。
慢慢的，她就發現了顧傾城最喜歡吃的兩個菜。於是到了吃飯時間，仗著師父比較疼她，她總是可以比顧傾城先到飯桌一步，把他喜歡吃的菜趕緊扒拉到自己碗裏，然後看著顧傾城吃癟的樣子，心中悶笑不已。
而顧傾城是比較挑食的，沒有了他喜歡吃的菜，就不願再動筷子了。他也懶得去爭什麼，看著她得意的樣子，隻是輕淡描寫地說“霏兒，你還能多吃一點嗎，我可不喜歡有一個小胖子一樣的娘子。”
於是，在大家的笑聲裏，她羞紅了臉，拿著筷子吃也不是，不吃也不是。
快樂的時光總是那樣短暫，就在她四歲的某一天，她娘沒有留下隻言片語，悄然離去。她哭紅了雙眼，無助地看著爹，求他把娘找回來，他爹卻什麼也沒說，抬起手幫她擦去眼淚，然後收拾了東西，帶著她來到了水洛城，開了間書坊。