自从发现之前仆人成群的柳府变成一座空宅后，柳府附近便不停有来历不明之人打听柳家人的去向和下落。这些人中有少年剑客，有光秃秃的和尚，更有年轻貌美的尼姑、还有道貌岸然的道士。除了在柳府门前打听柳家人的下落，也有不少江湖人士立刻前往伍夫人住处打听，可惜的是伍夫人也消失得无影无踪。
这些江湖人士问之前个个眼睛发亮，待听到不知去向后便黯然无光，犹豫一阵后便走了。但也有不少人并不甘心，呆在柳府和伍夫人附近住了下来，天天不时盯着这柳府和伍夫人家，同时也不停歇的四处打听。时间一久，便也按捺不住悄然离去。
也有些胆大的趁夜晚到蜀山查看或者干脆和下山的蜀山弟子套近乎，不外乎就是打听伍乔和柳依依是否被逐出蜀山，是否知道下落等。不用说，得到的答案肯定是两人不在蜀山而且确实被逐出师门。
三四个月后便再也没有人来这柳府附近，慢慢的柳府就成了一些无家可归的叫花子的家，再慢慢的柳府开始慢慢破损衰败下来。
这期间偶尔龙云也来看过几次，看了看这景象都感叹不已，眼里冲满了担忧，不知在担忧些什么。偶尔他也会问问掌门师兄李逍遥关于两个徒弟的信息，可每次李逍遥都笑着摇了摇头。。。
尽管无法找到柳依依和伍乔，但江湖人士更加相信两人身上藏有异宝，要不不会无缘无故失踪。对此这谣言不仅没有消失，反而传得越来越广，但可惜的是并没有相关人士找到两人。
两年后，也就是柳依依、杨玉环、伍乔三人九岁时，蜀州司户杨玄琰突然得了一种怪病，毫无征兆就莫名其妙的瘫软在地，吓得杨夫人手足无措，杨玉环等人更是眼泪连连。
也许是自知活不了多久，杨玄琰拉着杨夫人的手有气无力的说道：“夫人，我快不行了，赶紧去请弟妹过来，我有一件事和她商量下。”
这时杨府的走廊上，一个年约三十来岁的少妇和一个年约九岁的男孩急匆匆的朝杨玄琰的厢房走来。只听那男孩说道：“娘，您不用急，杨伯父吉人自有天相，不会有事的。”
那少妇说道：“乔儿，咱们蒙杨家照顾，如果你有什么办法一定要尽全力救助杨伯父，不仅仅是为了我们自己，也是为了还这一份恩情。”
随着两人的走进，这才看出这少妇是伍夫人，那男孩便是那失踪的伍乔。自从龙云那天下午将苦衷讲了一下后，柳三变便开始了搬迁计划。好在有灵兽盼盼，每天晚上帮忙偷偷“运输”一些人，所以不知不觉间便将柳府搬空，左领右舍自然无从知晓。
那一次伍乔回家便是和伍夫人讲述此事，考虑到儿子的未来，伍夫人自是想到了自己的“亲家”杨玄琰。待再次拜谢龙云的授艺之恩后，灵兽盼盼便载着伍夫人和伍乔朝杨玄琰家飞来。飞到杨玄琰府邸后，为了怕灵兽盼盼吓到众人，伍乔让盼盼再回蜀山禁地修炼，而他则和伍夫人呆在杨府。
这杨玄琰为官几年，可惜不懂得阿谀奉承，上下打点，所以几年下来没有任何升迁。也正因为如此，所以伍夫人这才顺利的凭记忆找到了杨府。
到杨府后，杨玄琰自是高兴异常，好好安顿了伍夫人和伍乔。仔细的问了下伍乔这几年的一些状况，同时将伍乔送进私塾。这伍乔不愧是文曲星转世，不仅一点就通而且过目不忘，把个老夫子高兴得不得了，恨不得将平生所学一股脑的教给伍乔。
每次杨玄琰“测试”自己的子女包括杨玉怀和伍乔，每次不管是诗词也好、对联也罢，伍乔总是第一个回答出来。这让杨玄琰惊奇不已，不停夸赞，自此更是抽出时间来尽心辅导伍乔，这让杨玄琰的几个子女包括杨玉环都妒忌不已。
杨玉怀的大哥杨钊则有意无意的调侃杨玉环：“妹妹，听娘亲说你和那小子订了娃娃亲。看父亲对这小子的器重，只怕这事十有八九是真的了。”
杨钊这么一说，杨玉环的几个姐姐自是跟着起哄。杨玉环受此一惊，气鼓鼓的说道：“谁愿意嫁给那个自作聪明的小子了，要嫁你们嫁好了。”
杨钊眼珠子一转：“妹妹，是不是真的啊？如果你真的不喜欢这小子，要不咱们几个捉弄他一下如何？让他以后少自以为是，抢咱们的风头，如何？”
杨玉环自然不反对，于是杨氏兄妹五人商议好后，由杨钊负责找几个街头痞子并叮嘱了他们一番。次日五人将伍乔约到郊外，想让那几个痞子“教训”伍乔下。
伍乔哪里聊到这是杨钊几兄妹整他的计谋，眼见那几个痞子恶狠狠的走来，当下毫无畏惧的走了过去。不用说三下五除二便将那几个痞子打得哭爹喊娘，狼狈不堪的逃走了。
这下可将杨钊几兄妹给彻底折服了，文不如伍乔，武也不如伍乔，自此这几人包括老大杨钊对伍乔也是客客气气的。不过这杨钊也有了底气，在外惹是生非了便找伍乔帮忙。由于欠杨家一个人情，伍乔自然不会拒绝。只是每次都蒙着脸，怕将自己的身份暴露。
就这样白天习文，晚上修炼蜀山技艺，伍乔的文武均有较大的提升。可惜好景不长，没有料到今天杨玄琰突然身患急症。如果有个三长两短，不仅杨夫人一家会陷入困境，自己和伍乔只怕也没有安身之所。边走边看了看伍乔，伍夫人忧心忡忡的想着。
