數年後，柳生三次踏上黃色大道。
雖然他依舊揹著包袱，卻已不是赴京趕考。自從數年前葬了小姐，柳生儘管依然赴京，可心中的功名漸漸四分五裂，消散而去。故而當又是榜上無名，柳生也全無愧色，十分平靜地踏上了歸途。
數年前，柳生落榜而歸，再至安葬小姐的河邊時，已經無法確認小姐的墳冢，河邊驀然多出了十數座墳冢，都是同樣的荒涼。柳生佇立河邊良久，始才覺得世上斷腸人並非只他一人。如此一想倒也去掉了許多感傷。柳生將那些荒冢，一一除了草，又一一蓋了新土。又凝視良久，仍無法確認小姐安睡之處，便嘆息一聲離去了。
柳生一路行乞回到家中時，那茅屋早無蹤影。展現在眼前的只是一塊空地，母親的織機也不知去向。這情景尚在柳生離開時便已預料到了，所以他絲毫沒有驚慌。他思忖的是如何活下去。在此後的許多時日里，柳生行乞度日。待世上的光景有所轉機，他才投奔到一大戶人家，為其看守墳場。柳生住在茅屋之中，只幹些為墳冢除草添土的輕鬆活兒，餘下的時間便是吟詩作畫。雖然窮困，倒也過得風流。偶爾也會惦記起一些往事，小姐的音容笑貌便會栩栩如生一陣子。每臨此刻，柳生總是神思恍惚起來，最終以聲嘆息了卻。如此度日，一晃數年過去了。
這一年清明來到，主人家中大班人馬前來祭掃祖墳。丫環婆子家人簇擁著數十個紅男綠女，聲勢浩蕩而來。滿目琳琅的供品鋪展開來，一時間墳前香菸繚繞，哭聲四起。柳生置身其間，不覺淚流而下。柳生流淚倒不是為墳內之人，實在是觸景生情。想到雖是清明時節，卻不能去父母墳前祭掃一番，以盡孝意。隨即又想起小姐的孤墳，更是一番感慨。心說父母尚能相伴安眠九泉，小姐獨自一人豈不更為悽慘。
次日清晨，柳生不辭而別。他先去祭掃了父母的墳墓，而後踏上黃色大道，奔小姐安眠的河邊而去。
柳生在道上行走了數日，一路上盡是明媚春光，奼紫嫣紅的歡暢景緻接連不斷。放眼望去，一處是桃柳爭妍，一處是桑麻遍野。竹籬茅舍在綠樹翠竹之間，還有澗溝裡細水長流。昔日的荒涼景象已經銷聲匿跡，柳生行走其間，恍若重度首次踏上黃色大道的美好時光。昔日的荒涼遠去，昔日的繁榮卻捲土重來，覆蓋了柳生的視野。然而荒涼和繁榮卻在柳生心中交替出現，使柳生覺得腳下的黃色大道一會兒虛幻，一會兒不實。極目遠眺，雖然鮮豔的景緻歡暢跳躍，可昔日的荒涼並未真正銷聲匿跡，如日光下的陰影一般遊蕩在道旁和田野之中。柳生思忖著這一番繁榮又能維持幾時呢？
柳生一路走來，遇上幾個赴京趕考的富家公子，才驀然想起又逢會試之年。算算自己首次赴京趕考，已是十多年前的依稀往事。再思量這些年來的無數曲折，不覺感嘆世事突變實在無情無義。那幾個富家公子都是一樣的躊躇滿志。柳生不由為之嘆息，想世事如此變化無窮，功名又算什麼。
道兩旁曾經是傷痕累累的枯樹，如今枝盛葉茂。幾個鄉里人躺在樹蔭下佯睡，這一番悠閒道出了世道昌盛。迎風起舞的青青芳草上，有些許牛羊懶洋洋或臥或走動。柳生如此走去，不覺又來到了岔路口，近旁的河流再度出現在他眼前。
那正是他首次赴京時留跡過的河流。河旁的青草經歷了滅絕之災，如今又茁壯成長。而長柳低垂的柳樹曾狀若屍骨，現在卻在風中愉快搖曳。柳生走將過去，長長的青草插入褲管，引出許多親切。來到河旁，見河水清澈見底，水面上有幾片綠葉漂浮。一條白色的魚兒在柳生近旁游來游去，那扭動的姿態十分嫵媚。這裡的情形居然與十多年前所見的毫無二致，使柳生一陣感慨。看魚兒扭動的嫵媚，怎能不想起小姐在繡樓裡的嫵媚走動？想到數年前這裡的荒涼，柳生更是感慨萬分。樹木青草，河流魚兒均有劫後的興旺，可小姐卻只能躺在孤墳之中，再不能復生，再不能重享昔日的榮華富貴。
柳生在河旁站立良久，始才悽然離去。來到道上，那城已依稀可見，便加快一些步子走將過去。
柳生來到城門前，聽得城中喧譁的人聲，又窺得馬來人往的熱烈情形。看來這城也復原了繁華的光景。柳生步入城內，行走在街市上，依然是五步一樓，十步一閣。金粉樓臺均已修飾一新，很是氣派。全不見金粉剝落、樓臺蛛網遍佈的潦倒模樣。街市兩旁酒店茶亭湧出無數來，賣酒的青帘高挑，賣茶的炭火滿爐。還有賣面的，賣水餃的，測字算命的。
肥肥的羊肉重新掛在酒店的櫃檯上，茶亭的櫃子上也放著糕點好幾種。再看街市裡行走之人，大多紅光滿面，精神氣爽。
幾個珠光寶氣的仕女都有相貌甚好的丫環跟隨，遊走在街市裡。一些富家公子騎著高頭大馬也擠在人堆之中。柳生一路走去，兩旁酒保小廝招徠聲熱氣騰騰。如此情景，全是十多年前的佈置。柳生恍恍惚惚，彷彿回入了昔日的情景，不曾有過這十多年來的曲折。
片刻，柳生來到那座廟宇前。再看那廟宇，金碧輝煌。廟門敞開，柳生望見裡面的百年翠柏亭亭如蓋，磚鋪的地上一塵不染，柱子房梁油滑光亮，也與十多年前一模一樣。荒年席捲過的破落已無從辨認，那雜草叢生，蛛網懸掛的光景，只在柳生記憶中依稀顯示了一下。柳生解開包袱，故伎重演，取出紙墨硯筆，寫幾張字，畫幾幅花卉，然後貼在牆上，賣於過往路人。一時間竟圍上來不少人。雖說瞧的多，買的少，可也不過片刻功夫，那些字畫也就全被買去，柳生得了幾吊錢後心滿意足，放入包袱，緩步離去。
不知不覺，柳生來到那曾是深宅大院，後又是斷井頹垣處。走到近旁，柳生不覺大吃一驚。斷井頹垣已無處可尋，一片空地也無蹤跡。展現在眼前的是一座氣派異常的深宅大院。
柳生看得目瞪口呆，疑心此景不過是虛幻的展示。然而凝視良久，眼前的深宅大院並未消去，倒是越發實在起來。只見硃紅大門緊閉，裡面飛簷重疊，鳥來鳥往，樹木雖不是參天，可也有些粗壯。再看門前兩座石獅，均是兇狠的模樣。柳生走將過去，伸手觸控了一下石獅，覺得冰涼而且堅硬。柳生才敢確定眼前的景物並不虛幻。