什麼路見不平，什麼肝膽相照，什麼意氣相投……原來自二人初見之始，他便一直都在騙他！縱然他有苦衷，縱然他於己有救命之恩，然而柳懷素來性子直烈，無法容忍他曾視作兄弟的人對他的欺瞞，當即便要請辭，任由蕭朔如何婉言相勸，亦不為所動。
蕭朔知他性子耿烈固執，再勸亦是無用，當下任由他離去。
柳懷不知去了何處，五年後還是回了墨虯國。太子大喜，依舊隆重禮待。
柳懷外出五年，不知遭逢了什麼奇遇，劍術大進，朝野竟已無人能及。太子看他使完一套劍法後，大是欽贊。
太子當年為柳懷整頓的府宅，柳懷一步未曾踏足過，五年後再回，太子本待挽留他在帝都錦官多逗留幾日，然而柳懷卻主動請命，前往邊境，為太子平定西南蠻夷的滋擾。
太子其實也正有此意，再挽留了幾句，見柳懷執意如此，便也不再多勸，當下授命他為鎮國大將軍，親送出城門，為他酌酒行觴，滿朝文武官員無不羨慕柳懷得太子如此禮遇。而柳懷卻只是拜過，並不多言，便領兵出城。
兩年來，他為太子三破蠻夷大軍，守衛西南方邊境，征戰沙場，短短兩年已立下大小軍功二十餘件；半年前，太子的三皇叔康儀候趁太子病重之際，擁兵叛亂，柳懷又連夜不眠不休、從沙場趕回帝都，為太子平定國亂。太子曾笑言道：“若沒有柳子忻，便沒有今日的太子蕭朔。”
柳懷赧然一笑，卻不置一辭。他本非善於言辭之人，無論被激出怒氣，或是心情喜悅之時，臉上都是一紅。當下太子半開玩笑半帶挖苦，賜了他一個新的封號：“玉面將軍”。其後，每當同僚或下屬這般談論他時，都令柳懷大是窘迫。