临行前，五祖又嘱咐慧能：“以后佛法将通过你而大兴。你离开黄梅后三年，我将入寂。你赶快往南方走，好自为之。不要急于出来弘法。这当中你会有劫难。”
慧能禅师再一次顶礼五祖，然后发足南行，不到两个月就到了大庾岭。
送走慧能后，五祖告诉座下众弟子：“祖师的衣钵和法脉已经传到南方去了!”
众人大惊，问道：“谁得到了衣钵?”五祖答道：“能者得之。”
五祖的大弟子神秀大师在当时是大家公认的禅宗衣钵的继承人，现在竟然被慧能轻巧地得了衣法，他哪能甘心?于是秘密地陆续派了几十拨人马前往南方追杀慧能禅师，欲夺取慧能手中的衣钵，由此演绎出一连串惊心动魄的故事。
为了避免不测，慧能禅师一度在岭南辗转隐居长达十五年之久。后来，因缘成熟了，慧能禅师才来到韶州曹溪宝林寺，开始了他辉煌的弘法生涯(这是后话)。
慧能在七星墩僧庐来回踱着，思量行止：如今作法施雨，行踪已露，得赶紧离开，另觅藏身之地。
不说慧能正在谋划离开，且说小九龄这天清早一起来，就吵着要娘亲带他去见慧能大师傅。
小九龄的娘亲问他：“为什么非要今天去呢？”
小九龄说：“今天不去，以后就很难见到慧能大师傅了。”
小九龄的娘亲本不信他，这小孩儿的话哪里信得?可小九龄说得玄乎，似乎话里有话。
为了验证他的话是否灵验，小九龄的娘亲还是带他去了七星墩见慧能大师傅。
张九龄一到，慧能就把他拉到僧庐偏室里：“小施主呀，你可把我害苦了。”
从慧能的举动话语里，小九龄预感到事情不妙，他眨巴着一双聪慧的大眼睛，说：“大师傅呀，我长这么大了，平生最敬仰的人就是你了，我怎么会害你呢?”
慧能是又好气又好笑：“你给县衙老爷出的什么鬼点子呀?”
“什么鬼点子神点子?我只有人点子。”张九龄把脑袋一歪，假装糊涂地说。
面对这个天真无邪的小九龄，慧能不忍伤他，说：“小施主，你聪明好学，天资很高，点子确实不少，不过你瞒得过别人可瞒不过我。”
慧能想到自己与小九龄分别在即，又语重心长地说：“你这个贵人呀，以你的才学智慧，将来前途无量，高官厚禄你都视如粪土。但只可惜，你心肠太直，处事不够中庸，容易招惹他人妒忌。所以我看你将来顶多只能当几年宰相，做不了一世高官，享不了一世清福。”
好个张九龄，年少气盛，把慧能的肺腑之言听歪了，想邪了，竟然毫不客气地对慧能说：“我看大师也顶多做个菩萨，大也就大到六祖，你也成不了佛陀!”
谁能料到，世事如棋，幼年斗嘴竟成谶语。张九龄的结局被慧能说中，而慧能的佛缘正果也被张九龄言中了。
: