一天，他对马祖道一大师说：“像这样呆下去，不如请师父给弟子另指示一位大师，也许还有希望。”马祖道一大师听完后，说：“离此地七百里，有一位称为南岳石头的禅师，如果你到他那里，一定能有一个好的结果。”
灵默禅师于是便辞别马祖道一大师，来到了石头希迁禅师的法堂，心里的想法是：“见面以后，如果说一句话很投机，我就留在这里;如果不投机，我就拔脚就走。”
灵默禅师于是系好鞋，拿着坐具，一直走上法堂，便向石头希迁禅师礼拜，待这一切礼节性的程序全部完成之后，就侍立在一旁。石头希迁禅师问到：“你从什么地方来?”灵默禅师一副很不在意的样子，随口回答道:“我从江西来。”
石头希迁禅师接着问：“在什么地方跟什么人修习禅法?”灵默禅师沉默不语，一句未答，便拂袖出门。刚过门槛，石头希迁禅师便吆喝一声。这时候，灵默禅师的脚刚好门里一只，门外一只，于是情不自禁地转回头看。
石头希迁禅师举起手，指着灵默禅师说：“从生到死，只是这个汉子。你回头转脑作什么?”灵默禅师听完这句话后，便豁然大悟。从此以后在石头希迁跟前侍奉了数年。