淳熙七年（1180年）再知隆兴府（今江西南昌）兼江西安抚使时，辛弃疾便拟在上饶建园林式的庄园，安置家人定居。
淳熙七年（1180）三月，世居黎州（今四川汉源北）西的五部落因宋政府欠钱不尽偿，只优待吐蕃奴儿结而聚众举事。四月，五部落进攻盘陀寨，大败兵马都监高晃所率宋军，乘胜深入内地百余里，大掠而去。六月，攻黎州，再败宋军。宋官兵死者近五百人。其众侵入州界百余里，复大掠而归。
八月，知潭州（今湖南长沙），湖南帅臣辛弃疾为加强地方镇压“盗贼”的力量，募兵一千八百人，加以训练。同年冬，宋孝宗赐名湖南飞虎军，遥隶步军司。
道济和尚虽然证得罗汉境界，但是一直保持热爱学习各种技艺。除了学医学道，道济和尚这次决定去嵩山的少林寺那里练武。于是修书一封，致少林大和尚。
寄少林和尚：
“愚徒道济稽首焚香致书于少林大和尚法坐下:窃以水流云散，容易别离;路远途遥，急难会面。嗟世事之无常，痛人生之莫定。然大地尚全，寸心不隔。目今桂子香浓，黄花色胜，城中车马平安，湖上风光无恙。我师忙里担当，闲中消受。无量无边，常清常净。拜致殷勤，伏惟保重。
济不慧，钻开地孔，推倒铁门;针尖眼里走得出来，芥菜子中寻条路去。幸我师慈悲，不嗔不怪。烦老天宽大，容逋容逃。故折了锡仗，不怕上高平低，被却草鞋，管甚拖泥带水。光着头，风不吹、雨不洒，何须竹笠;赤着体，寒不犯、暑不侵，要甚衣包?不募化，为无饥渴;懒庄严，因乏皮毛。万重寻声救苦，当行则行;一时懒动雀剿，要住即住。塞旁明，久非左道;由正路，已到西天。一脚踢倒朱山，全无挂碍;双手劈开金锁，殊觉逍遥。
便寄月一之书，少达再生之好。虽成新梦，犹是故人。长啸三声，万山黄叶落;回头一望，千派碧泉流。尚有欲言，不能违反。乞传与南北两山，常叫花红柳绿;为我报东西诸寺，急须鼓打钟敲。情长难尽，枯短不宣。”
道济和尚往河南地祭拜宝塔寺后，然后一路步行来到了嵩山少林寺。
少林寺始建于北魏太和十九年（495年），是孝文帝为了安顿印度高僧跋陀落迹传教而兴建的一座寺院，因坐落于嵩山腹地少室山茂密丛林之中，故名“少林寺”。
永平元年（506年），印度高僧勒拿摩提和菩提流支先后到少林寺开辟译场，在少林寺西台舍利塔设立翻经堂翻译经书。之后，慧光在少林寺弘扬《四分律》等师说，经多代发展，后世最终形成四分律宗。北魏孝明帝孝昌三年（527年），释迦牟尼佛第二十八代徒菩提达摩来到少林寺，他在跋陀开创的基础上，广集信徒，传授禅宗法门和武功，东魏孝静帝天平三年传法于慧可，从此禅学在少林寺落迹流传。
道济和尚在少林寺住了下来，每日与少林寺的弟子们一同锻炼身体，苦练武功。