Cerita ini disampaikan dari mulut ke mulut dan turut merujuk kepada rekod sahih peninggalan para guru yang bertanggungjawab mengembangkan ajaran Silat Kalimah.
Kisah ini bermula apabila ilmu seni Silat Kalimah ini diperturunkan oleh Syeikh Abdullah kepada Sultan Kedah yang dikenali dengan nama Sultan Muzaffar Shah. Ia telah dirahsiakan oleh Istana Kerajaan Kedah sehinggalah tiba kepada Sultan Ahmad Tajuddin yang telah bertanggungjawab menurunkan ilmu dan ajaran Silat Kalimah ini kepada panglima kanan beliau, iaitu Panglima Tok Ismail.
Panglima Tok Ismail pula menurunkan ilmu dan ajaran Silat Kalimah kepada Panglima Tok Ali dan Panglima Tok Hadi.
Panglima Tok Ismail akhirnya menurunkan ilmu dan ajaran Silat Kalimah ini kepada Panglima Tok Rashid.
Dan Panglima Tok Rashid merupakan panglima yang terakhir menerima ilmu Silat Kalimah sebelum beliau menurunkan ilmu ini kepada orang awam yang pertama, iaitu anak angkatnya yang bernama Tok Guru Yahya Said.

Pertubuhan Seni Silat Kalimah