Türbe, Kilis'in batısındaki tepenin (Kalleş Tepesi) güneyindeki yükselti üzerinde olup; XIV. Yüzyıl'ın ikinci yarısında yapıldığı sanılmaktadır.

Şeyh Muahammed Rittali, Şeyh Muhammed Arabi adlarıyla da bilinen türbenin ait olduğu yapı kare planlı, dört kemerli ve üstü sivri kubbelidir. Doğu ve batı yönünde bir, güney yönünde iki penceresi vardır, içeride, üstü yeşil bir örtü ile örtülmüş tahta bir sanduka bulunur. Sandukanın üstünde kimliğini belirtecek herhangi bir kitabe yoktur. Ancak Evliya Çelebi'nin: "Şehrin batısında bir büyük tekke vardır. Burada Sahabe-i kiramdan Şeyh Muhammed Arab-i ve Rıttal-i diye meşhur bir zat yatar." şeklindeki açıklamasından bu türbedeki sandukanın Şeyh Muhammed Arabi ve Rıttal diye ünlü bir sahabeye ait olduğu anlaşılmaktadır.

Savaşta ve barışta hurma dağıtıcılığı görevinde bulunan bu zatın, Hz. Ömer'in halifeliği zamanında Ebu Ubeyde Bin Cerrah komutasındaki islam ordusu ile bu bölgeye geldiği ve 639 yılında burada şehit düştüğü bilinmektedir.