Sağman Kalesi, Pertek’e 20 km. uzaklıktaki Sağman köyünün doğusunda sarp bir kayanın üzerindedir. Kalenin yapılma tarihi hakkında kesin bir bilgi yoktur. Evliya Çelebi’nin tariflerine göre, Diyarbakır’daki Artukoğlular sülalesinden bir Türk Beyi tarafından yaptırıldığı sanılmaktadır. Kalenin bulunduğu tepenin batı ve güney yamacında kale surları sağlam bir şekilde günümüze kadar gelmiştir. Kale küçük olmasına karşılık, oldukça önemli bir geçit yeri olan derelerin kesiştiği yerde kurulmuştur.