Muş’un güneyindeki Kızıl Ziyaret Dağının doğu uzantısında bir yamaçtadır. Surları ve iki kulesi kısmen ayaktadır. Diğer kısımları tabii afetlerde yıkılmıştır. Kesin tarihi bilinmemekle birlikte, yapıda kullanılan malzeme ve sanat yapısı itibari ile Horasan harcı ile imar edilmiş ovaya hakim karakol konumunda kendini göstermektedir. Eteklerinde bulunan Soğucak köyünde büyük ölçüde tahrip olan 2 adet gözetleme kulesi de mevcuttur. Bir rivayete göre Büyük İskender
Mısır’ı fethe giderken kendine bağlı Komutan Beatlis’e ( Bitlis) geri döndüğünde geri alamayacağı kudrette bir kale yapmasını istemiş. Emri alan Komutan Beatlis, Büyük İskender’in Mısır’dan Dönüşüne kadar Bitlis Kalesini yapmış ve Büyük İskender’i emri doğrultusunda Muş Ovasına püskürtmüştür. Büyük İskender defalarca Bitlis’e saldırmış fakat her seferinde Muş Ovasına geri dönmek zorunda kalmıştır. Yine mağlubiyetle sonuçlanan bir saldırı sonucu Büyük İskender Muş Ovasında gece konaklarken, orduyu tedirgin eden bir atlı gurubun varlığını görür ve bu savaşçılara hayran kalır. Savaşçıların ikamet ettiği Haspet Kalesine elçi göndererek görüşme talep eder. Kaledekiler bu talebi kabul ederek Büyük İskender’in yanına giderler. Rivayete göre Büyük İskender hayran olduğu bu kişilere atfen “Siz kimsiniz ki, dünyayı fethe çıkmış bir komutanın ordusunu rahatsız ediyorsunuz. ”demiş. “Bizler Gur Beyleriyiz, sizler bizim topraklarımıza girmekle bizi rahatsız ettiniz” cevabını alır. Bu arada Komutan Beatlis, Büyük İskender’e haber göndererek kaleyi teslim edeceğini bildirir. Büyük İskender’in huzuruna çıkan Beatlis, hükümdarın “-Bu kaleyi neden baştan teslim etmedin ve ordumdan birçok askerin kırılmasına neden oldun ?” sorusuna “- Hükümdarım siz bana buraya öyle bir kale yap ki dünyanın en güçlü hükümdarı ordusuyla gelse bile burayı alamasın diye emir ettiniz. Bende buraya ğüçlü ve sağlam bir kale yaptım. Siz de dünyanın en güçlü hükümdarı ve ordunuzda dünyanın en güçlü ordusu olduğu halde burayı ele geçiremediniz. Şimdi görevimi yerine getirdiğime inanarak kalennin anahtarlarını size teslim ediyorum. ” der. Büyük İskender bunun üzerine komutanının bu cevabından çok memnun kalır ve onu affeder. Bir süre sonra da ordusuna Muş Ovasından çekilme emrini verir.