安曼城堡山是阿巴斯·阿蒙王国历史遗址。在公元前13世纪，在现在的安曼周围出现信奉太阳神的阿蒙人部落。公元前11世纪，阿蒙人建立了阿巴斯·阿蒙王国，在城堡山上建立了首都，并称其为“阿蒙”，之后逐渐演变成今天的安曼。

城堡山的古遗迹主要有伍麦叶宫和石柱。伍麦叶宫系阿拉伯帝国伍麦叶王朝在城堡山建立的“埃米尔宫”（王宫），坐西朝东，虽经历了1300多年，但残存的建筑如今仍能显示出当时阿拉伯建筑的风格。城堡山还有历史博物馆，建于1951年，馆中陈列着在约旦全国各地发掘的历史文物，如在约旦河谷掘出的旧石器时代的石刀、石斧，距今已有10万年以上历史，是约旦现存最早的文物。