桑日宗遗址位于桑日县东面的一座峻山之巅，长约2公里，宽200—500米，主体建筑面向西南，形如碉堡，墙壁有石砌和夯土两种。其背面右侧为厚度1.5米的夯土墙，墙上设有外小内大的三角形瞭望孔，正面和左侧为0.7米宽的石墙，背面建有一个环形碉堡，碉堡入口在主体建筑的二层。建筑面积、建筑形式与雍布拉康极为相似。

18世纪，达赖喇嘛在布达拉宫坐床，桑日宗被封给七世达赖格桑嘉措的父亲索朗达杰，后又扩建36柱拉玛拉康大殿和另外三座护法神殿，成为桑颇家族即桑珠颇章庄园。