郡王府为郡王旗扎萨克（“扎萨克”是蒙语，汉语意为“治理”）的私邸。由于历代王爷的世袭更替，其王府亦不断迁徙。
郡王府始建于台吉召，之后又迁于昌汗伊力盖召、吉盖特拉、独贵什里等地，其间住所多为蒙古包。光绪初年，王府迁至阿勒腾席热镇东南、距现存郡王府驻地约0.5公里的乌兰木都，其住所为15间瓦房和部分蒙古包。光绪二十八年（1902年），郡王旗第十四代扎萨克特克斯阿拉坦呼雅克图袭位后，王府正式迁至现存郡王府所在地，其住所为半砖木结构的9间正房和6间土建平房，并用沙柳扎围做院。
走进郡王府，砖雕檐刻，亭廊画柱，朱红色的大门，灰青泛黄的墙体，拱形的门洞，工整的土炕，都是郡王府与岁月对搏留下的珍贵宝藏。
进入大门，斑驳的墙面犹见精致的雕纹，龙凤鹿鹤各有深意，房屋设置有着山西特色，正房显然是会客的地方，古旧的木桌椅，平整的土炕，精致的花纹地毯，依稀可见王府当时的盛况。供王爷、公子读书的私塾房里笔墨纸砚还留存着那个时代的气息。沧桑往事，追忆种种，历史见证了如今已成为文物的它，一角一落都是后人的神话。
历经百年，精美的砖雕木雕依然活灵活现，汉蒙藏建筑元素浑然一体，各种图案寓意鲜明，院落分布极为讲究，呈现出庄严雄浑的气势。
而今，它是研究北方民族地区历史文化的珍贵遗迹，在历史的变迁中拂了风尘，存了影迹，那些经久不衰的往事映在有些斑驳的墙面里、廊檐上，依然灼灼生辉。