据史书记载，从旗祖扎萨克辅国公固穆起，到末代旗王齐默特色木不勒止，经明、清两个朝代，长达300余年，这里一直是世袭的王公府邸。清末，这里还成了嫩科尔沁的政治中心。

王府旧称公爷府、公营子。原是根据扎萨克辅国公府所在地而称呼的。至齐默特色木不勒被册封为亲王后，改称为亲王府。