文山地区的土司制度，滥觞于宋代，完善于元、明，没落于清代，消亡于民国。自元代至民国三十七年（公元1264—1948）共计673年，广南侬氏土司，世袭28任。侬氏土官有完整施政章程，置堂设监，划放庄田，并指挥着世袭常备军队，对辖区实行封建领主统治。朝廷派员督察，另有驻地，无公可办，并不相干。

    天高皇帝远，行政、民刑、钱粮、军事等大权，土司老爷一手独揽，实际上还有立法权，当年土司的权力比现在自治州的州长，可大了去了。

    广南侬氏土司衙署，规模宏大，深门重院。衙署沿四道台阶而上，分设大门、二门、三门。原衙署前砌筑有一堵青砖照壁，大堂口置石狮一对，左侧有鼓棚，旁设监狱。前院有代办房、签押房，东西为书房、议事厅、祭祀堂，后院有五凤楼、绣花楼等。土司衙署建筑群，位于县城北街，建于明代，至今大致保存完整。

    广南侬氏土衙署是中国壮族土司中建筑规模最大、权力较为集中、管辖范围较宽、世袭时间最长的土司府。