據有關史料記載，遠在新石器時代，古鎮靜升就有人類繁衍生息，商代則是“內”部落生產勞動、安居樂業的地方。春秋時，因介子推之故，與靜升相連的綿山被封為介山，靜升也曾名為“旌善村”。隋開皇又改為“靈瑞鄉”。唐貞觀以來，靈瑞鄉日臻興旺，直至元皇慶年間仍以靈瑞鄉稱之。到清康乾盛世，農商發達，經濟繁榮，民間修廟宇，建民居，大興土木，靜升鎮經歷了第壹次大規模的發展時期，被譽為“晉中第壹鎮”。
“靈石古村山水間，四合坊巷禮為先，樓臺塾館凝文氣,儒雅興衰二百年。”今留於靜升鎮的主體古建築群——王家大院，先後經歷了清朝康熙、雍正、乾隆、嘉慶幾個時期的修建，建築總面積達到15萬平方米。靈石縣歷史上“四大家族”之壹的靜升王家，為太原王氏後裔，元仁宗皇慶年間由靈石溝營村遷到靜升。王氏望族以商賈起家，貨殖燕齊，後加官晉爵，步入官場，成為當地工商大地主兼官僚士紳。王家修建住宅不惜工本，相當豪華奢侈。清康熙年間，在靜升村老街首建“擁翠”、“鎖瑞”兩條巷王氏住宅區；乾隆年間建鐘靈巷；雍正年間建崇寧堡；嘉慶年間又興修了紅門堡、拱極堡、東南堡（又稱和義堡）王氏住宅區等。
依山建勢，梯度推進，靜升鎮的建築是黃土坡上的奇跡，遠遠望去，屋舍院落高低起伏，有序排列，堡墻環繞，院門緊閉，儼然壹座壁壘森嚴的中世紀城堡。