首先因為國勢衰微，對俄茶葉大戰晉商受挫。清政府的腐敗，使晉商不能再在對俄貿易中佔上風，導致晉商在對俄貿易中失敗。
其次是政府腐敗，晉商投資礦業又遭重挫。晉商積極參與山西人民的爭回礦權運動，千方百計出資贖回礦權，投資開辦山西近代最早、規模最大的礦業公司，但由於當時山西當局的壓迫，在資金上釜底抽薪，卻終不能有所作為。
另外晉商墨守成規，晉商四失機遇，終歸無法振作。票號總經理多墨守成規，只知享現成福，毫無遠見，竟覆函票號北京分莊經理，既不準入股，也不準派人參加組建，致坐失機緣，山西票號始終未能參與國家銀行，失去了改組銀行的機會。
晉商是中國最早的商人，不同於一般官紳家族，它是具有商業烙印特徵的中國傳統文化家族。它在中國神州大地上稱雄五百餘年，創造了世紀性的繁榮。現如今，要感受晉商文化的魅力，就要透過其代表來看，下面就讓我們一起了解吧。
喬家大院：
喬家大院既是建築藝術的寶庫，又是民俗的堂殿。這裡已建為華北民俗博物館。已是山西省十佳旅遊景點之一，每年都吸引了大批國內外遊人。
喬家大院位於祁縣東觀鎮喬家堡村，是清代赫赫有名的商業金融資本家喬致庸的宅院，原名“在中堂”，是山西省集中反映晉中地區民俗民風的博物館。喬家大院佔地8724.8平方米，建築面積3780平方米，有院落19進，房屋313間。從高空俯視整個院落佈局，很似一個象徵大吉大利的“囍”字。素有“皇家有故宮，民宅看喬家”之說。
渠家大院：
可與喬家大院媲美的是渠家大院。渠家大院同喬家大院一樣，是清末民初顯赫一時的名門望族、晉商渠源湞的宅院，它是中華民族歷史文化的遺產，已成為新的經濟文化的載體--晉商文化博物館。
渠家大院佔地5317平方米，共8幢大院，19幢小院，240間房屋，邁入大門，一連五進，深達百米。象徵著官品地位的“十一彩”牌樓，戲臺院，欄杆院，木雕、磚雕、石雕，或圓雕、浮雕，多處鏤空，立體感甚強，遊人至此，無不駐足感嘆。
曹家大院：
曹家大院位於太谷縣城西南的北恍村東北角，是明清的晉商鉅富北恍曹家的一處“壽”字宅院，佔地10638平方米。該院外觀雄偉高大，形似城堡，現存房舍277間，建築風格古色古香，尤以按“福”“祿”“壽”“禧”字形建造的四座大院最具代表性。倖存下來的“壽”字型宅院，俗稱“三多堂”，現已闢為博物館。
王家大院：
王家大院位於晉中市靈石縣靜升村北端的黃土丘上，是太原王氏後裔——靜升王氏的住宅建築群。大院有東大院、西大院、孝義祠三部分，總面積達34450平方米。院內隨處可見木雕、磚雕、石雕，從屋簷、斗拱、照壁、獸吻到石鼓、門窗等均構思奇妙，造型逼真。
喬家、渠家以及曹家都曾走過西口，塞外的風沙磨鍊了他們不甘貧窮的意志與毅力，他們用自己飽含著汗水的業績，衣錦榮歸之後，給後人留下了這些雕樑畫棟的宅院，和古色古香、風韻猶存、遍佈城鄉、數以千計的庭院建築，而且給建築學、晉商文化的教學與研究提供了難得的直觀資料。
其他：
在晉中還有不少很有價值的商家大院和民居建築，如平遙縣建立中國第一票號--日升昌的李家、榆次市開闢榮商之路的常家、太谷縣的經貿活動伸展到東亞、西歐的大資本家曹家、靈石縣因財達官，因官得勢，大院建築南北風格融為一體的王家等，或官府氣勢較強，或園林盛景較濃，形成了與喬家、渠家大院迥然不同的建築風格，被專家學者稱之為民間瑰寶。
春秋數度，風流盡顯，晉商大院以其輝煌的過去，永垂史冊。後人將沿著歷史上晉商輝煌的足跡，再創新世紀的繁榮。
渠家大院是我國罕見的五進式穿堂院，濃縮著漢民族傳統文化元素和深厚藝術底蘊，有著極高的文化價值、藝術價值。也因此，晉商文化博物館利用此建築開闢，展現了晉商博大精深的文化內涵。下面，就讓我們一起去了解吧。
主院是裡五外三進式牌樓院，一座10餘米高的木製牌樓高高聳立，設計精巧、工藝精良。第9-16展室就設在這個大院內，展品的主題是“鉅商大賈”。在第9展室裡，列舉了晉中各地的鉅商大賈，比如介休侯家和范家，祁縣喬家和渠家，太谷曹家，沁水柳家，平遙李家，靈石王家，榆次常家。
渠氏家族中較為顯赫的人物是渠源潮、渠源湞、渠源淦、渠本翹和渠晉山。渠源潮、源湞和源淦是親叔伯兄弟，分別稱為“田喜財主”、“旺財主”和“金財主”。源潮雖為富家子弟，但不喜奢華，持家嚴謹，自奉儉約，生性寬厚，樂於助人。
源湞自幼讀書時就非常聰明，後來在經商中也是公認的高手，經商一生幾乎沒有賠累虧損，而且有這樣一句話“旺財主，有眼力，賺錢不鑽錢眼子”。渠源淦卻和他們不一樣：是一個標準的紈絝子弟，他喜好戲曲，承辦了“上下聚梨園”，是晉劇歷史上第一個字號班。
從主院出來的兩側是統樓院，內設第17-21展室，在這裡展出的是“商界盛事”。在第17展室反映的是開市的場面，非常熱鬧，還有一首晉商生財有道歌。第18展室說明的是學徒與薪金、銀股與身股等情況。
第19展室裡反映的是廟會盛況，還有行祖，如木工祖師爺魯班，藥王孫思邈、酒仙杜康等人。第20展室是過標簡介，還有反映唱戲臺的盛況。
前面說到創辦了“上下聚梨園”的渠源淦，他喜好聲色犬馬，“性揮霍，萬千金隨後立盡”，一份家當踢了個乾淨。他不惜重金，聘請各地名角。為了提高技藝，特把聚梨園分為上下兩班，上班重在研究改革與演出，下班以培養童伶學藝為王，他們在住宅內修建了一個戲臺，現仍儲存完好。據考證有戲臺的民宅在山西省僅渠氏一家。
聚梨園上演的劇目很多，有大家熟悉的《打金枝》《忠報國》等，都是他們的拿手好戲，久演不衰，可以說，聚梨園的成立，使中路梆子進入了一個新的發展時期。第21展室陳列的有龜齡集、定坤丹獲巴拿馬國際博覽會的獎狀，此外介紹了廣開藥店的沿革情況。
整座院落，外觀為城堡格局，牆頭為垛口式女兒牆，內分8個大院、19個四合小院，共240間房屋，佔地面積5,317平方米。院落之間，有牌樓、過廳相接，形成院套院、門連門的美妙格局。其中石雕欄杆院、五進式穿堂院、牌樓院、戲臺院，堪稱渠家大院的四大建築特色。
牌樓巍峨壯觀，眺閣玲瓏精緻，院院之間有過廳，牌樓相隔，層次分明，活潑有趣。屋內屋外彩繪華麗，堆金瀝粉。木、石、磚雕俯仰可見，題材廣泛，寓意祥和，刀法精良。國家建設部專家鄭孝燮先生由衷地讚歎，渠家大院的每一個建築構件都是不可多得的藝術品，是當之無愧的漢族民居瑰寶。
利用這一建築奇葩開闢的晉商文化博物館，是全國首家展示晉商文化的博物館。透過7大系列、25個展室，揭示了晉商之所以能成為全國十大商幫之首的奧秘，展示了晉商博大精深的文化內涵。
晉商那種逐利四海，搶佔市場的豪邁氣概；開疆拓土，艱苦奮鬥的創業精神；窮則思變，放眼世界的遠見卓識；忠於社稷，顧全大局的愛國情懷；誠信為本，以義制利的商業道德；有膽有識，敏銳應變的經營策略；選賢薦能，知人善任的人本思想；勞資並存，以股分紅的分配原則；審時度勢，因地制宜的商業競爭；酌贏濟虛，抽疲轉快的資本運營；人身頂股，以人為本的人事管理；兩權分離，靈活機動的激勵機制；創立票號，推進金融業的迅猛發展；以及兩頭在外的茶葉產業化經營模式等，對發展社會主義市場經濟，具有重要的現實意義。特別是中國加入WTO後，研究晉商精神更有其深遠的歷史意義。