胡雪巖不可一世的商業帝國，在五年內全部垮台，主要是因為他花太多氣力在經營人，而非經營制度。
人間的幸福不會永遠停留在同一個地方。」這是西方歷史之父希羅多德（Herodotus）的名言，用這句話來對照胡雪巖「眼看他起高樓，眼他看宴賓客，眼看他樓塌了」的興衰，可說最恰當不過。
胡雪巖做為當年中國第一富豪，是如何一番景象？浙江巡撫楊昌濬參觀胡雪巖豪宅後，曾寫信給左宗棠，稱胡雪巖為一位姨太太特地造一座樓，該樓欄杆柱子不但用高級紫檀木打磨出一百隻獅子，甚至獅目全用黃金打造！另有一個人見胡雪巖求借五百兩銀子，但因言語觸怒了胡雪巖，胡當時身上有一張一千兩銀票（這是當時清朝一品官員年薪的五倍），他「寧可毀掉也不借」，竟當場取了出來點火燒掉！
然而，胡雪巖不可一世的商業帝國，卻在短短五年之間全部垮台，在經歷錢莊倒閉、朝廷抄家、妻子分離、老母自殺等一連串悲劇，胡雪巖也在一八八五年潦倒而終！他在徽州老家的宗祠只剩幾根殘柱，當年杭州的大宅，雖然近年重建，但也只剩一個空殼，獅子不見了，當年輝煌的生活痕跡幾乎也灰飛湮滅。胡雪巖「其興也勃，其敗也速」，後世對他評價多是窮奢極欲而致敗，如中國前總理朱鎔基，在參觀杭州胡雪巖故居時，留下「以紅頂商人之老謀深算，竟不過十載，驕奢淫靡，忘乎所以，有以致之，可不戒乎」的題詞。
