古人講究成家立業，在功成名就之後胡雪巖就要考慮自己的終身大事了，經過媒婆的撮合，胡雪巖選定了陸家的女子為妻，兩人成親之後，陸氏尊敬丈夫孝敬婆母，夫妻兩人也度過了一段十分恩愛的時光。頻繁納妾，一夜即休
“不孝有三，無後為大”，胡雪巖與陸氏成親之後，陸氏一直沒有為胡雪巖誕下男丁，這讓胡雪巖心中頗為不滿。
但陸氏深得胡母的喜愛，行事風格極為狠辣，礙於陸氏的威嚴，胡雪巖一直未敢納妾。
直到胡雪巖35歲的時候，胡家還沒有男孩出生，陸氏只能鬆口讓胡雪巖納妾。經過百般搜尋，胡雪巖終於找到了符合自己心儀的女子——芙蓉夫人，
這就是胡雪巖的第一個妾室。
納妾之事一發不可收拾，在芙蓉夫人進門之後不久，胡雪巖就幾次三番地頻繁納妾。根據相關資料記載，在胡雪巖逝世之前，
他府中的妾室就有13位之多，這13位妾室被稱為“杭州十三釵”。
事實上，胡雪巖納的妾室根本不止13位，至於為什麼後院中只有13位妾室，
這主要還是同胡雪巖的一大怪癖有關：納妾一夜即休。
胡雪巖在納妾室進門之後，如果這個妾室不符合自己的喜好，在第二天胡雪巖就會將這個妾室休棄。
被休棄的女子都是十分可憐的，少有男子願意娶這樣的女子為妻，很顯然胡雪巖也知道這一點，
在休棄女子的時候胡雪巖都會送給她們數百兩的銀票作為補償。
這樣的事胡雪巖不止幹過一次，那就意味著胡雪巖為此散盡的錢財不計其數，商人重利，用數百兩求一夜風流，這對胡雪巖這樣精明的商人來說是一件得不償失的事情，那胡雪巖究竟為什麼這麼做呢？
有學者分析，這其實是一個獨特的營銷手段，世人總是對有權有勢的人更多幾分關注，胡雪巖此種行事風格一旦傳揚出去，立刻就會被百姓們所熟知。
胡雪巖幾次三番豪擲數百兩銀子，這就意味著胡雪巖的身家確實不菲，商人們都喜歡尋找身家富裕的合作伙伴，
這就為胡雪巖帶來更多的合作機會，可以說這種操作為胡雪巖成為全國首富奠定了一定的基礎。
或許胡雪巖就是一名天生的商人，從身無分文到白手起家再到全國首富，胡雪巖善於利用自己身邊的一切來達到自己的目的，連納妾這種私人的事情都可以被胡雪巖作為營銷自己的手段，使自己的商業帝國更進一步，可以看出此人的精明之處。
令人可惜的是，
胡雪巖的後代中沒有從商之人，也無人入仕，
基本“從文從教從自然科學”，這主要是因為胡雪巖臨終時的遺言：白老虎害人。
白老虎指的就是白銀，一生從商的胡雪巖認為經商是極有風險的事情，為利走火入魔的人不計其數，因此嚴令禁止後代繼續從商。
