2008年路易莎營業額破千萬元，隔年卻遇到咖啡期貨大漲3倍，且長達3年，本來3袋咖啡豆的價錢只能買1袋，黃銘賢創業前幾年賺的3百多萬元幾乎賠光，那段日子他活在很深的低潮裡。
當時他只有2家店，兼職教人煮咖啡增加收入，「比當兵還累，眼淚都含在肚子裡。每天工作16個小時以上，只吃一餐，不敢睡太飽，所以睡覺前會喝咖啡，比較淺眠好醒。」也因為教課，他遇上來學咖啡的太太徐愛筑，直稱她是幸運女神，他表情戲劇化地說：「我和老婆在一起後，咖啡價錢就開始跌跌跌，一吵架就漲漲漲，天啊！」
徐愛筑一聽，俏皮地望了老公一眼：「所以吵架我都會說，我要離開他，讓他沒有好運。」但是太太當然捨不得，現在也在路易莎總部負責杯測的教育訓練。此外，黃銘賢的姊妹、姊夫和妹婿，都在他創業後，陸續加入負責財務、資訊和設計等工作，「但我對家人很嚴，罵最凶，大家才會知道我連家人都釘。」
家人間難免會意見不同，姐姐黃佳雯記得，2011年路易莎還在期貨危機時，黃銘賢卻提議要買烘量更大、要價1百多萬元的美國製烘豆機，當時她無奈，「後來知道他是對的，他確實預測到咖啡量上來，雖然他每次下決定，我們幾乎反對。」
黃銘賢不否認，長期與家人意見分歧，他曾因原料商該用哪家，氣到2個月不進公司，他說：「他們都有自己的想法，不聽我話，我就炒自己魷魚，不進公司。」不進公司，他也沒閒著，2個月就自己開了3家直營店。
