談起自己的成長過程，翁華利說早年統領委由日本京王百貨派駐高層代管，父親特別重視日本經驗，三姊弟幼年就被父親送到日本留學。「我們讀的是一般日本小學，身邊一個華人都沒有，日文只會講早安，想吃飯只能用紙畫出盤子跟筷子。」雖有媽媽陪同，但也聽得出小留學生的辛苦。
國中時，三姊弟又離開日本，到澳洲讀書。因為翁華利喜歡日本文化，大學又考回日本明治大學念經濟系，直到2000年學成才歸國。但父親卻要他磨練夠了，再回集團任職。
於是，25歲的他找遍全台各種需要日文人才的職缺，最後進了日本三井物產，因表現良好，被營業額最高的化學部選上，卻因化學專有名詞太難懂，讓他吃盡苦頭，「在日商那段日子被主管拍桌子很正常。」回憶起那段煎熬日子，「父親說：『被外面的人罵比較有用』是真的。」他笑著說。
在三井待一年多，愛打高爾夫球的翁華利，竟跑去當起高爾夫球教練，一度想轉職職業高球員。在外繞了一圈，最後還是被老爸找回來，從建設事業開始學起，8年前接下百貨總經理一職。
