根據日本媒體《週刊文春》報導，古谷徹外遇多年，對象是一名小他37歲的女性，該名女性向媒體表示，自己很喜歡動畫，所以知道古谷徹的名字，不過在看過《名偵探柯南》電影後，被古谷徹配音的安室透吸引，成為了古谷徹的粉絲，於是她開始寄送粉絲信和禮物到古谷徹的事務所，表達欣賞之意。
在2019年女子收到一封來自陌生號碼的簡訊，內容寫著「我是古谷徹，很抱歉突然給妳發簡訊」，後來兩人越走越近，古谷徹知道女子喜歡「安室透」，還會用該角色聲音和女子談情說愛，不料兩人的不倫戀情在2021年生變，古谷徹在知道女子懷孕後，強迫她墮胎，更對她暴力相向。
古谷徹在報導曝光後，於個人社群平台發表道歉聲明，表示自己接受《週刊文春》針對此事的專訪，對於他犯下的犯錯要向大家道歉，他坦承和女粉絲到去年9月為止，有長達4年半的外遇行為。古谷徹承認被一直支持他的女粉絲吸引，所以主動跟她聯繫並開始這段關係，在兩人一次爭執中，他對女粉絲動手，「這對於成年人、同時作為一個人來說，是最糟糕的行為」。
而對於強迫女粉絲墮胎一事，古谷徹道歉承認錯誤，「我犯下無法彌補的過錯，讓她身心受創，真心感到抱歉。讓長年支持我的粉絲感到被背叛、失望，甚至受傷，以及玷污了詮釋的角色，這都是無法輕易用道歉解決的」，最後古谷徹表示，會用餘生盡可能補償一切錯誤，不管受到什麼懲罰，他都有所覺悟。
★《鏡新聞》關心您：若自身或旁人遭受身體虐待、精神虐待、性侵害、性騷擾，請立刻撥打110報案，再尋求113專線，求助專業社工人員。
更多《鏡新聞》報導
廣末涼子帶2孩為名廚小王慶生 友人曝一原因「不急再婚」
謝忻貼《鏡週刊》LOGO合照 挨轟「不顧阿翔老婆感受」反擊了
福原愛爭取巴黎奧運球評失敗 遭「前隊友」拿走工作