第四組的成員相當多，不但有來自各領域的專家，還有幕僚人員，許玉秀在群組內提到，「我倒不是因為法務部的干涉，而順從換組，是因為司法院有關的的確就是第二組和第四組，這是林子儀大法官和我與許宗力院長的分工合作。」她的發言也間接承認了，幾位分組召集人之間有過換組。
本刊調查，由於召集人異動，連帶也成為委員名單拖延公佈的原因之一。許玉秀本來是被分配在第三組擔任分組召集人，但第三組的議題是司法效率、案件分流和律師評鑑等問題，後來許玉秀希望能讓她的專業落實，才前往第四組，第三組則由司改會議副召集人瞿海源擔任。
這樣的更換組別，也遭許多籌委私下議論，到底是基於何種專業來分配擔任召集人主席，由於再加上賴芳玉律師未尊重其關懷弱勢被害人專業，而被分配到獄政改革的第五組，早就已經受到各界質疑作業黑箱。
如今許玉秀大法官也承認後來才換到與其有專業相關的第四組，甚至又嗆法務部干涉換組，已使整個司改籌委會的黑箱更加疑雲幢幢。
