金華官邸在扁政府時代是閣揆的官邸，這是當時行政院院長游錫堃有意模仿英國的「唐寧街十號」成為歷任閣揆官邸，不僅耗資800多萬元修繕，還把一顆雪山隧道貫穿石放在官邸的草皮上，當成吉祥之物，此後包括謝長廷、蘇貞昌與張俊雄都入住過，其中以游錫堃前後住了將近3年最久。
政黨輪替後，國民黨執政的閣揆在台北都有自宅，因此都選擇不搬家，直到江宜樺以「金華官邸內有個生態池，不適合家中特殊兒居住」為由婉謝搬家，更把金華官邸交還給國有財產局管理，金華街上的警衛崗哨也撤除，甚至連官邸內的雪遂貫穿石也搬到行政院。
民進黨去年重新執政後，林全擔任閣揆後，今年5月上班時遭到大觀自救會包圍抗議，當時就在思考要找個便於維安的官舍，因此過去綠色執政的閣揆官邸才以合約到期為由停止做為「社企聚落」，只是沒想到傳聞給「南部上來的院長」真的成真。
但也有風水師認為，過去綠執政時期對面還沒有蓋豪宅，9年過去，對面已經蓋了一棟10樓的建築，有風水遭到破壞的疑慮，究竟準閣揆賴清德能不能坐的穩、坐的久，就等搬進金華官邸後留待時間考驗。
