因為高鐵財改案，在立院遭藍綠立委連手否決，葉匡時怒辭交通部長，堅決不受慰留。傍晚，在交通部為他舉辦歡送茶會尚，他發表感言，激動落淚，談到高鐵，強調不要用陰謀論質疑他圖利財團，他完全不能接受。

卸任交通部長葉匡時：「這個社會需要更多的信任，如果我們老是用陰謀論的心態，去懷疑對方圖利舞弊，而不願用尊重專業的心態，去尊重行政部門，我們民眾又怎麼能期待，政府能夠持續的創新，為民興利呢，很遺憾在交通部，推動高鐵財改方案的過程中，我們執政團隊與我個人，不斷被操作抹黑，說我們挾怨報復人事不公，說我們圖利特定財團，這個說法我絕對不能接受，我們的社會需要多些正面能量，少一些負面的責難，我要謝謝常常為我心疼擔憂的父母，...(哽咽)...。」

想到父母的擔心與壓力，葉匡時忍不住低頭哽咽，久久說不出話，台下員工紛紛鼓掌打氣。他表示，卸任後將重回大學教書，回歸平靜生活，還開玩笑說，無官一身輕不用天天煩惱，希望額頭的頭髮能長一點回來。（民視新聞綜合報導）