有资料称，日美交涉失败后，东乡曾一度准备辞去外交大臣之职，但有的官员劝他说，“如果辞职，内阁立刻会换上支持战争的外交大臣”，东乡才打消辞职的念头。事实上，从1941年到1943年，东乡一直活跃在政治和外交舞台上，辅佐东条英机等主战派发动了太平洋战争。1943年9月，东条内阁为鼓吹“大东亚共荣圈”决定设立“大东亚省”，东乡因表示反对而辞职。然而，不出两年，东乡不仅出任铃木内阁的外交大臣，还身兼他曾经反对设立的大东亚省大臣。
1946年4月，东乡被认定为甲级战犯嫌疑人被逮捕。1948年，远东国际军事法庭判他犯有“共同谋议侵略战争罪”，以及对中、美、英、荷的侵略战争罪，判处有期徒刑20年。
在远东国际军事法庭上，东乡自我辩解称：“《赫尔备忘录》要求日本从中国和法属印度支那撤兵，还包括废除三国同盟，日本如果接受备忘录就破坏了三国同盟，这是涉及国际信义问题。另外，日本如果接受备忘录撤兵，甚至包括撤出警察，日本在中国华北、华南的一切都成为泡影，日本的企业也将全部停顿。还有，对南京政府（指汪精卫傀儡政权）也失去信义，会激发各地的排日、侮日感情，日本人只得从这些地方撤离。备忘录还要求恢复到日俄战争之前的状态，日本必须从满洲撤出，其政治影响波及到朝鲜……《赫尔备忘录》迫使日本只能做或者全面投降或者战争的解释，如果接受备忘录日本不仅不能保持在东亚的大国地位，而且将沦落为三流国家。所以，（内阁）全员对备忘录的意见是一致的，日本除了自卫战争别无他路，这也是全员一致的意见。”
这段话充分地表明，东乡始终是站在殖民统治者的立场上，极力维护日本的所谓“国益”，为了实现日本的“大国”地位，即使动用战争手段也在所不惜。1950年，东乡在服刑期间病死。
