胡方回，安定临泾（今甘肃省镇原县）人。

父胡义周，在姚泓时任黄门侍郎。方回在赫连屈丐执政时任中书侍郎。博览史籍，写有《统万城铭》、《蛇祠碑》等文。赫连昌被灭后，入北魏朝，不为朝廷所重视，后为北镇司马。“为镇修表，有所称庆”，为太武帝所赏识，召为中书博士，官至侍郎。