河野氏是伊予地区有力豪族、据说是古代濑户内海之王越智氏的子孙。但是祖先是越智氏的说法不一，一种为饶速日命的手下小致命的子孙，另一种说法是从朝鲜半岛的渡来民族后裔。越智氏在大三岛上创建了大山祗神社，同时建立了强大的越智水军，曾是濑户内海上的一股强大势力。文武天皇时代，越智玉兴成为伊予国领主，其弟玉澄定居在温泉郡河野乡，从此改称河野氏。