景行天皇の妃の一人である高田媛の父が阿部木事であるとされ、また継体天皇の妃に阿倍波延比売がいたいわれているが、宣化天皇の大夫であった阿倍大麻呂が初見であり、大伴金村・物部麁鹿火・蘇我稲目に次ぐ地位の重臣であったと言われている。推古天皇の時代には蘇我馬子の側近として阿倍麻呂が登場している。大化の改新で阿倍倉梯麻呂が大臣となり、阿倍氏には日本書紀などでも外国への使者として派遣される事も多く、倉梯麻呂は実力で新政権に参加した可能性が高い。また小足媛は孝徳天皇の妃となり有間皇子を生み、橘媛は天智天皇の妃になるなど、阿倍氏の勢力が窺える。その後、阿倍氏は布施臣・引田臣などに分裂していった。だが、引田臣を率いる阿倍比羅夫が斉明天皇に仕えて将軍として活躍し、布施臣を率いる倉梯麻呂の息子・布施御主人は大宝律令下で最初の太政官に任命された。その後、阿倍朝臣の姓をあたえられ、続いて引田朝臣でも同様の措置が取られた。遣唐使として唐に渡った阿倍仲麻呂は比羅夫の孫、船守の息子であると言われている。以後御主人と比羅夫の末裔が「阿倍氏」と称することになった。