岛津氏的祖先是自称秦始皇的后代秦氏子孙惟宗氏后代。惟宗基言之子惟宗广言的主君是藤原摄关家笔头近卫家日向国岛津庄（现宫崎县都城市）的庄官（下司）前往九州、儿子惟宗忠久在源赖朝时期出任该地地头时开始称为岛津氏，都城市被说是岛津家的发源地。 　现今，就岛津氏的出身，一般的说法是：惟宗基言之子广言在近卫天皇的时代，辞去了播磨少掾一职出仕于近卫家，因为成为了近卫家领有的岛津庄的下司，从那被认为是岛津氏之始。即是说，广言之子忠久是岛津氏的第一代。 　到底惟宗(岛津)忠久是否惟宗广言的子儿子则无从考究。另外关于“摄津大阪住吉大社境内诞下忠久的丹后局是源赖朝侧室，忠久是赖朝私生子”在‘岛津国史’及‘岛津氏正统系图’等资料记亦有所记载，学会对于岛津氏是赖朝的私生子的说法是否定的。现在关于岛津氏忠久时期以前家谱没有明确的家谱。 　同样是九州守护一职的大友能直，他与岛津忠久的共通点是后来被称为九州一族的祖先，他们的出自均自不明，并传出是“母亲是赖朝的妻妾，受到赖朝的拥戴”。正确来说，忠久是源自惟宗氏，能直并非出自近藤氏。