藤原秀乡的后裔大胡氏所筑之城，天文十年（1541年）由于遭到金山城的横濑泰繁攻打，大胡城后来成为横濑氏的属城，永禄八年（1565年）时，金山城的由利（横濑）成繁开始反叛谦信，之后谦信在攻打金山城的前哨战中，将大胡城予以攻落，战后大胡城成为北条高广的居城。本能寺之变后，泷川一益退往伊势，因此高广入自廊桥城，而大胡城的城主由大胡氏担任，同时与真田昌幸结盟并和北条氏（小田原）敌对。天正十二年（1584年）当高广屈服于北条氏后，大胡氏则也归属于北条氏，高广则在秀吉征伐小田原之前死去，小田原合战后德川家臣牧野氏以二万石入大胡。元和二年（1616年）大胡城遭到废城。