会田氏は、天文二十二年(1553)四月、武田勢の火攻めにより、降伏して武田氏の家臣となった。天正十年 (1582)、小笠原勢の攻撃を受けてこの城が落城し、最後は矢久の覆盆子城（いちご）に逃れ、敗れたといわれる。

現存する遺構は、小笠原系の城主により会田氏滅亡後、天正十年から十八年頃に再構築されたものと推察され、松本の林大城、山家城などと共通性がある。中ノ陣城側への大手口には現在も多くの石積みに囲まれた郭があって、大規模な根小屋があったものと思われる。

城址の主郭は非常に分かりにくい場所にある。林道虚空蔵線にある中ノ陣城登山道から少し登ると比較的広い削平地（根小屋部分）に出るが、ここを右手の尾根を登っていく（道なし）としばらくして小規模な郭が現れ、城址碑が建っている。そこからさらに険しい斜面を登って行くといくつかの郭と石積みが確認できる。