神奈川駅近くのアメリカ領事館が置かれていた場所は青木城があった場所でもあります。

ここは北条早雲こと伊勢盛時が扇谷上杉朝良の勢力を分断するために叛乱を起こさせたものの敗れた権現山合戦が行われた場所でもあります。

合戦に敗れたことで、北条早雲と一度は小田原まで押し戻されますが、後に盛り返して神奈川湊を支配下に置きます。

以降、被官の多米氏を城将として配置したと伝わります。

このお城は谷を挟んで海側にある権現山城と対になっています。