大江町觀光商品協會HP

▲巨海院山門

此地直到1622年都在最上氏管轄之下，直到最上氏左遷至近江之國後，就換了一個新的大名走馬上任。當時幕府將這以左澤為中心，周邊地區約1萬兩千石的土地，賜給了當時鶴岡藩主酒井忠勝的弟弟直次，成立左澤藩。
直次回到楯山城後，在小漆川建築了新城（小漆川城），還在隔著小漆川（市野澤川）在東邊建起了新的城鎮，將原來位於楯山和山腳下宅邸和神社、寺院移到此處。城鎮開拓的中心為南北向的御免町路，和之後往東延伸的內町、橫町通路，就是現在左澤這個城鎮的前身。

▲巨海院山門正面

但是左澤藩並沒有持續太久。直次在1631年（寬永8年）過世，後繼無人，這個領地就成為幕府直轄地，交由鶴岡藩來管理。不久，城池遭到破壞，只有直次長眠之地的大手門，被移往巨海院，成為巨海院的山門。根據江戶時代的繪圖，護城河及堤防等城跡還保留著，但在1902年（明治35年），建造一條貫穿本丸的道路後，就崩壞了，就只剩大手門還保持著當初的樣貌。