As terras de Naokatsu foram-lhe retiradas durante o xogunatoTokugawa, mas, quando o seu irmão, Naotake, assumiu o controlo da área da província de Omi, ele pode terminar o Castelo Hikone, recolhendo pedras do antigo Castelo Sawayama.
No início do período Meiji, em 1868, muitos castelos foram desmantelados, tendo o de Hikone sido salvo por uma indicação explícita do imperador, que passeando pela área assim o ordenou. Hoje em dia é um dos castelos, que preservam a construção inicial, mais antigos do Japão.
O Castelo de Hikone foi designado Tesouro Nacional do Japão, pelo ministério da Educação, Cultura, Desporto, Ciência e Tecnologia, em 1952.