王滝渓谷のハイキングコースの拠点で駐車場が整備されている。駐車場にある看板を見ると天守台のようなイラストの城山城址までは非常に近く見える。整備された歩道を南に少し登るとすぐに小山の山頂にたどり着く。知らない人は、間違いなくここが城山城址だと思うだろう。イラストと同じ形のまぎらわしい石垣(展望台か昔の等光寺のものか)もある。
　実はここへ登る途中に左の山へ入っていく歩道があるのだが、こちらが正解である。ハイキングコースなんだから看板ぐらい建てておくべきだと思うのだが。こちらは本格的な自然歩道で、いつものように食事の時間も惜しんで城めぐりをしている身には大変きつい。歩道沿いにはこの辺りの特徴である巨石が点在している。
　いつの間にか城内へ入っていることになるのだが、注意深く観察していれば、それまで尾根上を歩いていたのが尾根より一段下がったところ、つまり曲輪の周りの切岸の横を歩いているのに気がつく。また、歩道の左側に注意していれば、明確な堀切が見つけられ、それより先が城内であることがわかる。
　城内がハイキングコースになっているし、付近の松平城、梟ヶ城、大給城の整備状況からすると、当然、これだけの規模の城なので整備されているだろうと思ったが、歩道以外は全く整備されておらず、遺構の表示どころか城址の表示さえもない(見落としたかもしれないが)。これはもったいない。
　城址はＵ字型をしており、東西に長い主郭がＵの底の部分で、その左右から北に向かって曲輪が配置されている。これらの曲輪の間には明瞭な堀切が確認できるが、曲輪は雑木が茂っており動き回れない。右側の曲輪の周囲には石垣がある部分がある。主郭も歩道以外は雑木が茂っているが東側にはそれまであった巨石よりもはるかに大きな巨石があり圧巻である。