詳細は、固定資産税の閲覧制度とかで調べてもらえば良いと思いますが、借りている人なら、その土地や建物については、閲覧することができます。
一般に公開しているわけではないので、誰でも見られる訳ではありません。
土地の場合は、おおよその固定資産税評価額は、固定資産税路線価から計算することもできます。
ただ、土地の形状などにより評価が変わりますが、相続税の評価額と違って、評価方法は地方自治体が決めていて、公開されていないみたいなので、正確に出すことは難しいと思います。
マンションの場合は、一般の人が通れる道路や公園などがあると、その分評価額が下がるという話もきくので、更に難しいかもしれません。
住んでいたマンションで計算してみたことがありますが、固定資産税の路線価に土地の面積をかけた値よりかなり低かったです(80%位だったかな)