相続税について

設定いただいた状況が不明確であり、確たる回答が難しいのですが、とりあえずお答えいたします。
まず建物の4,000万円は、今これを建築したらこの金額を要する（つまり再建築費）と理解します。また土地の4,000万円は時価（市場価格）であると理解します。
また固定資産税（税率は原則1.4％）の他に都市計画税（税率は0.3％）が課されます。おそらくご質問はこの両税の合計を指しているものと思いますので、固定資産税（都市計画税を含む、以下同じ）の税率を合計の1.7％であると考えていきます。
とはいえこの建物が住宅（アパート等の賃貸を含む）であるかどうかで、土地・建物の固定資産税はガラッと変わってしまいます。そこで双方の場合を見ていきたいと思います。
ではまず建物が非住宅（店舗、貸しビル、倉庫等）の場合を考えます。まず固定資産税の評価水準は公示価格（＝時価とします）の7割ですから、評価額は2,800万円。それに負担水準とか画地補正とかがありましょうから、評価額をエイヤッと2,500万円とします。
建物の評価額ははおそらく再建築費の65％程度だと思われますから2,600万円。よって、年間固定資産税額は、（2,500万円＋2,600万円）×1.7％≒86万円となります。
一方この建物が住宅系であれば話はガラッと変わります。まず土地は小規模住宅用地の特例で（１戸当たりの敷地面積が200㎡以下の場合）、固定資産税額はほぼ5分の１（固定資産税の6分の1と都市計画税の3分の1の加重平均値）です。また建物の評価額は非住宅のほぼ2分の1といえるでしょうから1,300万円程度と思われます。すると固定資産税額を便宜的に計算すると次のようになります。
（2,500万円÷５＋1,300万円）×1.7％≒30万円
　以上のとおり極めて大雑把な計算によると、建物が非住宅の場合には86万円、住宅であれば30万円といったところになると考えられます。ひとつの目安とお考えください。