税務調査の場所について

税務調査は関係書類が備わっている場所で行われるのが一般的です。
場合によっては、任意で関係書類等が隠されていないかを確認するため、机の引出などを開けてもらうこともあります。
家族にバレたくないのであれば、あなたが何らかの対策を講じなければならないでしょう。

早速ご回答くださりありがとうございます。

事業分を現在副業（正業は会社員の給与所得）として扱っておりまして、白色申告（雑所得とする）にすることで税務調査の可能性を下げることは可能でしょうか。白色申告の場合であっても税務調査があることは存じておりますが、事業所得として申告する（青色申告）場合と比較すると、その可能性は低くなるかと考えております。

調査選定理由のうちには青色申告としての要件を満たしているかどうかがあるかもしれません。
そういう意味では、白色申告のほうが青色申告よりも調査の可能性は低くなるかもしれません。
それ以上に正しい申告をしていれば、税務調査の可能性はほぼないといっていいでしょう。