A:音がするのが寒い日だけであれば心配ありません。

おそらく追い炊き配管の凍結防止に配管内の水を循環させているのだと思います。

スイッチを切るのは構いませんが、ボイラーのコンセントは抜かないに注意して下さい。