参考にして下さい、我が家の風呂も質問者さんと同じような環境です
冬期外気温度が４度くらいの時などは、やはり風呂場も４度程しか無く、熱い目の湯を入れ湯気で室温を上げても３度ぐらいしか上がらず
つまり風呂場は７度しか有りません、この状態ではとても裸で居られたものでなくかえって風邪を引きそうです、しかも湯船の湯も直ぐに冷めてしまいます
ガス給湯器では４８度が最高なのですが（その上は６０度）４８度に設定しても配管を通り蛇口で下がり湯船に入っても部屋が寒いので結局全体で６度ぐらい下がるため４８度でも湯船は４２度しか無く直ぐ湯が冷め、風呂場は７度では風邪を引きます
今は皆さんも言っておられる様に灯油ストーブで風呂場を暖めておいてから湯をはります、この様にすれば湯も冷めにくく風呂場も暖かく快適になりました
小型の対流式灯油ストーブが余っていたのでこれを使っています、風呂場の空気を暖めるのでなくタイルなどの壁を暖める様にします、壁が暖まれば空気も暖かくなります、ただ対流式のためこのやり方では３～４時間以上暖め続けないと（室内が２０度以上になるまで）冬場は入れません
あとは、湯船から上がる度に６０度のお湯を壁にかけて暖めています、この様にして何とか快適？に入っています
それとも冬場だけでも近くの銭湯え行くのも手軽ではありますがね
お礼
みなさんありがとうございました。 どれも貴重なご意見ばかりで甲乙つけがたかったのですが 状況が似ているのと一番情報が詳細であったためこちらのご回答をＢＡに選ばせていただきました。 みなさまのご回答をふまえ対策を練ってみようと思っています。 一番手軽にできそうなのが熱いシャワーで風呂場を 暖めることのようです。 本当にありがとうございました。