ホットコーヒーは温まるのか

基本的に美味しいですが、冷えると言われていますね。
飲んだ時は温まる気がするのですが濃いものだと利尿作用のせいでトイレは近くなるのを感じます。
ブラックしか飲まないのですが、ミルクを入れても同じではないでしょうか。
寒い時は白湯が温まる気がします。