ご質問ありがとうございます！回答が遅くなってしまい、大変失礼致しました。
冷えたビールの描写があるように、この世界には食材を冷やす道具はあります。そのため、ソフトクリームもあると認識していただいて大丈夫です。
また、公爵様が「そふ……？」と驚いているのは、「なぜ、ポテトに甘いものを？」という疑問からの言葉になります…！