水床冬天床垫冷，可以采取以下措施来解决。

首先，换上较厚的被单和床单以保暖。其次，可以在床垫上放置加热毯或电热垫。另外，保持房间温度适宜，尽量避免室内外温差过大，也可以在房间里放置加湿器，增加空气湿度，有助于保持温暖和舒适。

最后，如果情况严重，可以购买封闭式的水床外壳，保护水床的热量散失，提高温度。