如果阳台房间冬天很冷，可以采取以下措施：

安装玻璃门：在室内与阳台之间安装一道玻璃门，不但透光性好，而且还能有效的隔绝冷空气的进入，起到很好的保温作用。

安装保暖的软门帘：在室内与阳台之间安装一套保暖的厚门帘，冬天晚上拉上也可以起到保温的作用。

采用塑钢窗、双层玻璃：由于塑钢窗封闭性好，导热性差，因而很适宜用于封闭阳台。如果采用双层玻璃，其保暖性会更好一些，还能有效的防尘防沙。

在阳台增加暖气片：可以在阳台增加暖气片，也是阳台保温的一个有效措施。这种方法最好在非采暖期进行，因为冬天改暖气，由于管道里面有热水，改动起来非常不方便，更重要的是物业会不允许的。

使用小太阳、加热器或炉子等加热设备：可以连接电源后开机加热，同时用炉子，比如燃气炉、煤气炉、煤炭炉子加热，当然注意通风透气。

贴保温板或保温颗粒砂浆：如果阳台内表面的保温是使用保温颗粒做的，这样保温颗粒的外表面都是抹的保温颗粒砂浆。在强度上来说是满足贴瓷砖的需求的。但是建议大家不能使用传统的湿贴法来进行贴瓷砖，而是要使用瓷砖胶或者是专用的瓷砖粘接剂等薄贴法来进行贴瓷砖。

封闭式设计：在做封闭式阳台设计时，一定要找专业的装修公司施工，确保阳台的密封性和保暖层不会出现问题。还有一点，无论阳台是安装推拉门还是断桥窗，都要在窗户内加装密封条。加密封条这个举措很关键，可以确保外界的冷风不会透过微小缝隙渗透进阳台，起到了防寒保暖的作用。

以上方法仅供参考，可以根据实际情况选择合适的方法。