清洗热水壶的水垢可以使用以下方法：

1. 使用醋：将热水壶倒入适量的醋，并加入适量的水，然后煮沸。让醋在壶内浸泡一段时间，然后倒掉并用清水冲洗。

2. 使用柠檬：将柠檬切片或挤汁，并加入适量的水，然后将水煮沸。让柠檬水在壶内浸泡一段时间，然后倒掉并用清水冲洗。

3. 使用小苏打粉：将适量的小苏打粉倒入热水壶中，然后加入少量水搅拌成糊状。用海绵或刷子蘸取小苏打糊，擦拭热水壶内壁，然后用清水冲洗。

4. 使用专用清洁剂：市场上有一些专门清洁热水壶水垢的清洁剂，根据说明使用即可。

不管使用哪种方法，清洗后记得用清水彻底冲洗热水壶，并确保完全干燥。此外，定期清洗热水壶可以防止水垢的积累，保持壶的卫生和使用寿命。