使用自来水不需要缴纳水资源税，因为水资源税的纳税义务人是直接取用地表水、地下水的单位和个人，而自来水是经过加工后的水，不属于水资源税的征税范围。

参考文件：财政部 税务总局 水利部关于印发 《水资源税改革试点实施办法》的通知（财税[2024]28号）。