可以的啊，我也在东京，我在清水白河车站附近，虽然旅馆里也有烧水壶，但嫌麻烦，水龙头往左水就热了，喝了，味道还可以，日本对水，食品都很高要求的，如果不能喝，老板是会事前告知的。

还有冬天喝冷水受不了，你没发现，在日本吃东西，不是都会上杯冰水的吗。。。