可以的，因为酒店洗手间的水也是自来水，但是必须烧熟了之后喝，酒店烧水的热水壶在使用之前最好将其清洗一下。
自来水简介：
自来水是指通过自来水处理厂净化、消毒后生产出来的符合相应标准的供人们生活、生产使用的水。生活用水主要通过水厂的取水泵站汲取江河湖泊及地下水，地表水，由自来水厂按照《国家生活饮用水相关卫生标准》，经过沉淀、消毒、过滤等
工艺流程的处理，最后通过配水泵站输送到各个用户。2013年1月15日起，可登录北京市自来水集团网站查询上一季度的自来水水质信息，包括出厂水水质的42项常规指标、每季度检测结果的最大值和最小值，以及与国家标准的对比。