先给结论：理论上可以，但绝大多数香港人不会直接对着水龙头喝水。原因要分两层讲清楚。
第一层是水质本身。香港的食水由水务署供应，处理水平在世界各大城市中名列前茅，长期完全符合世界卫生组织《饮用水水质准则》。香港自2017年9月起正式采用世卫标准作为本地的食水标准，2021年和2025年4月又先后两次检讨更新（最新标准共61项水质参数）。水源方面，香港约七至八成食水来自广东东江，其余来自本地水塘收集的雨水，2023年底落成的将军澳海水化淡厂还能额外供应约5%，水源按国家、世卫标准追溯和监控。水务署从集水区、滤水厂一路检测到用户的水龙头，每年还会在全港随机抽取约670个住所做金属、余氯、大肠杆菌检测，检测结果每半年在网上公布一次。单看这段话，水龙头出来的水是安全的。
第二层是瓶颈不在水厂，而在你住的那栋楼。食水从街喉进入大厦后，要先储存在天台水箱，再经屋苑水管流到你家厨房。如果水箱多年不洗、水管是老龄生锈的旧楼、或大厦刚做完水管维修，中间这段就可能让水质变差（比如出现铁锈色、异味、杂质）。这正是政府推出"大厦优质供水认可计划"、鼓励大厦制订水安全计划的原因，也是很多老居民习惯早上先放掉一盆水再煮食的由来。