烧水壶当然可以用来装开水。使用自来水烧开水是一种常见且干净健康的饮水方式，大多数人都是用这种方法来获取饮用水的。

不过，需要注意的是，长时间使用烧水壶可能会在内部积累水垢，这可能需要定期清理以保持水质和壶的卫生。如果烧水壶在使用不久后就出现了厚厚的水垢，这可能意味着当地的水质较差，在这种情况下，可以考虑安装净水器来改善水质。