Можно ли пить воду из-под крана?

Лучше не надо.

Чай и кофе на ней заваривал, никаких проблем не было.

Закажи воду

Я зубы чищу только бутилированной) а пить точно не стоит.

Не рекомендую... Даже после кипячения на вкус отвратительная.