No lo bebería, pero es solo agua.
Básicamente, el agua que se queda sin aire acondicionado se extrae con agua del aire al condensarse en las bobinas de frío. En el momento en que se condensa, es agua pura.
El problema es que las bandejas de goteo, las líneas de drenaje e incluso las propias bobinas a menudo producen moho y otras cosas desagradables que pueden ser recogidas por el agua.
En resumen, si está completamente deshidratado y no tiene otra fuente de agua, límpiela y podrá beberla. Fuera de esa situación desesperada, no lo haría.