Así que solo tengo mucho sueño cuando es muy tarde, ¿es malo?

Depende
Si tienes un trabajo o una clase a la mañana siguiente y llegas tarde, entonces es malo.
Si llegas a tiempo, pero estás muy somnoliento e incapaz de manejar las cosas, es malo.
De lo contrario , si está administrando todo bien en su vida, definitivamente no está mal.