Es bastante subjetivo, y tu cuerpo mismo puede responder a esta pregunta.
Si has estado descansando lo suficiente (alrededor de 8 horas de sueño), entonces solo 4 horas de sueño en un día en particular no tendrán mucho impacto. Aún puedes ejercitarte.
Sin embargo, si sus ciclos de sueño son irregulares, no se recomienda hacer ejercicio después de un pequeño período de descanso.