Eu grindo a tarde/noite tbm, depende do dia, não tenho uma rotina. Só não grindo de manhã, as experiencias que eu tive tentando adaptar horários "normais" foram horríveis em vários sentidos, desde mais novo eu sinto essa dificuldade, então eu tentei adaptar minha rotina da maneira que eu me sinta melhor.
Quanto ao field, tem bastante diferença sim. Muitos regs não jogam de madruga, deixando o field mais soft.
E falando de horários, eu creio que umas 23hs já deve dar uma leve diferença sim. Mas a melhor action é entre 2-7hs da manhã.