¡14 Días de Distribución, Día 8! ¡Conoce a Zach Charles (@MatharyCharles) de @Google! Zach se centra en su investigación en temas relacionados con DiLoCo y ha publicado artículos sobre Leyes de Escalado para DiLoCo, así como DiLoCo en Streaming, que reduce significativamente el ancho de banda máximo durante el entrenamiento de LLM. ¡Zach y @samsja19 darán un golpe combinado a DiLoCo, con Zach enfocándose en la teoría y las últimas mejoras de DiLoCo en su conjunto!