Actualmente trabajando en el entrenamiento de modelos RL directamente desde datos de píxeles - construí estructuras de datos personalizadas y tuberías de renderizado desde cero. Implementé grupos de árboles compartidos para acelerar las operaciones de trazado de rayos en múltiples entornos aleatorios. La última optimización en realidad redujo los requisitos de paralelización, pero ahora estoy enfrentando limitaciones de tamaño de lote en su lugar. Hay compromisos en todas partes en este flujo de trabajo.