Se ha publicado una nueva presentación de 30 minutos de @aelluswamy, VP de IA de Tesla, donde habla sobre FSD, IA y los últimos avances del equipo. Aspectos destacados de la presentación: • La flota de vehículos de Tesla puede proporcionar 500 años de datos de conducción cada día. La maldición de la dimensionalidad: • 8 cámaras a alta velocidad de fotogramas = miles de millones de tokens por 30 segundos de contexto de conducción. • Tesla debe comprimir y extraer las correlaciones correctas entre la entrada sensorial y las acciones de control. Ventaja de datos: • Tesla tiene acceso a una "cascada de datos" — cientos de años de conducción colectiva de la flota. • Utiliza disparadores de datos inteligentes para capturar casos raros (por ejemplo, intersecciones complejas, comportamientos impredecibles). Calidad y eficiencia: • Extrae solo los datos esenciales necesarios para entrenar modelos de manera eficiente. Depuración e interpretabilidad: • A pesar de que el sistema es de extremo a extremo, Tesla aún puede solicitar al modelo que produzca datos interpretables: ocupación 3D, límites de carretera, objetos, señales, semáforos, etc. • Consulta en lenguaje natural: pregunta al modelo por qué tomó una determinada decisión. • Estas predicciones auxiliares no conducen el automóvil, pero ayudan a los ingenieros a depurar y garantizar la seguridad. Splatting Gaussiano Avanzado de Tesla (Modelado de Escenas 3D): • Tesla desarrolló un sistema de splatting gaussiano personalizado y ultra-rápido para reconstruir escenas 3D a partir de vistas limitadas de cámaras. • Produce representaciones 3D nítidas y precisas incluso desde pocos ángulos de cámara — mucho mejor que los enfoques estándar de NeRF/splatting. • Permite una depuración visual rápida del entorno de conducción en 3D. Evaluación y Modelos del Mundo: • La evaluación es el desafío más difícil: los modelos pueden funcionar bien fuera de línea pero fallar en condiciones del mundo real. • Tesla construye conjuntos de datos de evaluación equilibrados y diversos centrados en casos extremos — no solo en la conducción fácil por autopistas....