Curiosamente, Karpathy y Sutskever ahora ya dejaron OpenAI
Ahora OpenAI parece funcionar alrededor de Sam Altman y Greg Brockman
De los cuatro, Karpathy y Sutskever eran los que más impresionaban, y espero que sigan logrando grandes cosas
Los 6 científicos principales se fueron hace mucho, y OpenAI ahora se convirtió en una empresa dirigida por gente de marketing, negocios, software y productización
Cuando la próxima ola de innovación en deep learning arrase el mundo, parece que Microsoft se quedará con lo que quede
Ganarán mucho dinero, pero si no logran reemplazar lo que perdieron, no parece haber futuro
Karpathy sigue siendo una figura enorme en machine learning/IA, y una de las pocas personas que vale la pena seguir de forma constante en Twitter/X
Creo que Dario tampoco recibe suficiente reconocimiento
Me gusta mucho Karpathy
Es como un académico polímata clásico y maestro
El escenario que se me viene a la cabeza es que, para lanzar un modelo nuevo antes de Google IO, pasaron por encima de las objeciones del equipo de seguridad
Parece que el llamado superalignment también desaparece así
Ilya, Jan Leike, William Saunders y Leopold Aschenbrenner se van todos
Es la persona que escribió “Bad universal priors and notions of optimality”, y alguien que hizo con el programa MIRI de Hutter algo parecido a lo que Gödel hizo con el programa de Hilbert
Cada vez que camino por los alrededores de la Universidad de Toronto, a menudo pienso en la escena de hace unos 10 años, cuando Ilya intentaba descifrar algo en el laboratorio al lado del de Alex
Cuesta creer que esta nueva ola de IA haya empezado ahí
Ilya, Karpathy, Jimmy Ba y muchos más estaban justo ahí en el momento en que estaba Hinton
En ese entonces, la Universidad de Toronto era realmente impresionante
De ese grupo también salió una versión de minería de Bitcoin basada en GPU
Alrededor de 2014, Ethereum también nació por esa zona, y recuerdo las primeras reuniones de Ethereum cerca de Queen y Spadina, con Vitalik participando
Pero como dijo alguien más, aunque teníamos al padre del deep learning, Geoffrey Hinton, y a personas como Ilya y Vitalik, casi no obtuvimos beneficios reales de eso
Pero ninguno de ellos creó una empresa de IA en Toronto
Como canadiense, me decepciona lo ineficientes que somos para crear empresas exitosas
Después de aquel intento de destitución, parecía casi inevitable, y probablemente estaban afinando los detalles de la salida
¿Pero justo al día siguiente del anuncio de nuevas funciones?
Tal vez parte del acuerdo anterior era: “si llevas la próxima función importante hasta el lanzamiento, te dejamos ir en buenos términos”
Viendo que en una entrevista dijo que para pasar a la siguiente etapa de comprensión hacía falta aprendizaje multimodal de extremo a extremo, creo que Omni fue trabajo suyo
Probablemente lo venía pensando desde hace tiempo y, cuando el lanzamiento aumentó la atención sobre él, quizá le exigieron tomar una decisión
También podría ser una jugada inteligente
La noticia de OpenAI se metió alrededor de Google IO y le quitó atención a Google, y como acababan de hacer un gran anuncio, también se redujo un poco el impacto de la noticia negativa
Si la noticia de la salida aparece después del anuncio de nuevas funciones, la gente le presta relativamente menos atención que en otro momento
Es el destino común de las personas idealistas que crean algo grandioso y luego, en medio de luchas de poder, son descartadas por la gerencia
¿Cuántas veces se ha repetido esto?
¿Cuántas veces? Si eso es la base del modelo económico más exitoso de la humanidad
Puede que algunos no sean descartados, pero nunca recibirán suficiente reconocimiento por su aporte frente a un jefe despistado con una sonrisa de un millón de dólares, tratando con gente ignorante y con personas que tienen billeteras de mil millones de dólares
Aun así, hay que agradecerle a Dios o a la naturaleza que existan en nuestra especie personas capaces de entender y crear cosas
Las personas necesarias para una revolución y las personas necesarias después de la revolución no son las mismas
“Hacer que la IA general beneficie a todos” es el nuevo Don’t Be Evil
“Queremos poner la IA en sus manos”
¿Para quedárnosla?
¡No! ¿Por qué se te ocurriría eso, villano…?
OpenAI significa extender las manos más allá de unos guantes gruesos de goma y plexiglás para rogar por otra dosis de IA
No entiendo por qué se trata el cambio de empleo de técnicos como si fueran cambios de plantel en equipos deportivos de las grandes ligas
¿Estos influencers “de puro nombre” son inteligentes? Claro
Pero la inteligencia no es tan rara
Estas personas también son técnicos como la mayoría de los que están aquí, y más que ser excepcionalmente más inteligentes, tuvieron suerte en la dirección de su carrera y en su especialización
No son genios de los negocios; simplemente son personas que ocuparon ciertos roles
¿Los cambios de liderazgo afectan al negocio? Hasta cierto punto, sí, pero diría que alrededor del 5% de lo que uno esperaría por el alboroto chismoso alrededor de las figuras de la IA
Ya basta
Miremos la tecnología, miremos el trabajo real
La cantidad de personas afectadas profesionalmente porque estas personas cambian dónde cobran su sueldo está mucho más cerca de 0 que de 50%
No, estas son personas que definen la empresa, y esos puestos son mucho menos reemplazables y son roles que ellas mismas crearon
¿Su próximo destino será Meta?
Está entrando mucho dinero al área de IA, tienen muchos recursos de cómputo y parece que podría hacer cualquier investigación que quiera
Es muy probable que no
La política interna por sí sola alcanza para volver loco a casi cualquiera
No puede ser irrelevante que se vayan personas que dedicaron la última década a trabajos que fueron avances decisivos
Es un error pensar que su suerte continuará y que esta salida no es una señal del declive de OpenAI
Tal vez convenga monetizar mientras la reputación todavía tenga valor
Parece más probable que sean otros equipos los que abran nuevos caminos
1 comentarios
Opiniones de Hacker News
Curiosamente, Karpathy y Sutskever ahora ya dejaron OpenAI
Ahora OpenAI parece funcionar alrededor de Sam Altman y Greg Brockman
De los cuatro, Karpathy y Sutskever eran los que más impresionaban, y espero que sigan logrando grandes cosas
Cuando la próxima ola de innovación en deep learning arrase el mundo, parece que Microsoft se quedará con lo que quede
Ganarán mucho dinero, pero si no logran reemplazar lo que perdieron, no parece haber futuro
Es como un académico polímata clásico y maestro
Jan Leike también anunció que se va https://twitter.com/janleike/status/1790603862132596961
Ilya, Jan Leike, William Saunders y Leopold Aschenbrenner se van todos
Cada vez que camino por los alrededores de la Universidad de Toronto, a menudo pienso en la escena de hace unos 10 años, cuando Ilya intentaba descifrar algo en el laboratorio al lado del de Alex
Cuesta creer que esta nueva ola de IA haya empezado ahí
Ilya, Karpathy, Jimmy Ba y muchos más estaban justo ahí en el momento en que estaba Hinton
De ese grupo también salió una versión de minería de Bitcoin basada en GPU
Alrededor de 2014, Ethereum también nació por esa zona, y recuerdo las primeras reuniones de Ethereum cerca de Queen y Spadina, con Vitalik participando
Pero como dijo alguien más, aunque teníamos al padre del deep learning, Geoffrey Hinton, y a personas como Ilya y Vitalik, casi no obtuvimos beneficios reales de eso
Como canadiense, me decepciona lo ineficientes que somos para crear empresas exitosas
Después de aquel intento de destitución, parecía casi inevitable, y probablemente estaban afinando los detalles de la salida
¿Pero justo al día siguiente del anuncio de nuevas funciones?
La noticia de OpenAI se metió alrededor de Google IO y le quitó atención a Google, y como acababan de hacer un gran anuncio, también se redujo un poco el impacto de la noticia negativa
Jakub Pachocki es impresionante
Estuvo entre los 20 mejores en las olimpiadas polacas de algoritmos
https://oi.edu.pl/contestants/Jakub%20Pachocki/
No lo había conectado para nada
[1] https://codeforces.com/profile/meret
Es el destino común de las personas idealistas que crean algo grandioso y luego, en medio de luchas de poder, son descartadas por la gerencia
¿Cuántas veces se ha repetido esto?
Puede que algunos no sean descartados, pero nunca recibirán suficiente reconocimiento por su aporte frente a un jefe despistado con una sonrisa de un millón de dólares, tratando con gente ignorante y con personas que tienen billeteras de mil millones de dólares
Aun así, hay que agradecerle a Dios o a la naturaleza que existan en nuestra especie personas capaces de entender y crear cosas
“Hacer que la IA general beneficie a todos” es el nuevo Don’t Be Evil
¿Para quedárnosla?
¡No! ¿Por qué se te ocurriría eso, villano…?
OpenAI significa extender las manos más allá de unos guantes gruesos de goma y plexiglás para rogar por otra dosis de IA
No entiendo por qué se trata el cambio de empleo de técnicos como si fueran cambios de plantel en equipos deportivos de las grandes ligas
¿Estos influencers “de puro nombre” son inteligentes? Claro
Pero la inteligencia no es tan rara
Estas personas también son técnicos como la mayoría de los que están aquí, y más que ser excepcionalmente más inteligentes, tuvieron suerte en la dirección de su carrera y en su especialización
No son genios de los negocios; simplemente son personas que ocuparon ciertos roles
¿Los cambios de liderazgo afectan al negocio? Hasta cierto punto, sí, pero diría que alrededor del 5% de lo que uno esperaría por el alboroto chismoso alrededor de las figuras de la IA
Ya basta
Miremos la tecnología, miremos el trabajo real
La cantidad de personas afectadas profesionalmente porque estas personas cambian dónde cobran su sueldo está mucho más cerca de 0 que de 50%
¿Su próximo destino será Meta?
Está entrando mucho dinero al área de IA, tienen muchos recursos de cómputo y parece que podría hacer cualquier investigación que quiera
La política interna por sí sola alcanza para volver loco a casi cualquiera
No puede ser irrelevante que se vayan personas que dedicaron la última década a trabajos que fueron avances decisivos
Es un error pensar que su suerte continuará y que esta salida no es una señal del declive de OpenAI
Tal vez convenga monetizar mientras la reputación todavía tenga valor
Parece más probable que sean otros equipos los que abran nuevos caminos