William Falcon, Fundador y CEO de Lightning AI – Serie de Entrevistas

Lightning AI es el creador de PyTorch Lightning, un marco diseñado para el entrenamiento y la fine-tuning de modelos de inteligencia artificial, así como Lightning AI Studio. PyTorch Lightning fue desarrollado inicialmente por William Falcon en 2015 mientras estaba en la Universidad de Columbia. Fue posteriormente abierto en 2019 durante su doctorado en NYU y Facebook (META ) AI Research, bajo la guía de Kyunghyun Cho y Yann LeCun. En 2023, Lightning AI lanzó Lightning AI Studio, una plataforma en la nube que permite la codificación, el entrenamiento y la implementación de modelos de inteligencia artificial directamente desde un navegador sin necesidad de configuración.

Hasta hoy, PyTorch Lightning ha superado los 130 millones de descargas, y AI Studio admite a más de 150.000 usuarios en cientos de empresas.

¿Qué te inspiró a crear PyTorch Lightning, y cómo llevó esto a la fundación de Lightning AI?

Como creador de PyTorch Lightning, me inspiré a desarrollar una solución que desacoplara la ciencia de datos de la ingeniería, haciendo que el desarrollo de inteligencia artificial sea más accesible y eficiente. Esta visión creció a partir de mis experiencias como estudiante de pregrado en Columbia, durante mi doctorado en NYU y trabajo en Facebook AI Research. PyTorch Lightning rápidamente ganó tracción en la academia y la industria, lo que me llevó a fundar Lightning AI (inicialmente Grid.ai) en 2019. Nuestro objetivo era crear un “sistema operativo para la inteligencia artificial” que pudiera unificar el ecosistema de desarrollo de inteligencia artificial fragmentado. Esta evolución de PyTorch Lightning a Lightning AI refleja nuestro compromiso de simplificar todo el ciclo de vida de la inteligencia artificial, desde el desarrollo hasta la producción, permitiendo a los investigadores y los ingenieros construir sistemas de aprendizaje automático de extremo a extremo en días en lugar de años. La plataforma Lightning AI es la culminación de esta visión, con el objetivo de hacer que el desarrollo de inteligencia artificial sea tan sencillo como conducir un coche, sin necesidad de conocimientos profundos de tecnologías subyacentes complejas.

¿Puedes compartir la historia detrás de la transición de Grid.ai a Lightning AI y la visión que impulsa esta evolución?

La transición de Grid.ai a Lightning AI fue impulsada por la comprensión de que el ecosistema de desarrollo de inteligencia artificial necesitaba más que una solución de entrenamiento escalable. Lanzamos Grid.ai en 2020 para centrarnos en el entrenamiento de modelos en la nube. Sin embargo, a medida que la empresa crecía y escuchábamos la retroalimentación de los usuarios, reconocimos la necesidad de una plataforma integral y de extremo a extremo que pudiera abordar la naturaleza fragmentada y consumidora de tiempo del desarrollo de inteligencia artificial. Esta perspectiva llevó a la creación de Lightning AI, una solución unificada que va más allá del entrenamiento para incluir la implementación y otros componentes críticos del ciclo de vida de la inteligencia artificial. Nuestra evolución refleja una visión de simplificar y optimizar todo el proceso de desarrollo de inteligencia artificial, reduciendo el tiempo y los recursos necesarios para las iniciativas de aprendizaje automático y honrando a la creciente comunidad de desarrolladores que habían llegado a confiar en nuestras herramientas.

¿Cómo visualizas el futuro del desarrollo de inteligencia artificial, y qué papel juega Lightning AI en la configuración de ese futuro?

Visualizo un futuro en el que el desarrollo de inteligencia artificial esté democratizado y sea accesible para todos, no solo para grandes empresas tecnológicas o investigadores especializados. En Lightning AI, estamos trabajando para configurar este futuro creando una plataforma unificada que simplifica todo el ciclo de vida de la inteligencia artificial. Nuestro objetivo es hacer que la creación de aplicaciones de inteligencia artificial sea tan fácil como construir un sitio web, eliminando la necesidad de conocimientos de ingeniería extensos o infraestructura costosa. Creemos que al proporcionar herramientas que manejan las complejidades del desarrollo de inteligencia artificial – desde la preparación de datos y el entrenamiento de modelos hasta la implementación – podemos desencadenar una nueva ola de innovación. Lightning AI pretende ser el catalizador de este cambio, permitiendo que individuos y organizaciones de todos los tamaños puedan llevar sus ideas de inteligencia artificial a la vida de manera rápida y eficiente. En última instancia, vemos un futuro en el que la inteligencia artificial se convierte en una herramienta ubicua para la resolución de problemas en todas las industrias, y Lightning AI está a la vanguardia de hacer que esta visión sea una realidad.

Con PyTorch Lightning, has intentado reducir el código de caldera en la investigación de inteligencia artificial. ¿Cómo equilibras la simplicidad con la flexibilidad que los investigadores avanzados requieren?

Nuestro enfoque con PyTorch Lightning siempre ha sido encontrar un equilibrio delicado entre la simplicidad y la flexibilidad. Hemos diseñado el marco para eliminar el código de caldera y estandarizar las mejores prácticas, lo que acelera significativamente el desarrollo y reduce los errores. Sin embargo, somos conscientes de que los investigadores avanzados necesitan la capacidad de personalizar y ampliar la funcionalidad. Es por eso que hemos construido Lightning con una arquitectura modular que permite a los investigadores anular comportamientos predeterminados cuando sea necesario. Proporcionamos abstracciones de alto nivel para tareas comunes, pero también exponemos API de bajo nivel que brindan control total sobre el proceso de entrenamiento. Esta filosofía de diseño significa que los principiantes pueden comenzar rápidamente con valores predeterminados sensatos, mientras que los investigadores experimentados pueden sumergirse profundamente e implementar lógica personalizada compleja. En última instancia, nuestro objetivo es eliminar los aspectos tediosos del desarrollo de inteligencia artificial sin imponer restricciones a la creatividad o la innovación. Creemos que este equilibrio es crucial para avanzar en la investigación de inteligencia artificial mientras la hacemos más accesible a una comunidad más amplia de desarrolladores y científicos.

¿Cuáles son algunos de los avances tecnológicos más significativos que ves en el desarrollo de inteligencia artificial en los próximos años, y cómo se está preparando Lightning AI para ellos?

En los próximos años, anticipo avances significativos en la inteligencia artificial que revolucionarán la forma en que desarrollamos y desplegamos modelos. Es probable que veamos métodos de entrenamiento más eficientes, técnicas de compresión de modelos mejoradas y avances en el aprendizaje multi-modal. El aprendizaje en el borde y el aprendizaje federado se volverán cada vez más importantes a medida que empujamos hacia soluciones más preservadoras de la privacidad y eficientes en recursos. En Lightning AI, nos estamos preparando para estos cambios construyendo una plataforma flexible y escalable que pueda adaptarse a las tecnologías emergentes. Estamos centrando nuestra atención en hacer que nuestras herramientas sean compatibles con una amplia gama de aceleradores de hardware, incluidos chips de inteligencia artificial especializados, para admitir entornos de cómputo diversos. También estamos invirtiendo en investigación y desarrollo para integrar nuevos algoritmos y metodologías a medida que surgen. Nuestro objetivo es crear un ecosistema que no solo mantenga el ritmo de estos avances, sino que también ayude a democratizar el acceso a ellos, asegurando que las capacidades de inteligencia artificial de vanguardia estén disponibles para investigadores y desarrolladores de todos los niveles, no solo para aquellos en grandes empresas tecnológicas.

Tu trasfondo abarca la academia, el servicio militar y el espíritu empresarial. ¿Cómo han influido estas experiencias diversas en tu enfoque para liderar una empresa de inteligencia artificial?

Mi tiempo en operaciones especiales me enseñó a navegar la incertidumbre, tomar decisiones con información limitada y mantener la moral del equipo en situaciones desafiantes – habilidades que se traducen bien al entorno impredecible de una startup. Mi experiencia académica me inculcó un profundo aprecio por la investigación rigurosa y la innovación. El espíritu empresarial me enseñó a identificar necesidades del mercado y traducir ideas innovadoras en soluciones prácticas. Como inmigrante venezolano y veterano militar de los Estados Unidos, he desarrollado una perspectiva global que influye en nuestras prácticas de contratación en Lightning AI, donde priorizamos la diversidad y evitamos la típica cultura “tech-bro” de Silicon Valley.

Creo que esta combinación de experiencias me permite liderar nuestra empresa y abordar el desarrollo de inteligencia artificial con una visión holística, equilibrando la innovación tecnológica con consideraciones éticas y de impacto social. No se trata solo de construir inteligencia artificial de vanguardia; se trata de crear tecnología que beneficie a la sociedad mientras fomenta un entorno inclusivo donde los talentos diversos puedan prosperar. Estas experiencias han cultivado mi creencia en la creación de herramientas que democratizan la inteligencia artificial, haciéndola accesible no solo a investigadores especializados, sino a una comunidad más amplia de desarrolladores e innovadores en diversos campos.

La inteligencia artificial tiene un gran potencial para el impacto social, lo cual has expresado con pasión. ¿Cómo contribuye Lightning AI al uso de la inteligencia artificial para el bien social, y qué ejemplos hay de esto?

En Lightning AI, estamos profundamente comprometidos con el uso de la inteligencia artificial para el bien social, y creemos que el código abierto es la clave para lograr esto. Al hacer que la inteligencia artificial sea accesible y transparente, estamos democratizando la tecnología y asegurando que no esté solo en manos de unas pocas grandes corporaciones. Nuestro enfoque de código abierto permite a investigadores, desarrolladores y organizaciones en todo el mundo construir y mejorar modelos de inteligencia artificial, fomentando la innovación y la colaboración. Esta transparencia es crucial para abordar las preocupaciones éticas y los sesgos en la inteligencia artificial, ya que permite la inspección de los conjuntos de datos y algoritmos utilizados.

Hemos visto nuestra tecnología aplicada en varios campos para el impacto social, desde proyectos de salud que utilizan la inteligencia artificial para la detección temprana de enfermedades hasta iniciativas ambientales que aprovechan el aprendizaje automático para la investigación sobre el cambio climático. Al proporcionar herramientas que simplifican el desarrollo de inteligencia artificial, estamos permitiendo que más personas creen soluciones para problemas sociales apremiantes. Además, nuestro compromiso con la diversidad en la contratación garantiza que estemos trayendo perspectivas variadas a la mesa, lo cual es esencial para desarrollar inteligencia artificial que sirva a toda la sociedad, no solo a unos pocos elegidos. En última instancia, vemos a Lightning AI como un catalizador para el cambio positivo, empoderando a una comunidad global para aprovechar la inteligencia artificial para el bien mayor.

Gracias por la gran entrevista, los lectores que deseen aprender más pueden visitar Lightning AI o visitar el sitio web de William Falcon.