Sobre estudiar LLMs y plantar árboles
Hace un tiempo leí una frase «el mejor momento para plantar un árbol fue hace veinte años; el segundo mejor momento es ahora».
Hay muchas ofertas de trabajo relacionadas con la Inteligencia Artificial. ¿Cuándo es un buen momento para estudiar IA? Se parece a plantar un árbol. Si querés disfrutar de la sombra (presentarte a las ofertas de trabajo) entonces hace años deberías haber estudiado IA. Este post es sobre un árbol que acabo de plantar: un plan de estudio para aprender cómo funcionan los modelos de lenguaje grandes, desde cero.
Del torno a la inteligencia artificial: cuando la precisión se autoperfecciona a sí misma
¿Qué tiene en común el torno de precisión y la inteligencia artificial?
A primera vista, nada. Uno es una máquina de hierro que arranca virutas de metal; la otra es software que predice la siguiente palabra. Pero las dos enfrentan el mismo problema fundacional: para construir una versión mejor de sí mismas, necesitan una versión de sí mismas que ya sea suficientemente buena. El torno preciso se fabrica con piezas precisas, pero las piezas precisas se fabrican en un torno preciso. La IA capaz de mejorar IA necesita ser lo bastante inteligente para entender qué mejorar, pero esa inteligencia es justamente lo que estamos tratando de construir.