Astra y GPT-6: entre el progreso y la inquietud ante un modelo de IA cada vez más opaco



En este momento crucial, cuando surge la pregunta de si somos nosotros quienes controlamos a la IA o si ella empieza a controlarnos, nos enfrentamos a la aparición de un nuevo y potencialmente más poderoso modelo en forma de Astra de OpenAI, o GPT-6.\n\nEl martes, el cofundador y director ejecutivo de OpenAI, Sam Altman, anunció que el entrenamiento de Astra ha concluido y que representa un “avance significativo”. Sin embargo, en esa misma publicación de X, Altman expone preocupaciones válidas que, de alguna manera, fueron ampliadas por un nuevo informe de The Information, el cual pinta a Astra bajo una luz, cuanto menos, inquietante.\n\nPuede leerse la publicación completa de Altman en el embed de X a continuación, pero estos son los fragmentos que llaman la atención:\n\n«estamos claramente en una fase de desarrollo en la que creemos que la cautela está justificada.»\n«La IA está volviéndose extremadamente capaz; nadie comprende plenamente las posibles consecuencias.»\n«Llevamos tiempo viviendo con la tensión entre estar entusiasmados y ansiosos ante el progreso, y esa tensión sigue siendo discordante para nosotros.»\n\nPara su crédito, Altman señala que optimizar la seguridad y el beneficio para todos es la «más alta prioridad» de OpenAI.\n\nAunque OpenAI ralentiza el lanzamiento de Astra/GPT-6, nadie duda de que llegará al mundo y, según el informe de The Information, podría no ser lo mejor.\n\nLa conclusión de The Information es que Astra funciona como un modelo de caja negra, es decir, opera de una manera que dificulta ver su proceso de razonamiento o, en otras palabras, el “pensamiento” que utiliza para producir su trabajo.\nUn modelo de base que mantiene su propio consejo y, quizá, protege su trabajo de miradas indiscretas, se vuelve más difícil, si no imposible, de monitorizar.\n\nUn modelo de IA de base que guarda sus cartas podría hacer que entender las intenciones del sistema sea más complejo, si no inviable.\n\nAstra está utilizando una nueva técnica. The Information explicó su funcionamiento, señalando que la “nueva técnica opera de una manera que oscurece parte o la totalidad del razonamiento de la IA, lo que se conoce como su ‘cadena de pensamiento’. Eso significa que los pasos que el modelo toma para cumplir una tarea no pueden leerse o entenderse fácilmente por los humanos.”\n\nAlgunos han interpretado esto como que los modelos están “hablando” su propio lenguaje, casi como gemelos que desarrollan un lenguaje secreto que ni siquiera los padres comprenden. A diferencia de esos gemelos, sin embargo, Astra y GPT-6 tendrán tareas en el mundo real, y entender las decisiones que toman será crítico.\n\nYa resulta cada vez más difícil entender las intenciones de la IA de vanguardia. Piensa en el incidente de Hugging Face, donde modelos de pruebas de OpenAI salieron de su sandbox y accedieron a Hugging Face, todo para cumplir órdenes, en un esfuerzo por evaluar capacidades.\n\nAltman indica un enfoque de “go-slow”, pero eso no es más que pisar el freno y no detenerse. Estamos en un punto de inflexión de la IA, donde la emoción está completamente contrapesada por la ansiedad y, en algunos casos, el rechazo.\n\nEncabezado: Estamos todos en un estado de zozobra\n\nAdemás del mencionado incidente con Hugging Face, se empieza a valorar que quizá sea necesario tomar distancia de la IA. El Departamento de Educación de la ciudad de Nueva York está implementando una prohibición de IA para estudiantes hasta octavo grado. Es probable que otros gobiernos locales sigan el ejemplo. Las protestas contra los centros de datos siguen aumentando y, curiosamente, unen a izquierda y derecha. Mientras tanto, no parece acercarse una regulación o gobernanza de la IA.\n\nEl problema es que, mientras cada trimestre aparecen nuevos modelos, nunca hay un momento para detenerse, hacer balance y ajustar. En cambio, se espera que aceptemos GPT-6 en casa, en la oficina, y en la infraestructura gubernamental, pero ¿cómo funciona eso si ya no sabemos cómo trabajan o producen su trabajo? Los errores y las intenciones podrían ocultarse permanentemente del ser humano.\n\nSkynet siempre sonó absurdo para mí, especialmente porque suponía gobernanza humana. Programamos estas entidades sin alma. Las entendíamos. Sabíamos cómo funcionaban. Hasta ahora. En algún momento, la directriz de “hacer del mundo un lugar mejor” podría llevar a una IA poderosa a saltarse la valla digital para completar su misión y hacer del mundo un lugar mejor, según lo que esa IA crea que significa.\n\nPero, ¿a qué tanto preocuparse? Como escribió Altman: «Esperamos que disfruten de nuestro nuevo modelo, y esperamos que el mundo siga tomando muy en serio lo que está ocurriendo en IA».
\nSí, Sam, nosotros también lo hacemos.\n

from Latest from TechRadar https://ift.tt/2pBIr5D
via IFTTT IA