El examen más difícil para la IA

Podcast: Apple | Spotify | RSS

Un grupo de personas que saben mucho de tecnologíaA group of people who know a lot about technology 🧠 busca las preguntas más difíciles ❓ para la IA 🤖. Lo llaman “El Último Examen de la Humanidad”. Quieren saber cuándo la IA será tan lista como los expertos humanosas smart as human experts.

Este proyecto empezó después de que ChatGPT mostró una nueva IA que hace muchos exámenes fácilmenteeasily takes many exams. Dan Hendrycks, de un centro que estudia la seguridad de la IA, dice que estos exámenes son ahora muy fáciles para la IA.

Antes, la IA tenía problemas con preguntas de historia o matemáticas difícilesdifficult history or math questions. Ahora, es mucho mejor en estas cosas. Por ejemplo, una IA llamada Claude mejoró su nota en un examen de universidad del 77% al 89% en solo un año.

Pero la IA todavía tiene problemas con algunos exámenes más difíciles, como planear cosas o resolver juegos con imágenesplanning things or solving games with images. El nuevo examen 📝 se centrará en pensar de forma más complicada, que es más difícil para la IA.

Los que organizan esto quieren al menos 1,000 preguntas difíciles de las personas antes del 1 de noviembredifficult questions from people before November 1st. Expertos verán estas preguntas, y las mejores pueden ganar premios 🏆 de hasta $5,000. Buscan preguntas difíciles para la mayoría de las personas pero que los expertos puedan responder.

Alexandr Wang, de una empresa llamada Scale AI, dice que necesitamos exámenes más difíciles para ver cómo mejora la IA. El proyecto no incluirá preguntas sobre armas, porque podría ser peligrosoit could be dangerous.

Este nuevo examen quiere poner a prueba a la IA de formas que los exámenes actuales no puedencurrent exams cannot, para entender mejor cómo son de listos estos sistemas.