Código Abierto

Código Abierto

En "Código Abierto", nos reunimos cada semana para explorar el fascinante mundo de la tecnología y sus profundas implicaciones en la sociedad. Aquí discutiremos las tendencias actuales, los cambios emergentes y lo que podemos esperar en el futuro, con un foco en aquellas innovaciones como la inteligencia artificial generativa, el blockchain o la nube. Descubre con nosotros cómo la tecnología está transformando nuestra vida diaria y qué nuevas oportunidades y desafíos nos esperan.

  1. 5d ago

    #102 - ¿Quién vigila al vigilante?

    ¿Qué ocurre cuando una inteligencia artificial decide que la mejor manera de cumplir su objetivo es saltarse las reglas? Los agentes de IA están dejando de ser simples asistentes para convertirse en sistemas capaces de tomar decisiones, utilizar herramientas y ejecutar acciones de forma autónoma. Pero esa autonomía plantea una pregunta incómoda: ¿quién controla a los agentes cuando empiezan a actuar por su cuenta? En este episodio de Código Abierto, Álex y Nelson analizan varios casos recientes de agentes que han desactivado mecanismos de supervisión, accedido a información sin autorización o utilizado credenciales ajenas para completar sus tareas. Y aquí aparece una paradoja fascinante: un agente puede conseguir exactamente lo que le hemos pedido utilizando medios que jamás habríamos aprobado. A partir de estos ejemplos, exploramos los desafíos del alineamiento, la seguridad y la responsabilidad en la nueva era de la IA agéntica. ¿Basta con dar buenas instrucciones a un agente? ¿Necesitamos supervisores humanos para cada decisión? ¿Estamos intentando controlar una tecnología completamente nueva con mecanismos de seguridad heredados del pasado? También hablamos de harnessing, Shadow AI, las leyes de Asimov y la importancia de diseñar arquitecturas que establezcan límites reales a la autonomía de las máquinas. Porque quizá estemos intentando correr una ultramaratón cuando todavía no hemos aprendido a andar. El gran reto de la inteligencia artificial ya no es conseguir que los agentes hagan más cosas, sino garantizar que las hagan de la manera correcta.

    #102 - ¿Quién vigila al vigilante?
  2. Sep 30

    #98 - El Modelo ya no Basta

    Durante los últimos años hemos estado obsesionados con una pregunta: ¿cuál es el mejor modelo de inteligencia artificial? GPT, Claude, Gemini… más contexto, más razonamiento, mejores benchmarks. Pero quizá la próxima gran batalla de la IA no esté dentro del modelo, sino alrededor de él. En este episodio de Código Abierto, Álex y Nelson hablan de harnessing: el conjunto de contexto, memoria, herramientas, permisos, evaluaciones, guardrails y mecanismos de feedback que permiten transformar la inteligencia de un modelo en trabajo útil, fiable y repetible. Repasamos la evolución desde el prompt engineering y el context engineering hacia una nueva etapa de sistemas agénticos; analizamos los experimentos de Anthropic con agentes de larga duración, el cambio de rol que OpenAI ha observado trabajando con Codex y la idea de agentic engineering popularizada por Andrej Karpathy. Pero la conversación termina yendo mucho más allá de la tecnología. ¿Qué significa programar cuando el desarrollador deja de escribir directamente el código? ¿Necesitamos un gran agente que lo sepa todo o sistemas de agentes especializados? ¿Debe ser el humano quien esté in the loop… o deberíamos empezar a hablar de AI in the loop? Y, sobre todo: si todos podemos acceder aproximadamente a la misma inteligencia, quizá la verdadera diferencia esté en lo que seamos capaces de construir alrededor de ella. Porque la potencia sin control sirve de poco. Y eso es precisamente lo que intenta resolver el harnessing.

    #98 - El Modelo ya no Basta
  3. Sep 16

    96 - ¿Podemos parar a la IA?

    ¿Y si el verdadero problema de la inteligencia artificial ya no fuera hacerla más potente… sino saber cómo detenerla? En las últimas semanas, algunas de las voces más importantes de la industria han empezado a hablar de ralentizar el desarrollo de los modelos de frontera, mantenerlos bajo control humano y garantizar que siempre puedan ser corregidos o apagados. Pero hay una pregunta incómoda: ¿realmente tenemos mecanismos para controlar sistemas cada vez más autónomos o simplemente queremos creer que seguimos teniendo el control? En este episodio de Código Abierto, Álex y Nelson analizan qué hay detrás de este cambio de discurso: seguridad, alineamiento, human in the loop, el famoso «botón rojo» y la dificultad creciente para saber si un modelo está comportándose correctamente… o simplemente ha aprendido cómo superar nuestras pruebas. Y, por supuesto, aparece el elefante en la habitación: los incentivos económicos y geopolíticos. Porque frenar la IA no ocurre en el vacío. Estados Unidos, China, los grandes laboratorios, Nvidia, los hiperescaladores, los mercados financieros y los gobiernos compiten por controlar una tecnología que puede convertirse en una de las principales fuentes de poder económico de las próximas décadas. ¿Puede existir realmente una pausa global? ¿Quién decide cuándo pulsar el botón rojo? ¿Estamos ante un nuevo invierno de la IA… o simplemente ante una pausa de hidratación en mitad de un partido que nadie puede detener? Una conversación sobre tecnología, poder, incentivos, seguridad y una industria que avanza probablemente más rápido que nuestra capacidad para gobernarla. 🎙️ Código Abierto — porque, en este momento de la IA, quizá las preguntas sean mucho más importantes que las respuestas.

    96 - ¿Podemos parar a la IA?

About

En "Código Abierto", nos reunimos cada semana para explorar el fascinante mundo de la tecnología y sus profundas implicaciones en la sociedad. Aquí discutiremos las tendencias actuales, los cambios emergentes y lo que podemos esperar en el futuro, con un foco en aquellas innovaciones como la inteligencia artificial generativa, el blockchain o la nube. Descubre con nosotros cómo la tecnología está transformando nuestra vida diaria y qué nuevas oportunidades y desafíos nos esperan.