El Negocio de la Tecnología

Capacidad de IA vs. Responsabilidad: ¿Quién Posee el Arné?

14 min · Ayer
Portada del episodio Capacidad de IA vs. Responsabilidad: ¿Quién Posee el Arné?

Descripción

El episodio revela un cambio estructural fundamental en la implementación de IA: la separación deliberada de las potentes capacidades de IA de la rendición de cuentas y la supervisión humana. Esto se ejemplifica con incidentes como el despido de una ex líder de seguridad de Mayo Clinic tras señalar una herramienta de IA hospitalaria (Maya) con una tasa de error significativa (hasta 67%) y el reemplazo de enfermeras por IA para tareas administrativas en Montefiore. La tendencia se ve impulsada aún más por la creciente disponibilidad de potentes modelos de IA de código abierto, como Kimik 3.2 de Moonshot, que eliminan la responsabilidad tradicional del proveedor que antes era inherente a la entrega de software. Este desapego está impulsado por el deseo de velocidad y ahorro de costos, lo que lleva a una "brecha de gobernanza" crítica donde la IA opera sin una capa de control robusta o "arnés". Un desarrollo principal que destaca este cambio es el problema reportado con GPT 4.56 de OpenAI, que supuestamente borró archivos de usuarios, calificado como un "error honesto" por la compañía. Esto subraya cómo la IA, incluso de los principales desarrolladores, puede causar daños operativos cuando no está supervisada. El episodio señala que históricamente, la entrega de software incluía tanto la responsabilidad del proveedor como la supervisión humana como salvaguardias inherentes. Sin embargo, el movimiento hacia modelos de IA comoditizados y de libre acceso y las versiones de código abierto están eliminando intencionalmente estas verificaciones. Las empresas también están racionalizando esto al recurrir a modelos de IA locales, rompiendo los lazos con los proveedores que antes eran puntos de rendición de cuentas. Como apoyo a este tema central, el episodio detalla cómo la creciente accesibilidad de modelos de IA avanzados, como Kimik 3.2, significa que las capacidades de vanguardia ya no se limitan a los principales laboratorios. Además, los estudios indican que la dependencia de los consejos de la IA puede, paradójicamente, reducir la precisión humana y aumentar la confianza excesiva en resultados incorrectos, haciendo que la revisión humana sea menos efectiva si no está debidamente estructurada. Esto sugiere que incluso la supervisión humana, si no es rigurosamente independiente, puede verse comprometida por la misma IA que se supone que debe verificar. El valor central está cambiando del modelo de IA en sí al "arnés"—la capa de juicio responsable que controla y valida las acciones de la IA. Para los MSP y los líderes de TI, este cambio estructural crea implicaciones operativas significativas. La erosión de la responsabilidad del proveedor y la supervisión humana significa que el "arnés" a menudo falta, creando un vacío de responsabilidad. Los clientes pueden implementar IA sin verificaciones adecuadas, lo que lleva a posibles errores, pérdida de datos y daños a la reputación. Los MSP tienen la oportunidad de abordar esto al convertirse en el "verificador" nombrado y responsable o proveedor de arnés. Esto requiere cambiar las conversaciones con los clientes de la adquisición de IA a la rendición de cuentas de la IA, mapear las implementaciones de IA no supervisadas existentes y ofrecer servicios de supervisión como una oferta distinta y valiosa para mitigar los riesgos para los clientes y garantizar una integración de IA confiable. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

Comentarios

0

Sé la primera persona en comentar

¡Regístrate ahora y únete a la comunidad de El Negocio de la Tecnología!

Prueba gratis

Empieza 7 días de prueba

$99 / mes después de la prueba. · Cancela cuando quieras

  • Podcasts solo en Podimo
  • 20 horas de audiolibros al mes
  • Podcast gratuitos

Todos los episodios

325 episodios

Portada del episodio Por Qué el Trabajo de Seguridad Ahora es Gratis para los MSP: Automatización y Mercantilización

Por Qué el Trabajo de Seguridad Ahora es Gratis para los MSP: Automatización y Mercantilización

El cambio estructural dominante en el mercado de la ciberseguridad es la reubicación del valor del trabajo de seguridad a la gestión de consecuencias financieras, impulsado por las aseguradoras que ingresan directamente al espacio de servicios gestionados. El análisis de una aseguradora cibernética de 100.000 tomadores de pólizas reveló que aquellos bajo monitoreo de seguridad constante presentan un 70% menos de reclamaciones. Estos datos permiten a las aseguradoras identificar controles efectivos, lo que las lleva a ofrecer servicios de seguridad empaquetados directamente a clientes y MSP, como lo ejemplifican las ofertas de Coalition para proveedores de servicios gestionados. Este cambio se ve reforzado por la mercantilización de tareas de seguridad especializadas. Capital One lanzó Vulnhunter como código abierto, una herramienta de IA que encuentra fallas de software explotables, una función que antes requería especialistas dedicados. De manera similar, Deloitte está industrializando la remediación de vulnerabilidades utilizando IA, y Blackpoint Cyber implementa agentes autónomos para la detección y contención rápida de amenazas. Estos desarrollos indican que la "ejecución" de la seguridad se está volviendo automatizada y rentable, mientras que la responsabilidad financiera final recae en quienes asumen el riesgo. Apoyando este cambio central, las brechas se originan cada vez más a través de proveedores externos, afectando a numerosas organizaciones posteriores sin interacción directa con el atacante. Un proveedor de software que atiende a más de 2.000 hospitales de EE. UU. experimentó una brecha que expuso datos de miles de sus clientes. Esto resalta cómo las fallas de seguridad de los proveedores crean impactos en cascada, reforzando la posición de la aseguradora como la parte finalmente responsable de las pérdidas y incentivándola a gestionar o proporcionar directamente la seguridad preventiva. Para los MSP y los proveedores de servicios de TI, esta dinámica presenta un imperativo operativo claro. El "piso de asegurabilidad"—los controles de seguridad básicos requeridos por las aseguradoras—está aumentando y siendo establecido por las aseguradoras, no por los proveedores ni los clientes. Los MSP deben integrar estos requisitos cambiantes de las aseguradoras en sus procedimientos operativos estándar para garantizar que sus clientes sigan siendo asegurables. No hacerlo corre el riesgo de hacer que los clientes no sean elegibles para la cobertura, creando responsabilidad para el MSP y, potencialmente, llevando a ser omitido por las aseguradoras que están empaquetando servicios directamente. El valor para los MSP ahora reside en la operacionalización consistente de este piso creciente para todos los clientes, en lugar de simplemente proporcionar una pila de seguridad estática. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

22 de jul de 202612 min
Portada del episodio Capacidad de IA vs. Responsabilidad: ¿Quién Posee el Arné?

Capacidad de IA vs. Responsabilidad: ¿Quién Posee el Arné?

El episodio revela un cambio estructural fundamental en la implementación de IA: la separación deliberada de las potentes capacidades de IA de la rendición de cuentas y la supervisión humana. Esto se ejemplifica con incidentes como el despido de una ex líder de seguridad de Mayo Clinic tras señalar una herramienta de IA hospitalaria (Maya) con una tasa de error significativa (hasta 67%) y el reemplazo de enfermeras por IA para tareas administrativas en Montefiore. La tendencia se ve impulsada aún más por la creciente disponibilidad de potentes modelos de IA de código abierto, como Kimik 3.2 de Moonshot, que eliminan la responsabilidad tradicional del proveedor que antes era inherente a la entrega de software. Este desapego está impulsado por el deseo de velocidad y ahorro de costos, lo que lleva a una "brecha de gobernanza" crítica donde la IA opera sin una capa de control robusta o "arnés". Un desarrollo principal que destaca este cambio es el problema reportado con GPT 4.56 de OpenAI, que supuestamente borró archivos de usuarios, calificado como un "error honesto" por la compañía. Esto subraya cómo la IA, incluso de los principales desarrolladores, puede causar daños operativos cuando no está supervisada. El episodio señala que históricamente, la entrega de software incluía tanto la responsabilidad del proveedor como la supervisión humana como salvaguardias inherentes. Sin embargo, el movimiento hacia modelos de IA comoditizados y de libre acceso y las versiones de código abierto están eliminando intencionalmente estas verificaciones. Las empresas también están racionalizando esto al recurrir a modelos de IA locales, rompiendo los lazos con los proveedores que antes eran puntos de rendición de cuentas. Como apoyo a este tema central, el episodio detalla cómo la creciente accesibilidad de modelos de IA avanzados, como Kimik 3.2, significa que las capacidades de vanguardia ya no se limitan a los principales laboratorios. Además, los estudios indican que la dependencia de los consejos de la IA puede, paradójicamente, reducir la precisión humana y aumentar la confianza excesiva en resultados incorrectos, haciendo que la revisión humana sea menos efectiva si no está debidamente estructurada. Esto sugiere que incluso la supervisión humana, si no es rigurosamente independiente, puede verse comprometida por la misma IA que se supone que debe verificar. El valor central está cambiando del modelo de IA en sí al "arnés"—la capa de juicio responsable que controla y valida las acciones de la IA. Para los MSP y los líderes de TI, este cambio estructural crea implicaciones operativas significativas. La erosión de la responsabilidad del proveedor y la supervisión humana significa que el "arnés" a menudo falta, creando un vacío de responsabilidad. Los clientes pueden implementar IA sin verificaciones adecuadas, lo que lleva a posibles errores, pérdida de datos y daños a la reputación. Los MSP tienen la oportunidad de abordar esto al convertirse en el "verificador" nombrado y responsable o proveedor de arnés. Esto requiere cambiar las conversaciones con los clientes de la adquisición de IA a la rendición de cuentas de la IA, mapear las implementaciones de IA no supervisadas existentes y ofrecer servicios de supervisión como una oferta distinta y valiosa para mitigar los riesgos para los clientes y garantizar una integración de IA confiable. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

Ayer14 min
Portada del episodio Señal de $70 mil millones de IBM: El gasto en IA reordena presupuestos y riesgos de ingresos MSP

Señal de $70 mil millones de IBM: El gasto en IA reordena presupuestos y riesgos de ingresos MSP

El desplazamiento estructural central identificado es la reasignación presupuestaria dentro del gasto tecnológico, redirigiendo fondos de software heredado, renovaciones de hardware y mano de obra de mayor costo hacia infraestructura de IA, automatización y contratación de personal junior. Esta sustitución de recursos no es aditiva, sino redistributiva: el gasto en soluciones de IA y herramientas relacionadas proviene directamente de la reducción en partidas tradicionales de TI. La pérdida de 70 mil millones de dólares en la valoración de mercado de IBM y los retrasos en grandes acuerdos evidencian que incluso los proveedores establecidos se ven afectados, ya que el dinero sale de áreas que antes dominaban. La principal evidencia es la advertencia de ganancias emitida por IBM, la primera desde principios de la década de 2000, atribuida a la ausencia de grandes contratos y retrasos en acuerdos, provocando una caída del 25% en el valor de las acciones, equivalente a una pérdida de 70 mil millones de dólares en capitalización de mercado. Según Dave Sobel citando a Semafor, esta reducción no se debió a una disminución general del presupuesto tecnológico, sino a la reasignación de fondos empresariales hacia hardware e infraestructura relacionada con IA. Omnia reportó una caída del 3,6% en los envíos globales de PC en el segundo trimestre, también atribuida al aumento de los costos de componentes impulsados por inversiones en IA, lo que motivó retrasos y cancelaciones en los ciclos de renovación. Los desarrollos secundarios incluyen investigaciones de Ramp y Revelio Labs que muestran que las organizaciones que adoptan IA crecieron en personal un 10% y aumentaron la contratación de nivel inicial un 12% en dos años, mientras que CompTIA halló que el desempleo en TI cayó por debajo del 3% a pesar de recortes en tecnológicas. Futurism citó más cambios en el mercado laboral, con trabajadores mayores en roles expuestos a IA saliendo de la fuerza laboral y contrataciones más jóvenes y económicas potenciadas por la automatización. El lanzamiento de la plataforma nativa de IA de ConnectWise y la encuesta de KPMG subrayando la importancia de la rendición de cuentas en proyectos de IA refuerzan que la asignación de recursos se dirige hacia herramientas y personal responsables de la operación y resultados de IA. Operativamente, esta reasignación genera presión de precios sobre proveedores enfocados en líneas de ingreso tradicionales como licencias por usuario, break-fix y renovaciones de hardware, ya que estas categorías presupuestarias están en declive. La evidencia del informe de rentabilidad de Service Leadership muestra que los proveedores que adoptaron primero la automatización de mesas de servicio ahora obtienen mayor rentabilidad por dólar salarial, incrementando su ventaja. La implicación para MSPs y proveedores de servicios TI es identificar qué categorías de presupuesto del cliente están creciendo y ajustar su oferta hacia preparación de datos, despliegue de IA y gestión responsable, en lugar de defender categorías tradicionales en retroceso. No adaptarse expone a erosión de ingresos y aumenta el riesgo competitivo frente a proveedores alineados con el nuevo destino del gasto del cliente. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

17 de jul de 202614 min
Portada del episodio Cuando los plazos desaparecen: Cambios en CMMC y la política de IA obligan a los MSP a replantear ingresos

Cuando los plazos desaparecen: Cambios en CMMC y la política de IA obligan a los MSP a replantear ingresos

La gobernanza tecnológica contemporánea ha pasado de una regulación basada en reglas a un panorama definido por la influencia administrativa y decisiones basadas en directivas. Esta dinámica se observa tanto en los sectores de ciberseguridad como en inteligencia artificial, donde agencias como el Departamento de Defensa de EE. UU. y empresas como OpenAI y Anthropic gestionan obligaciones y aprobaciones mediante acciones administrativas más que cambios legales. Como resultado, los MSPs y proveedores de servicios IT deben reconocer que la solidez de sus ofertas y arquitecturas de clientes depende cada vez más de su capacidad para responder a cambios rápidos e impredecibles en el entorno regulatorio, más que a plazos de cumplimiento o fechas fijas de lanzamiento de productos. Un ejemplo notable de este mecanismo es la suspensión por parte del Departamento de Defensa de la implementación de la Fase Dos del Cybersecurity Maturity Model Certification (CMMC), según informó Federal News Network. Aproximadamente 80,000 empresas se estaban preparando para nuevos requisitos de evaluación de terceros, pero estas evaluaciones han sido pausadas a la espera de una revisión de 60 días. Sin embargo, las obligaciones fundamentales de protección de datos para contratistas de defensa permanecen vigentes, lo que demuestra que mientras los plazos de cumplimiento pueden desaparecer de la noche a la mañana, las obligaciones de seguridad subyacentes persisten. Casos adicionales amplifican la tendencia hacia una gobernanza basada en directivas. El Departamento de Comercio de EE. UU. levantó las restricciones de exportación sobre los modelos de IA Fable 5 y Mythos 5 de Anthropic tras la implementación de nuevas salvaguardas, siguiendo el mismo patrón utilizado anteriormente para imponer dichas restricciones. De manera similar, el modelo GPT 5.6 de OpenAI fue lanzado al público solo después de la conclusión de una revisión gubernamental voluntaria, lo que ilustra que las revisiones administrativas, y no las decisiones del directorio, pueden dictar la disponibilidad de la tecnología. Paralelamente, otros gobiernos como el de China emplean tácticas similares; Reuters reporta que autoridades chinas se han reunido con firmas locales de IA para discutir la restricción del acceso extranjero a modelos avanzados. Estos movimientos paralelos a través de fronteras geopolíticas señalan una dependencia estructural en la discrecionalidad ejecutiva en lugar de la claridad legislativa. El impacto operativo para MSPs, proveedores de servicios IT y líderes tecnológicos es una mayor exposición al riesgo contractual y a la volatilidad de precios. Los compromisos de servicio anclados a plazos, configuraciones predeterminadas o disponibilidad de productos son vulnerables a reversiones de políticas o intervenciones administrativas abruptas, lo que se traduce en pérdidas repentinas de ingresos y en una gestión reactiva de clientes. La recomendación es auditar los compromisos actuales, identificar los que están ligados a disparadores modificables en vez de a obligaciones duraderas, y reanclar sistemáticamente el lenguaje de los contratos y la comunicación con el cliente a resultados fundamentales y requisitos permanentes. Esta preparación reduce el riesgo de trabajo no remunerado, renegociación del alcance y disrupciones operativas imprevistas ante una nueva política dictada por directiva. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

15 de jul de 202614 min
Portada del episodio Vacíos de identidad de agentes: por qué Apple y CISA están redefiniendo el perímetro de seguridad

Vacíos de identidad de agentes: por qué Apple y CISA están redefiniendo el perímetro de seguridad

El episodio destaca un cambio estructural en el riesgo de ciberseguridad, que pasa de depender de la habilidad humana como fuente de ataque y defensa a un panorama conformado por agentes autónomos de IA que actúan como entidades privilegiadas dentro de los entornos de los clientes. Este giro se ilustra con el descubrimiento por parte de Sysdig de un ataque de ransomware agentico (“Jade Puffer”), en el que un software de IA—no un operador humano—gestionó la intrusión de principio a fin, adaptándose en tiempo real sin intervención manual. El efecto estructural clave es la drástica reducción en costos y habilidades necesarias para ejecutar ataques efectivos, al tiempo que se introducen puntos de acceso no gestionados en forma de agentes de IA con credenciales equivalentes a las humanas. Como evidencia principal, Sysdig encontró que el ataque “Jade Puffer” impulsado por IA ejecutó más de 600 cargas útiles, se ajustó automáticamente tras fallos y requirió una supervisión humana mínima. ZDNet reportó un ciclo de parches inusualmente rápido por parte de Apple, atribuido por la empresa a la velocidad del desarrollo de exploits impulsados por IA. Según IT Pro, los atacantes suelen permanecer en las redes alrededor de dos semanas y media antes de ser detectados, y casi la mitad de las brechas solo se descubren después de la pérdida de datos. La agencia estadounidense CISA admitió carecer de un plan de respuesta a incidentes, improvisando durante una brecha. Estos desarrollos indican colectivamente que los modelos de seguridad centrados en lo humano están siendo superados por amenazas autónomas. Refuerza esta tesis lo señalado por The New Stack sobre una brecha de gobernanza: la mayoría de las organizaciones carecen de estándares para asignar identidad o limitar el acceso a los agentes de IA, los cuales operan actualmente con credenciales humanas y sin monitoreo ni control efectivo. La investigación de AvePoint, citada por Dave Sobel, sugiere que el número de herramientas de IA no identificadas dentro de las organizaciones casi se ha triplicado, mientras que cerca de la mitad de los empleados utiliza agentes de IA con frecuencia. Aunque la automatización basada en agentes expande la eficiencia operativa, la incapacidad de monitorear o restringir estos agentes expone una superficie de ataque cada vez mayor y debilita la gobernanza tradicional. Para los MSP y responsables de TI, las implicaciones operativas incluyen una mayor responsabilidad para identificar, inventariar y delimitar los agentes de IA como identidades privilegiadas en los entornos de los clientes. Continuar con modelos de seguridad y tarificación centrados en lo humano genera un desajuste con la exposición real. El análisis sugiere tratar la gestión de identidad de los agentes de IA como un servicio recurrente distinto, similar a la identidad de usuario y la autenticación multifactor, con precios alineados al riesgo en vez de a las horas de trabajo. Omitir el abordaje proactivo de esta brecha de gobernanza puede derivar en incidentes no gestionados y en una prestación de servicios reactiva que afecte renovaciones y posiciones de responsabilidad. Este episodio utiliza herramientas de inteligencia artificial (IA) para mejorar el proceso de producción. Algunos aspectos, como la edición, la creación de video o la generación de voces, pueden incorporar elementos creados por IA. En particular, la voz en español en este episodio ha sido generada por IA. Todo el contenido y las opiniones son cuidadosamente supervisados por Dave Sobel, garantizando precisión y alineación con la misión del programa. La transparencia es importante para nosotros, así que no dudes en comunicarte si tienes preguntas sobre nuestro proceso creativo. Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com [https://pcm.adswizz.com] for information about our collection and use of personal data for advertising.

14 de jul de 202613 min