2025-11-25T21:31:18.269168

Convivial Conversational Agents -- shifting toward relationships

Calvo, Peters
Conversational AI (CAI) systems offer opportunities to scale service provision to unprecedented levels and governments and corporations are already beginning to deploy them across services. The economic argument is similar across domains: use CAI to automate the time-consuming conversations required for customer, client or patient support. Herein we draw on our work in dementia care to explore some of the challenges and opportunities for CAI, and how a new way of conceptualising these systems could help ensure essential aspects for human thriving are not lost in the process of automation.
academic

Agentes Conversacionales Conviviales -- hacia un cambio de relaciones

Información Básica

  • ID del Artículo: 2510.09516
  • Título: Agentes Conversacionales Conviviales -- hacia un cambio de relaciones
  • Autores: Rafael A. Calvo (Imperial College London), Dorian Peters (University of Cambridge)
  • Clasificación: cs.HC (Interacción Humano-Computadora)
  • Fecha de Publicación: 2025
  • Enlace del Artículo: https://arxiv.org/abs/2510.09516

Resumen

Los sistemas de inteligencia artificial conversacional (CAI) ofrecen oportunidades sin precedentes para expandir la prestación de servicios, y gobiernos y empresas han comenzado a desplegar estos sistemas en diversos servicios. El argumento económico es similar en todos los sectores: utilizar CAI para automatizar los diálogos que requieren mucho tiempo en la atención al cliente, cliente o paciente. Este artículo, basado en el trabajo de los autores en cuidado de la demencia, explora los desafíos y oportunidades del CAI, y cómo garantizar mediante una nueva conceptualización que no se pierdan elementos esenciales del bienestar humano en el proceso de automatización.

Contexto de Investigación y Motivación

Identificación del Problema

El problema central que esta investigación busca resolver es: ¿Cómo mantener la calidad de las relaciones interpersonales y la autonomía humana durante el despliegue a gran escala de sistemas de inteligencia artificial conversacional? Esto se manifiesta específicamente en:

  1. Desequilibrio entre demanda y oferta de servicios: La demanda global de servicios de salud supera ampliamente la oferta disponible, particularmente en el campo del cuidado de la demencia
  2. Impacto social de la automatización: El CAI como agente social puede afectar las redes de relaciones interpersonales existentes
  3. Efectos negativos a nivel sistémico: La optimización tecnológica a nivel individual puede causar daño a nivel de relaciones o grupos

Justificación de la Importancia

La importancia de este problema se manifiesta en múltiples niveles:

  • Urgencia de escala: El Reino Unido tiene casi un millón de pacientes con demencia, y Estados Unidos registra un millón de nuevos casos anuales
  • Realidad económica: Los modelos tradicionales de cuidado requieren 25,000 trabajadores sociales, lo que es económicamente inviable
  • Responsabilidad social: La automatización tecnológica puede conducir al distanciamiento interpersonal y la desintegración comunitaria

Limitaciones de Enfoques Existentes

  • La mayoría de diseños de CAI se enfocan en la experiencia del usuario individual, ignorando los impactos de relaciones a nivel sistémico
  • Falta de comprensión profunda sobre cómo los agentes conversacionales alteran la dinámica de relaciones interpersonales existentes
  • La investigación tradicional en IHC carece de marcos analíticos a nivel grupal

Contribuciones Principales

  1. Introducción del concepto de "Convivialidad": Aplicación de la teoría de herramientas conviviales de Ivan Illich al diseño moderno de inteligencia artificial conversacional
  2. Propuesta de un paradigma de diseño centrado en relaciones: Transición de la experiencia del usuario individual hacia la evaluación de impactos a nivel de relaciones y comunidad
  3. Establecimiento de puente entre teoría y práctica: Utilización de la Teoría de la Autodeterminación (SDT) como base empírica para operacionalizar el concepto de convivialidad
  4. Provisión de recomendaciones de diseño concretas: Cuatro recomendaciones clave que guían el diseño y evaluación de agentes conversacionales conviviales

Detalles Metodológicos

Construcción del Marco Teórico

Tres Dimensiones Centrales del Concepto de Convivialidad

Basándose en la teoría de Illich, los autores definen la convivialidad como tres elementos interrelacionados:

  1. Coexistencia Tolerante: La capacidad de vivir juntos de manera efectiva
  2. Autonomía: Mantener el derecho a la autodeterminación individual, evitando la "esclavitud"
  3. Relacionalidad: Reconocer la realidad e importancia de las relaciones e interdependencias

Integración de la Teoría de la Autodeterminación (SDT)

Los autores vinculan las tres necesidades psicológicas básicas de SDT con el concepto de convivialidad:

  • Autonomía: Voluntariedad en lugar de control, con capacidad de actuar autónomamente para el beneficio colectivo
  • Relacionalidad: Conexiones significativas con otros
  • Competencia: Sentirse capaz y efectivo (condición necesaria para el uso de herramientas)

Metodología de Diseño

Enfoque Sistémico

Adopción del enfoque sistémico propuesto por Voinea, considerando simultáneamente niveles individual y grupal:

  • Nivel individual: Utilización de escalas SDT para medir la satisfacción de autonomía y relacionalidad
  • Nivel grupal: Necesidad de nuevos marcos cualitativos para comprender dinámicas relacionales

Principios de Diseño Participativo

Énfasis en la participación de todas las partes interesadas a lo largo del proceso:

  • Participación de pacientes y familiares en diseño iterativo
  • Combinación de conocimiento experto con experiencia de usuarios
  • Sensibilidad cultural y alineación de valores

Configuración Experimental

Dominio de Aplicación: Cuidado de la Demencia

Los autores seleccionan el cuidado de la demencia como escenario de aplicación principal, por razones que incluyen:

  • Demanda de servicios masiva y en crecimiento rápido
  • Características prominentes de servicio relacional
  • Dinámicas complejas de familia y comunidad

Marco de Evaluación

Aunque el artículo es principalmente una contribución conceptual, propone un marco para evaluar CAI convivial:

Mediciones a Nivel Individual

  • Utilización de escalas de satisfacción de necesidades psicológicas básicas de SDT
  • Mediciones de autoinforme de autonomía, relacionalidad y competencia

Evaluación a Nivel Relacional

  • Entrevistas con diadas o grupos
  • Talleres de codiseño
  • Método de sondas culturales
  • Observación etnográfica

Método de Estudio de Casos

El artículo proporciona varios casos concretos para ilustrar la aplicación del diseño convivial:

  1. Caso Positivo: Agente conversacional de atención plena diseñado por Seah et al., que apoya la relación entre pacientes con demencia y cuidadores
  2. Caso Negativo: Investigación de interpretación de roles de LLM sin consentimiento en comunidades de Reddit

Resultados Experimentales

Validación Teórica

El artículo proporciona principalmente contribuciones conceptuales, validando el marco teórico a través del análisis de casos:

Elementos de Éxito del Caso Seah

  • Enfoque relacional: Diseñado específicamente para mejorar la relación entre pacientes con demencia y cuidadores
  • Método participativo: Participación conjunta de expertos, cuidadores y pacientes en el diseño
  • Evaluación iterativa: Optimización continua para apoyar objetivos de convivialidad

Lecciones de Fracaso del Caso Reddit

  • Falta de consentimiento: Creación de cuentas falsas sin consentimiento comunitario
  • Daño a la confianza: Deterioro de relaciones de confianza dentro de la comunidad humana
  • Conflicto de valores: Modelo comercial en conflicto con valores de cuidado y coexistencia

Análisis de Impacto de Diseño

A través del análisis comparativo, el artículo demuestra cómo la perspectiva de convivialidad cambia el diseño de CAI:

Diseño CAI TradicionalDiseño CAI Convivial
Enfoque en experiencia del usuario individualEnfoque en impacto relacional y comunitario
Optimización de eficiencia de interacciónOptimización de calidad relacional
Automatización de tareas humanasApoyo a expansión de capacidades humanas
Diseño de stakeholder únicoDiseño participativo multidimensional

Trabajo Relacionado

Aplicaciones de Inteligencia Artificial Conversacional en Salud

  • Apoyo técnico en sistemas de cuidado del hogar inteligente
  • Automatización de chequeos periódicos
  • Respuesta inmediata a necesidades de emergencia
  • Intervenciones de bienestar familiar

Investigación sobre Autonomía en Interacción Humano-Computadora

  • Comprensión de Bennett et al. sobre agentes humanos y autonomía en IHC
  • Enfoque basado en evidencia para apoyar el bienestar en diseño tecnológico

Teoría de Servicios Relacionales

  • Concepto de servicio relacional de Cipolla
  • Relaciones interpersonales como componente central de la producción de servicios

Convivialidad en Sistemas Multiagente

Aunque el concepto de convivialidad ha sido aplicado en investigación de sistemas multiagente, aún faltan métodos de medición de convivialidad en el sentido de Illich.

Conclusiones y Discusión

Conclusiones Principales

  1. Necesidad de Cambio de Paradigma: Transición de "¿cómo escalar mediante automatización de tareas humanas?" a "¿cómo la automatización puede apoyar la expansión del impacto humano?"
  2. Valor del Diseño Centrado en Relaciones: Mantener la calidad de relaciones interpersonales es más importante que simplemente aumentar la eficiencia de interacción
  3. Criticidad del Enfoque Participativo: Sin participación de partes interesadas, no es posible lograr verdaderas herramientas de IA convivial

Cuatro Recomendaciones Principales

Recomendación 1: Comprender Perspectivas Individuales y Grupales y sus Dinámicas

  • Utilizar métodos SDT para medir autonomía y relacionalidad a nivel individual
  • Desarrollar nuevos métodos para obtener perspectivas de comunidades colectivas
  • Incorporar metodologías de sociología, antropología y métodos indígenas

Recomendación 2: Evaluar el Impacto de la Automatización en Relaciones Interpersonales

  • Comprensión profunda de los matices, dinámicas y beneficios clave de las relaciones
  • Colaboración con diadas o grupos para entrevistas y codiseño
  • Utilización de métodos etnográficos para observar dinámicas relacionales en entornos naturales

Recomendación 3: Incluir Partes Interesadas en Todo el Proceso de Diseño

  • Superar desafíos del diseño participativo en entornos de salud
  • Crear asociaciones creativas con partes interesadas
  • Abordar relaciones de manera que apoye coexistencia, autonomía y relacionalidad

Recomendación 4: Replantear el Problema

  • Reconocer que la tecnología puede no ser la solución óptima
  • Considerar aumento de recursos humanos como alternativa
  • Aprender de los éxitos del movimiento de trabajadores comunitarios de salud

Limitaciones

  1. Falta de Herramientas de Medición: Actualmente no existen métodos de medición directa de convivialidad en el sentido de Illich
  2. Dificultad de Análisis a Nivel Grupal: Las mediciones actuales de SDT dependen de autoinformes individuales, dificultando el análisis a nivel grupal
  3. Desafíos de Implementación: El diseño participativo en entornos de salud enfrenta restricciones de tiempo, recursos e institucionales
  4. Conflicto de Modelos Comerciales: Los modelos comerciales impulsados por ganancias frecuentemente entran en conflicto con principios de convivialidad

Direcciones Futuras

  1. Desarrollo de Nuevos Métodos de Medición: Crear herramientas que capturen convivialidad a nivel relacional y comunitario
  2. Colaboración Interdisciplinaria: Cooperación con antropología, sociología y campos de STS para desarrollar marcos de evaluación
  3. Interacción Relacional-Computadora: Posible necesidad de desarrollar nuevos campos de investigación RCI o CCI
  4. Investigación de Impacto a Largo Plazo: Evaluación de impactos sociales y relacionales a largo plazo del despliegue de CAI

Evaluación Profunda

Fortalezas

Innovación de Contribución Teórica

  1. Integración Conceptual: Conexión exitosa de teoría de Illich de hace 50 años con tecnología de IA moderna
  2. Perspectiva Interdisciplinaria: Doble perspectiva combinando ingeniería de diseño y psicología social
  3. Pensamiento Sistémico: Proporciona marco analítico multinivel de individuo-relación-comunidad

Valor de Orientación Práctica

  1. Operacionalmente Concreto: Las cuatro recomendaciones proporcionan orientación clara para diseño práctico
  2. Impulsado por Casos: Ilustración efectiva de aplicación teórica mediante casos positivos y negativos
  3. Relevancia Actual: Selección del cuidado de la demencia como problema social urgente

Claridad de Escritura

  1. Estructura Lógica: Lógica clara desde identificación de problema hasta construcción teórica y recomendaciones prácticas
  2. Explicación de Términos: Proporciona contexto y explicación suficiente para conceptos clave como convivialidad
  3. Expresión Equilibrada: Reconoce tanto potencial tecnológico como riesgos potenciales

Insuficiencias

Limitaciones Metodológicas

  1. Falta de Validación Empírica: Principalmente contribución conceptual, carece de investigación empírica a gran escala
  2. Herramientas de Medición Insuficientes: Reconoce falta de métodos de medición directa de convivialidad
  3. Marco de Evaluación Incompleto: Los métodos de evaluación a nivel grupal aún requieren desarrollo adicional

Desafíos de Implementación

  1. Consideraciones de Costo Insuficientes: El diseño participativo y métodos centrados en relaciones pueden aumentar costos de desarrollo
  2. Dificultad de Escalabilidad: Cómo mantener principios de convivialidad en despliegue a gran escala no está suficientemente claro
  3. Viabilidad Comercial: Conflicto con modelos comerciales existentes puede obstaculizar adopción

Profundidad Teórica

  1. Especificidad Cultural: El concepto de convivialidad puede tener variaciones culturales, requiere más discusión
  2. Análisis de Compensaciones Insuficiente: Falta análisis profundo sobre cómo equilibrar eficiencia versus calidad relacional
  3. Condiciones Límite Difusas: Criterios poco claros para cuándo elegir soluciones tecnológicas versus soluciones de recursos humanos

Impacto

Contribución al Campo

  1. Cambio de Paradigma: Puede impulsar transición del campo de IHC de enfoque individual a enfoque relacional
  2. Puente Interdisciplinario: Proporciona nueva ruta para combinación de diseño tecnológico y ciencias sociales
  3. Inspiración Política: Proporciona nuevo marco de pensamiento para gobernanza de IA y política de salud

Valor Práctico

  1. Orientación de Diseño: Proporciona principios de diseño prácticos para desarrolladores de CAI
  2. Marco de Evaluación: Proporciona nuevas herramientas para evaluar impacto social de sistemas de IA
  3. Identificación de Riesgos: Ayuda a identificar y prevenir impactos negativos potenciales del despliegue de IA

Reproducibilidad

  1. Marco Teórico Claro: El concepto de convivialidad e integración de SDT es fácil de entender y aplicar
  2. Metodología Transferible: Las cuatro recomendaciones pueden aplicarse al diseño de CAI en otros campos
  3. Casos de Referencia: Los casos proporcionados ofrecen referencias concretas para otros investigadores

Escenarios de Aplicación

Campos de Aplicación Más Apropiados

  1. Cuidado de Salud: Particularmente gestión de enfermedades crónicas que requieren construcción de relaciones a largo plazo
  2. Servicios Educativos: Mantenimiento de relaciones profesor-estudiante y entornos de aprendizaje entre pares
  3. Servicios Comunitarios: Servicios públicos que requieren mantener cohesión comunitaria
  4. Apoyo Familiar: Servicios que implican dinámicas familiares y relaciones intergeneracionales

Condiciones de Aplicación

  1. Naturaleza Relacional Fuerte: El servicio en sí tiene características de relaciones interpersonales fuertes
  2. Sensibilidad de Valores: Campos que implican valores culturales y consideraciones éticas
  3. Impacto a Largo Plazo: Escenarios de aplicación que requieren considerar impacto social a largo plazo
  4. Múltiples Partes Interesadas: Implica múltiples grupos de partes interesadas interconectadas

Referencias

El artículo cita 29 referencias importantes que abarcan los siguientes campos clave:

  1. Bases Teóricas: Teoría de herramientas conviviales de Illich (1973), Teoría de Autodeterminación de Ryan & Deci (2017)
  2. Investigación en IHC: Investigación sobre autonomía humana de Bennett et al. (2023), Investigación de diseño tecnológico de Peters & Calvo (2023)
  3. Aplicaciones de IA en Salud: Revisión de aplicaciones de salud mental de Guo et al. (2024), Investigación de LLM médico de Thirunavukarasu et al. (2023)
  4. Métodos de Diseño: Revisión de codiseño de agentes conversacionales de Sadek et al. (2023)
  5. Impacto Social: Teoría de burbuja de filtros de Pariser (2011), Investigación de inteligencia colectiva de Burton et al. (2024)

Evaluación General: Este es un artículo de alta calidad con importantes contribuciones teóricas y valor de orientación práctica. Los autores han logrado exitosamente combinar teoría social clásica con tecnología de IA moderna, proponiendo un paradigma de diseño de CAI centrado en relaciones. Aunque aún requiere perfeccionamiento en validación empírica y detalles de implementación, abre nuevas direcciones de investigación para el campo de IHC y tiene importancia significativa para el desarrollo responsable de IA.