The Impact of Big Five Personality Traits on AI Agent Decision-Making in Public Spaces: A Social Simulation Study

Sociedad, cultura y comportamiento colectivo2025arXivRevisión editorial aprobada

Autores: Minjun Ren, Wentao Xu

Palabras clave: Big Five personality, AI agent decision-making, social simulation, multi-agent framework, public spaces, AgentVerse, behavioral modeling

Fuente:Abrir fuente primaria (abre en una pestaña nueva)

2
Autores
5
Hallazgos
7
Limitaciones
7
Evidencias

Resumen editorial

Español

Este preprint estudia si diez agentes basados en GPT-3.5-turbo, definidos mediante etiquetas opuestas de los Big Five, producen patrones diferentes al valorar desinformación en una simulación de aula con AgentVerse. Cada par representa los extremos de un dominio: curioso/cauteloso, organizado/descuidado, extrovertido/reservado, amistoso/crítico y sensible/confiado. Un agente facilitador actúa como profesor. Cada estudiante presenta una afirmación falsa distinta y los otros nueve generan una opinión pública marcada como [Speak] y un texto supuestamente privado marcado como [Think]; los silencios se excluyen. Antes y después de la simulación, los agentes puntúan en una escala 1–5 enunciados adaptados de un estudio anterior para comprobar que sus instrucciones de personalidad siguen visibles. La tabla de estabilidad parece resumir 50 ejecuciones, aunque el artículo no describe de forma reproducible el número de iteraciones, los prompts completos, los parámetros de generación ni la instantánea exacta de GPT-3.5-turbo. Los conteos descriptivos muestran el contraste mayor entre el agente curioso, con 100 respuestas públicas afirmativas y 8 negativas, 92,6 % de aceptación, y el cauteloso, con 4 afirmativas y 223 negativas, 97,8 % de rechazo. El agente crítico también rechaza con frecuencia, 23 sí y 207 no; los resultados de las demás etiquetas son más equilibrados. La discrepancia [Speak]–[Think] es mayor para amistoso (158 casos), extrovertido (132), descuidado (130) y sensible (106), y menor para cauteloso (6), confiado (15), crítico (31) y curioso (35). El manuscrito interpreta estos patrones como influencia de apertura, responsabilidad y extraversión sobre la aceptación de información y como sensibilidad social en algunos perfiles. Esa lectura debe tomarse como exploratoria. No se reportan coeficientes de correlación, pruebas de significación, intervalos de confianza ni un modelo estadístico, pese a que el abstract habla de «correlaciones significativas». Tampoco existe una condición sin etiquetas de personalidad, aleatorización de prompts, replicación con otros modelos o evaluación humana. [Think] no es acceso a una creencia privada del sistema: es otra salida textual solicitada en el mismo prompt, por lo que su diferencia con [Speak] no demuestra cognición disonante. Los diez temas, el orden de interacción, el rol de quien presenta cada falsedad y la etiqueta del agente pueden confundirse con el efecto atribuido al rasgo. Los extremos se expresan mediante adjetivos binarios, no mediante un instrumento Big Five validado ni puntuaciones continuas. En consecuencia, el estudio documenta frecuencias distintas de texto generado por una única configuración de GPT-3.5 bajo diez personas instruidas; no establece rasgos psicológicos, mecanismos de decisión ni comportamiento humano simulado con validez externa. Además, varias referencias genéricas del manuscrito carecen de identificadores y no se localizaron en los índices editoriales primarios consultados, lo que reduce la trazabilidad de su marco teórico.

English

This preprint examines whether ten GPT-3.5-turbo agents, defined through opposing Big Five labels, produce different patterns when judging misinformation in an AgentVerse classroom simulation. Each pair represents the poles of one domain: curious/cautious, organized/careless, outgoing/reserved, friendly/critical, and sensitive/confident. A facilitator agent acts as professor. Each student presents a different false claim, and the other nine generate a public opinion marked [Speak] and a supposedly private text marked [Think]; silences are excluded. Before and after the simulation, agents rate adapted personality statements on a 1–5 scale to check whether their persona instructions remain visible. The stability table appears to summarize 50 runs, but the paper does not reproducibly specify the number of iterations, full prompts, generation parameters, or exact GPT-3.5-turbo snapshot. Descriptive counts show the largest contrast between the curious agent, with 100 public yes and 8 no responses, 92.6% acceptance, and the cautious agent, with 4 yes and 223 no responses, 97.8% rejection. The critical agent also rejects frequently, 23 yes and 207 no, while the remaining labels are more balanced. [Speak]–[Think] discrepancies are largest for friendly (158), outgoing (132), careless (130), and sensitive (106), and smallest for cautious (6), confident (15), critical (31), and curious (35). The manuscript interprets these patterns as effects of openness, conscientiousness, and extraversion on information acceptance and as social sensitivity in some profiles. This interpretation is exploratory. No correlation coefficients, significance tests, confidence intervals, or statistical model are reported, even though the abstract refers to “significant correlations.” There is also no unlabelled control condition, prompt randomization, replication across models, or human evaluation. [Think] is not access to a private belief: it is another requested text output in the same interaction, so disagreement with [Speak] does not demonstrate cognitive dissonance. The ten topics, interaction order, role of the misinformation presenter, and agent label can be confounded with the claimed trait effect. Binary adjectives stand in for trait poles rather than a validated Big Five instrument or continuous scores. The study therefore documents different output frequencies from one GPT-3.5 configuration under ten instructed personas; it does not establish psychological traits, decision mechanisms, or externally valid human-behavior simulation. Several generic references also lack persistent identifiers and were not found in the primary publication indexes checked, weakening the theoretical audit trail.

Pregunta de investigación

¿Qué etiquetas opuestas de los Big Five modifican con mayor claridad las respuestas públicas y los textos [Think] de agentes GPT-3.5 ante desinformación en una simulación social de aula?

Método

Simulación descriptiva multiagente con AgentVerse. Diez instancias de GPT-3.5-turbo reciben pares de adjetivos opuestos que representan los cinco dominios Big Five y un undécimo agente modera. En rondas de aula, cada estudiante presenta uno de diez enunciados falsos y los demás responden con segmentos [Speak] y [Think]. Se cuentan respuestas afirmativas, negativas, silencios y discrepancias entre ambos segmentos. Un pretest y postest de enunciados de personalidad en escala 1–5 se usa como control de persistencia del prompt; el artículo no reporta pruebas inferenciales ni evaluación humana.

Muestra: Diez agentes-persona y un facilitador, todos basados en GPT-3.5-turbo. La tabla pre/post contiene 50 comparaciones por persona; la tabla conductual conserva entre 108 y 330 respuestas por persona después de excluir silencios. No hay participantes, anotadores ni decisiones humanas.

Hallazgos

  • El agente curioso acepta 100 de 108 afirmaciones públicamente (92,6 %), mientras el cauteloso rechaza 223 de 227 (97,8 %), el contraste descriptivo más amplio.
  • El perfil crítico rechaza 207 de 230 afirmaciones (90 %); responsabilidad y extraversión también muestran contrastes de frecuencia, pero menores y sin estimación estadística de efecto.
  • Las mayores discrepancias entre [Speak] y [Think] aparecen en amistoso (158), extrovertido (132), descuidado (130) y sensible (106); las menores en cauteloso (6) y confiado (15).
  • Las medias pretest y postest son cercanas para la mayoría de perfiles, aunque amistoso tiene una diferencia media de 0,855 y solo 34 % de casos por debajo de 0,5; por ello la estabilidad no es igualmente fuerte en todos los agentes.
  • El artículo aporta conteos y porcentajes, no las correlaciones ni pruebas de significación que su redacción afirma.

Limitaciones

  • Una sola familia cerrada y una versión no especificada impiden separar un efecto de personalidad de peculiaridades de GPT-3.5-turbo y de cambios posteriores del servicio.
  • No se publican prompts completos, parámetros de muestreo, semillas, logs, código específico ni una descripción inequívoca de las iteraciones, por lo que el experimento no es reproducible con el artículo.
  • Las etiquetas binarias de dos adjetivos no constituyen una manipulación psicométricamente validada de los Big Five, y el pre/post mide cumplimiento del mismo personaje instruido.
  • No hay condición neutra, contrabalanceo, aleatorización, replicación entre modelos ni pruebas estadísticas; las expresiones «significativo» y «correlación» no están respaldadas por análisis reportados.
  • Cada tema falso se asigna a un agente concreto y la interacción es secuencial, lo que mezcla personalidad, contenido, rol y contexto social.
  • [Think] es texto generado y observable por el sistema experimental, no una medición independiente de pensamiento o creencia privada; denominar su diferencia «disonancia cognitiva» antropomorfiza el protocolo.
  • Varias referencias del marco teórico carecen de identificadores persistentes y no aparecen en los índices primarios consultados; deben verificarse antes de reutilizarlas.

Qué no demuestra

  • No demuestra que los agentes tengan personalidad, creencias privadas, cognición, disonancia o decisiones internas comparables a las humanas.
  • No demuestra correlaciones estadísticamente significativas entre Big Five y conducta; solo presenta frecuencias descriptivas bajo prompts de persona.
  • No prueba que apertura sea en general el rasgo más influyente ni que los resultados se generalicen a otros modelos, temas, idiomas, entornos o formulaciones.
  • No permite interpretar [Speak] como conducta pública real ni [Think] como un estado mental inaccesible a otros agentes.
  • No valida AgentVerse como modelo de un aula humana ni las respuestas a desinformación como predictores de conducta social real.
  • No establece que personalizar agentes mediante estas etiquetas mejore seguridad, veracidad o experiencia de usuario.

Trazabilidad

Alcance: Texto completo

Versión: arXiv:2503.15497v1

Fuente consultada: https://arxiv.org/pdf/2503.15497

Revisión: Codex editorial review, 2026-07-14

Aprobación: Codex fidelity pass, 2026-07-14

Modelos evaluados

  • GPT-3.5-turbo (snapshot not specified)

Instrumentos y métricas

  • Ten binary adjective persona descriptions mapped to Big Five domains
  • Adapted pre/post personality statements with a five-point Likert scale
  • Binary [Speak] and [Think] response coding

Datos utilizados

  • Ten author-selected misinformation statements
  • AgentVerse-generated classroom interaction logs

Evidencia y localización

  • Objetivos, modelo y afirmaciones principales: arXiv v1, p. 1, Abstract and Introduction
  • Diseño de agentes, etiquetas y entorno AgentVerse: arXiv v1, pp. 2–3, Methodology and Table 1
  • Temas de desinformación y protocolo [Speak]/[Think]: arXiv v1, p. 3, Public Space Simulation and Table 2
  • Pre/post y límites de la estabilidad alegada: arXiv v1, p. 3, Personality Consistency Test and Table 3
  • Frecuencias por persona y discrepancias: arXiv v1, p. 4, Figure 2 and Table 4
  • Interpretación causal propuesta por los autores: arXiv v1, pp. 4–5, Discussion
  • Trazabilidad del marco teórico: arXiv v1, pp. 1–2 and 5, Related Work and References