Cómo usan las organizaciones la IA: evidencia de ChatGPT [pdf]
El nuevo artículo de OpenAI sobre cómo usan las organizaciones ChatGPT está provocando reacciones mixtas: muchos critican su estructura, la ubicación de las figuras y la escasa profundidad analítica, a pesar de que los datos de uso son interesantes. Los comentaristas cuestionan si funciona más como marketing que como investigación, señalan la falta de un ROI claro y medible para las empresas, y destacan la brecha entre la adopción corporativa descendente y el uso de base por profesionales individuales como los docentes. Otros señalan preocupaciones metodológicas y advierten que medir el volumen de mensajes o la “intensidad de uso” puede ser un mal proxy del impacto económico real.
Longitud, formato y género del artículo
- El PDF tiene 69 páginas, pero el texto central es de ~23 páginas a doble espacio; el resto son figuras, tablas y referencias.
- Algunos dicen que “no es tan largo”, mientras que otros sienten que el material de apoyo aporta poco.
- Debate sobre el formato: una sola columna, amplio interlineado, figuras reunidas al final.
- Varios comentaristas señalan que esto es estándar para trabajos preliminares de economía / ciencias sociales, no un “white paper” pulido.
Calidad percibida y rigor del estudio
- Críticas de que se siente como un “volcado de datos” con poco análisis significativo.
- Quejas de que las figuras clave están lejos de donde se las menciona, lo que dificulta la lectura y la comprobación cruzada de las afirmaciones.
- Algunos lo describen como calidad típica de preprint; otros dicen que “apesta”, especialmente las figuras.
Marketing, hype e ինտenciones
- Sospecha de que los laboratorios de IA de frontera usan estos artículos como marketing para los interesados, más que como investigación pura.
- Comparaciones con whitepapers de cripto/NFT: se lee como un anuncio que fomenta la adopción para “averiguar para qué sirve”.
- Réplica de que algunos términos (p. ej., “tecnología de propósito general”) son jerga económica estándar, no puro hype.
Uso real de la IA en organizaciones y escuelas
- Observaciones de que las grandes empresas pueden tener una adopción más formal debido a controles de cumplimiento.
- Múltiples anécdotas de docentes que usan ChatGPT personalmente para crear planes de clase, diapositivas, juegos y analizar datos de exámenes, con impacto positivo en el aula.
- Otros cuentan que hay docentes que ven la IA en el aula como deshonesta o equivalente al plagio y se niegan a usarla.
Educación, desigualdad y tecnología
- Largo subhilo sobre cómo la tecnología (incluida la IA) en las escuelas públicas puede erosionar las habilidades analíticas, en contraste con las escuelas privadas de élite que enfatizan una educación tradicional, de baja tecnología y rigurosa.
- Contraejemplos donde programas de inmersión en escuelas públicas superan a programas privados muy centrados en la tecnología.
- Debate sobre si las diferencias se deben más a la financiación, el origen de los padres, los compañeros o la calidad de la administración.
Medición del ROI y del impacto
- Algunos interpretan el mensaje implícito del artículo como: las empresas no tienen un ROI claro y medible; la adopción es temprana y las métricas son inmaduras.
- Se plantean preguntas sobre por qué los proveedores no articulan mejor el ROI si venden “inteligencia”, frente a la visión de que la medición es trabajo del cliente.
- Un comentarista advierte que la intensidad de uso es un proxy débil del impacto económico, especialmente cuando los juniors usan más la IA que los seniors.
Preocupaciones metodológicas
- Crítica de que los adoptantes se muestrean, pero los no adoptantes usan la población completa de Compustat, sin divulgar la tasa de muestreo.
- Preocupación de que esto sea estadísticamente arriesgado y no tenga en cuenta implementaciones piloto pequeñas.