Исследователи из Уортонской школы бизнеса и Гарварда проанализировали влияние больших языковых моделей на качество принятия бизнес-решений. Эксперимент показал, что использование ИИ-инструментов существенно повышает продуктивность сотрудников при выполнении аналитических задач и написании текстов, однако эффективность модели напрямую зависит от сложности поставленной задачи и уровня подготовки пользователя в области промпт-инжиниринга.

Авторы работы разработали специализированный бенчмарк для оценки того, как именно LLM справляются с типичными корпоративными процессами: от стратегического планирования до обработки неструктурированных данных. Исследование подчеркивает, что внедрение ИИ в бизнес-среду требует не только доступа к мощным моделям, но и пересмотра внутренних регламентов работы, чтобы минимизировать риски галлюцинаций и ошибок в критически важных выводах.

Результаты указывают на неоднородность влияния технологий на разные типы задач. В то время как рутинные операции автоматизируются с высокой точностью, задачи, требующие глубокого контекстуального понимания специфики компании, по-прежнему демонстрируют высокую вариативность результатов. Это подтверждает необходимость гибридного подхода, при котором ИИ выступает в роли ассистента, а финальное решение остается за человеком.

Ключевые факты

  • Исследование проведено экспертами Wharton School и Harvard Business School.
  • Оценка проводилась на базе специализированного набора данных Business AI Benchmark.
  • Выявлено значительное повышение скорости выполнения аналитических задач при использовании LLM.
  • Установлена прямая зависимость между качеством промптов и точностью бизнес-результатов.
  • Работа подчеркивает критическую важность человеческого контроля при использовании генеративного ИИ в корпоративных процессах.