Исследователи из Уортонской школы бизнеса и Гарварда проанализировали влияние больших языковых моделей на качество принятия бизнес-решений. Эксперимент показал, что использование ИИ-инструментов существенно повышает продуктивность сотрудников при выполнении аналитических задач и написании текстов, однако эффективность модели напрямую зависит от сложности поставленной задачи и уровня подготовки пользователя в области промпт-инжиниринга.
Авторы работы разработали специализированный бенчмарк для оценки того, как именно LLM справляются с типичными корпоративными процессами: от стратегического планирования до обработки неструктурированных данных. Исследование подчеркивает, что внедрение ИИ в бизнес-среду требует не только доступа к мощным моделям, но и пересмотра внутренних регламентов работы, чтобы минимизировать риски галлюцинаций и ошибок в критически важных выводах.
Результаты указывают на неоднородность влияния технологий на разные типы задач. В то время как рутинные операции автоматизируются с высокой точностью, задачи, требующие глубокого контекстуального понимания специфики компании, по-прежнему демонстрируют высокую вариативность результатов. Это подтверждает необходимость гибридного подхода, при котором ИИ выступает в роли ассистента, а финальное решение остается за человеком.
Ключевые факты
- Исследование проведено экспертами Wharton School и Harvard Business School.
- Оценка проводилась на базе специализированного набора данных Business AI Benchmark.
- Выявлено значительное повышение скорости выполнения аналитических задач при использовании LLM.
- Установлена прямая зависимость между качеством промптов и точностью бизнес-результатов.
- Работа подчеркивает критическую важность человеческого контроля при использовании генеративного ИИ в корпоративных процессах.