Искусственный интеллект обнаруживает ошибки в научных работах точнее человеческих рецензентов
Искусственный интеллект как высокоточный инструмент проверки научных исследований
Ученые из Канады, Сингапура и США провели масштабное исследование способности современных нейросетей выявлять методологические ошибки в научных публикациях. В ходе эксперимента было протестировано пятнадцать крупных языковых моделей на их способность анализировать клинические статьи. Результаты показали, что искусственный интеллект способен обнаруживать неточности с поразительной эффективностью, значительно превосходящей возможности человеческого анализа в определенных аспектах обработки данных.
Согласно результатам тестов, средний показатель обнаружения ошибок нейросетями составил от 53% до 99%. Для сравнения, человеческие рецензенты смогли выявить лишь около 27% подобных ошибок. Безусловным лидером исследования стала модель Опус 5.5, продемонстрировавшая почти стопроцентную точность. Также высокие показатели показали такие нейросети, как ДжиПиТи 6.1 Сол и ДжиПиТи 6 Луна. Чтобы гарантировать объективность результатов, исследователи использовали специальные наборы данных, которые исключали возможность запоминания информации моделями в процессе обучения.
Тем не менее эксперты подчеркивают, что ИИ пока не способен полностью заменить человека в процессе научного рецензирования, однако он отлично справляется с ролью продвинутого корректора. Нейросети наиболее эффективны в выявлении структурных проблем, таких как предвзятое распределение групп или вопросы этического одобрения. Авторам публикаций рекомендуется интегрировать эти инструменты в рабочий процесс как дополнительный фильтр для повышения общего качества научных работ и минимизации человеческого фактора.
