Все о ЧатGPT
Исследование, проведенное исследователями из Университета Пердью в США, показало, что ChatGPT пропускает более половины вопросов по разработке программного обеспечения.
Поиск «Кто ответит лучше всего?» («Кто ответит лучше?»)авторы Самия Кабир, Дэвид Удо-Име, Бонан Коу и Тяньи Чжан, проанализировали ответы чат-бота OpenAI на 517 вопросов на Stack Overflow, платформе вопросов и ответов для профессионалов в области программирования.
Как сообщает The Register, исследователи стремились оценить «правильность, последовательность, полноту и краткость» ответов, представленных инструментом.
Читать далее:
Исследователи также провели лингвистический и эмоциональный анализ ответов, опросив 12 добровольцев-участников исследования о результатах, созданных чат-ботом.
Из этих ответов около 52% были сочтены неточными, а три четверти (77%) были классифицированы как «многословные» — английский термин, обозначающий излишне длинные предложения, то есть многословные.
Наш анализ показывает, что 52% ответов ChatGPT неверны, а 77% — многословны. Тем не менее, ответы ChatGPT по-прежнему предпочтительнее в 39,34% случаев из-за их полноты и четко сформулированного языкового стиля.
Авторы исследования «Кто отвечает лучше всего?»
Участники поверили ответам ChatGPT
Несмотря на то, что у ChatGPT были неправильные ответы, участники поверили ответу ИИ. По словам исследователей, это происходит потому, что инструмент имеет приятный стиль письма и демонстрирует авторитетность в том, что он пишет.
Из полуструктурированных интервью видно, что вежливый язык, четко сформулированные ответы в стиле учебника, диапазон и аффилиация в ответах заставляют совершенно неправильные ответы казаться правильными.
Авторы исследования.
По словам исследователей, участники смогли определить неправильный ответ только тогда, когда ИИ показал очевидные ошибки, как сообщает ITPro. На вопрос, почему они не смогли определить неправильный ответ, семеро из 12 участников ответили, что «Проницательные, логичные объяснения, исчерпывающие, легко читаемые решения» сделанный ботом, заставил ее поверить, что она была права.
Проверка текстов, сделанных ChatGPT
А вы знаете, как идентифицировать ответы ChatGPT? О Цифровой вид подготовил для вас тест, чтобы определить, какой текст был сгенерирован ИИ, а какой нет. Но будьте уверены, тексты, использованные в статье, намного проще, чем в приведенном выше исследовании, являются новостями и темами, которые легко понять. Проверить.
Смотрели новые видео на YouTube от Olhar Digital? Подписывайтесь на канал!