Большие языковые модели (LLM) — это усовершенствованные алгоритмы глубокого обучения, которые могут анализировать подсказки на различных человеческих языках, впоследствии генерируя реалистичные и исчерпывающие ответы. Этот многообещающий класс моделей обработки естественного языка (NLP) становится все более популярным после выпуска платформы Open AI ChatGPT, которая может быстро отвечать на широкий спектр пользовательских запросов и генерировать убедительные письменные тексты для различных целей.
Поскольку эти модели становятся все более распространенными, оценка их возможностей и ограничений имеет первостепенное значение.
Эти оценки могут в конечном итоге помочь понять ситуации, в которых LLM наиболее или наименее полезны, а также определить способы их улучшения.
Джулианн Чжоу, исследователь из Нью-Йоркского университета, недавно провела исследование, направленное на оценку эффективности работы двух студентов-магистров, обученных распознавать человеческий сарказм , который влечет за собой передачу идей путем иронического заявления, прямо противоположного тому, что кто-то пытается сказать.
Ее выводы, опубликованные на сервере препринтов arXiv , помогли ей определить функции и алгоритмические компоненты, которые могут улучшить возможности обнаружения сарказма как у агентов ИИ, так и у роботов.
«В области сентиментального анализа обработки естественного языка способность правильно распознавать сарказм необходима для понимания истинного мнения людей», — написала Чжоу в своей статье.
«Поскольку использование сарказма часто основано на контексте, предыдущие исследования использовали модели языкового представления, такие как машина опорных векторов (SVM) и длинная краткосрочная память (LSTM), чтобы идентифицировать сарказм с помощью контекстной информации.
Последние инновации в области НЛП предоставило больше возможностей для обнаружения сарказма». Анализ настроений — это область исследований, которая включает в себя анализ текстов, обычно публикуемых на платформах социальных сетей или других веб-сайтах, чтобы получить представление о том, как люди относятся к определенной теме или продукту.
Сегодня многие компании инвестируют в эту область, поскольку это может помочь им понять, как они могут улучшить свои услуги и удовлетворить потребности своих клиентов.
В настоящее время существует несколько моделей НЛП, которые могут обрабатывать тексты и предсказывать их основной эмоциональный тон, или, другими словами, выражают ли они положительные, отрицательные или нейтральные эмоции.
Однако многие обзоры и комментарии, размещенные в Интернете, содержат иронию и сарказм, что может заставить моделей классифицировать их как «положительные», хотя на самом деле они выражают отрицательные эмоции, или наоборот.
Поэтому некоторые ученые-компьютерщики пытаются разработать модели, которые смогут обнаружить сарказм в письменных текстах. Две из наиболее многообещающих моделей, названные CASCADE и RCNN-RoBERTa, были представлены в 2018 году отдельными исследовательскими группами.
«В книге « BERT : предварительное обучение глубоких двунаправленных преобразователей для понимания языка» Джейкоб Девлин и др. (2018) представили новую модель языкового представления и продемонстрировали более высокую точность интерпретации контекстуализированного языка», — написал Чжоу.
«Как предложили Хазарика и др. (2018), CASCADE — это контекстно-ориентированная модель, которая дает хорошие результаты для обнаружения сарказма.
В этом исследовании анализируется корпус Reddit с использованием этих двух современных моделей и оценивается их эффективность по сравнению с базовыми моделями. найти идеальный подход к обнаружению сарказма».
По сути, Чжоу провел серию тестов, направленных на оценку способности модели CASCADE и RCNN-RoBERTa обнаруживать сарказм в комментариях, размещенных на Reddit, известной онлайн-платформе, которая обычно используется для оценки контента и обсуждения различных тем.
Способность этих двух моделей обнаруживать сарказм в выборочных текстах также сравнивалась со средней производительностью человека при выполнении той же задачи (о которой сообщалось в предыдущей работе) и с производительностью нескольких базовых моделей для анализа текстов.
«Мы обнаружили, что контекстная информация, такая как встраивание личности пользователя, может значительно улучшить производительность, а также использование преобразователя RoBERTa по сравнению с более традиционным подходом CNN», — заключила Чжоу в своей статье.
«Учитывая успех как контекстуального, так и преобразовательного подхода, как показали наши результаты, дополнение преобразователя дополнительными функциями контекстной информации может стать возможностью для будущих экспериментов».
Результаты, полученные в рамках этого недавнего исследования, вскоре могут стать основой для дальнейших исследований в этой области, что в конечном итоге будет способствовать разработке программ LLM, которые лучше распознают сарказм и иронию в человеческом языке .
Эти модели могут в конечном итоге оказаться чрезвычайно ценными инструментами для быстрого анализа настроений онлайн-обзоров, публикаций и другого пользовательского контента.
Рубрика: Развлечения и Сеть. Читать весь текст на android-robot.com.
Проверка зрения с помощью ИИ повышает уровень скрининга среди молодежи с диабетом Исследование детей и молодежи с диабетом, проведенное Детским центром Джонса Хопкинса, пришло к выводу, что так называемый автономный искусственный и...
В России создали первый ИИ, который заполняет карты пациентов вместо врача Здравоохранение нацелено на развитие цифровой медицины, еще раз подчеркнули на конгрессе «Цифровое здравоохранение» в декабре. Министр здравоохранени...
Подборка отличных Телеграм-каналов, чтобы обновить подписки Встречайте 10 достойных каналов Телеграм, на которые стоит подписаться Встречайте подборку Telegram-каналов, которые заслуживаю вашего внимания и даж...
Через 100 лет в США появятся тысячи городов-призраков Через сотню лет улицы некоторых городов США могут опустеть — это показали математические модели Определить точное количество городов на Земле невозмо...
путевку в жизнь Даже самыми умными механизмами и полностью автоматизированными технологическими процессами управляют люди. Если они профессионально подготовлены, гра...
Что происходит в Брянске спустя месяц после стрельбы в гимназии? После стрельбы в пятой гимназии в Брянске прошло больше месяца. Какие выводы сделаны и как себя чувствуют жертвы трагедии?В понедельник, 15 января, б...
Лучшие бренды серверов На рынке серверного оборудования существует несколько ведущих производителей, предлагающих высококачественные и надежные решения. Выбор зависит от ко...
Автоматическая торговая система CoinFuze совершила революцию в криптоторговле Автоматизированные торговые системы, которые еще называют алгоритмами, появились на финансовом рынке сравнительно недавно. Они уже успели себя зареко...
Смартфон OnePlus 12 сравнили с OnePlus 11 и рассказали об отличиях В одном из выпусков на YouTube-канале «SMART ОБЗОР» эксперт объяснил, есть ли смысл брать новый OnePlus 12, если можно купить более старую модель One...
Названы лучшие модели оперативной памяти DDR4 и DDR5 на начало 2024 г. Эксперт YouTube-канала «Техно-Грааль» рассказал, какую оперативную память лучше всего покупать сегодня для процессоров Intel и AMD. DDR4 Для систем н...
Поездка с риском для жизни: смолянин «налетел» на неожиданное препятствие на дороге в центре города Крышка люка, на которую наехал молодой человек, больно ударила не только по авто, но и по бюджету горожанина. Максим, герой нашей истории, — об...
В Курске открылась выставка икон из бисера Сергея Смирнова Целительная сила веры и искусства. В библиотеке имени Асеева открылась выставка икон из бисера. Их создал бывший учитель Сергей Смирнов. Необычное хо...
В Курске на базе перинатального центра работает Школа мам Быть ответственным родителем, правильно ухаживать за малышом и следить за его здоровьем научат профессионалы. В Курском перинатальном центре продолжа...
Как выбрать сапоги для рыбалки: основные критерии, продукция из магазина Pike Людям, приобщившимся к активным видам отдыха, необходима удобная и ультрапрактичная обувь. При подборе качественной пары сапог для рыбалки важно прин...
Что такое расчетный счет и как выбрать банк для открытия Расчетным называется специальный счет в банке, предназначенный для ведения бизнеса. На него получают платежи, с него делают переводы, счет используют...
Сразу шесть произведений Михаила Гуцериева стали «песнями года» Одно из главных музыкальных событий российской эстрады, гала-концерт «Песня года-2023» состоялось 2 декабря во Дворце Cпорта «Мегаспорт». Михаил Гуце...
Банковские услуги для успешного развития ООО Услуги банков играют важную роль в обеспечении эффективного финансового управления ООО. Они предоставляют широкие возможности по обслуживанию клиенто...
Секреты успешного получения займа: где искать гарантированное одобрение Займы позволяют быстро получить доступ к деньгам. Для гарантированного оформления ссуды в МФО не требуется много времени и усилий. Взять микрозайм се...
Стильный дизайн и производительность: планшеты Doogee Doogee – это бренд, который уже завоевал доверие миллионов пользователей по всему миру. Они известны своими качественными и надежными планшетами, кот...
Колонная балка 20к1: особенности и сферы применения Среди всех многочисленных разновидностей чёрного фасонного металлопроката двутавровые колонные балки занимают достойное место по объёмам производства...
Дакар-2024. Леб приблизился к Сайнсу в зачете внедорожников, Брейбек и Мацик продолжают лидировать в своих классах В Саудовской Аравии завершился девятый этап ралли-рейда «Дакар-2024». В классе внедорожников победу на этапе одержал Себастьян Леб, что позволило ему...
Кубок Азии. Таиланд против Кыргызстана, Саудовская Аравия сыграет с Оманом В матче открытия сборная Катара, хозяйка турнира и победитель прошлого розыгрыша, разгромила Ливан (3:0). В субботу Австралия победила Индию (2:0), У...
Еще один российский автозавод готовится к перезапуску Уже в первой половине 2024 года к работе вернется предприятие в Калужской области, где раньше собирали модели Volkswagen и Skoda. Завод был продан бе...
60 лет Plymouth Barracuda В сегменте пони-каров — сравнительно небольших и доступных по американским меркам спортивных машин — долгие десятилетия доминировали Ford Mustang и C...
Насколько корректно бесплатное скачивание музыки в Сети? Давайте в этой статье поговорим о том, насколько корректно скачивать недавно вышедшую в свет музыку в сети Интернет, а также о том, насколько это мож...
Основательница магазина корейской косметики рассказала о произволе в Инстаграм Основательница магазина корейской косметики LaskshmiShop рассказала о произволе искуственного интеллекта в ее Инстаграмм аккаунте, на который подписа...
Простой и надежный способ пополнить баланс на платформе Steam за несколько минут! Steam - это платформа для игр, на которой каждый геймер может найти что-то для себя. Здесь представлен широкий выбор игр различных жанров, а также до...
Северсталь: Исследование Акций и Динамики Цен Северсталь, один из крупнейших российских металлургических холдингов, привлекает внимание инвесторов своей динамикой акций и значимостью на финансовы...
Колонная балка 20к1: особенности и сферы применения Среди всех многочисленных разновидностей чёрного фасонного металлопроката двутавровые колонные балки занимают достойное место по объёмам производства...
Вячеслав Моше Кантор о том, должно ли западное общество отказаться от толерантности Предел терпимости Вячеслав Моше Кантор – один из признанных экспертов в теме толерантности и борьбы с ненавистью, что признано самыми широкими междун...
Выбор рулонных штор: секреты правильного сочетания с общим дизайном помещения Значение рулонных штор в интерьере трудно переоценить. Они не только защищают от солнечных лучей и любопытных взглядов, но и служат акцентом в дизайн...
Советы по улучшению производительности и внешнего вида Infiniti Автомобили Infiniti, известные своей роскошью и мощными техническими характеристиками, являются отличной базой для модификаций, которые могут улучшит...
Продажа электромобилей в Москве Приобрести электромобили из Китая в компании «Автотрейдер» может каждый желающий. Кстати, популярность такого рода транспортных средств с каждым годо...
Не забудьте взять с собой: 7 необычных и нужных вещей для дальней поездки Отпуск – это время, когда мы стремимся избавиться от лишних забот и окунуться в приятные моменты отдыха. Однако, подготовка к путешествию часто...
7 фильмов, которые меняют мировоззрение Кинематограф несет в себе огромную силу воздействия на человеческое сознание. Некоторые фильмы способны не просто развлечь или впечатлить зрителя, но...