en
en
Источник
Dialogue
Дата публикации
18.06.2022
Авторы
Татьяна Шаврина Алена Феногенова Александр Панченко Дарина Дементьева Варвара Логачева Ирина Никишина David Dale Ирина Кротова Никита Семенов
Поделиться

RUSSE-2022: Findings of the First Russian Detoxification Shared Task Based on Parallel Corpora

Style transfer, Detoxification, Corpus, Text generation, Evaluation, Competition, Metrics analysis

Аннотация

Text detoxification is the task of rewriting a toxic text into a neutral text while preserving its original content. It
has a wide range of applications, e.g. moderation of output of neural chatbots or suggesting less emotional version of posts on social networks. This paper provides a description of RUSSE-2022 competition of detoxification methods for the Russian language. This is the first competition which features (i) parallel training data and (ii) manual evaluation. We describe the setup of the competition, the solutions of the participating teams and analyse their performance. In addition to that, the large-scale evaluation allows us to analyse the performance of automatic evaluation metrics.

Читать в источнике

Похожие публикации

ACL
A System for Answering Simple Questions in Multiple Languages
Антон Разжигаев, Михаил Сальников, Валентин Малых, Павел Браславский, Александр Панченко
Читать источник
EMNLP
xCOMET-lite: Bridging the Gap Between Efficiency and Quality in Learned MT Evaluation Metrics
Даниил Ларионов, Михаил Селезнёв, Василий Висков, Александр Панченко, Steffen Eger
Читать источник
EMNLP
SparseGrad: A Selective Method for Efficient Fine-tuning of MLP Layers
Виктория Чекалина, Анна Руденко, Глеб Мезенцев, Александр Михалев, Александр Панченко, Иван Оселедец
Читать источник
EMNLP
LLMs to Replace Crowdsourcing For Parallel Data Creation: The Case of Text Detoxification
Даниил Московский, Сергей Плетенёв, Александр Панченко
Читать источник
ACL
Fact-Checking the Output of Large Language Models via Token-Level Uncertainty Quantification
Екатерина Фадеева, Александр Рубашевский, Артем Шелманов, Сергей Петраков, Haonan Li, Hamdy Mubarak, Евгений Цымбалов, Глеб Кузмин, Александр Панченко, Timothy Baldwin, Preslav Nakov, Максим Панов
Читать источник
ACL
Industry vs Academia: Running a Course on Transformers in Two Setups
Ирина Никишина, Мария Тихонова, Виктория Чекалина, Алексей Зайцев, Артем Важенцев, Александр Панченко
Читать источник
ACL
MERA: A Comprehensive LLM Evaluation in Russian
Алена Феногенова, Артём Червяков, Никита Мартынов, Анастасия Козлова, Мария Тихонова, Альбина Ахметгареева, Антон Емельянов, Денис Шевелев, Павел Лебедев, Леонид Синев, Катерина Коломейцева, Даниил Московский, Елизавета Гончарова, Никита Савушкин, Полина Михайлова, Анастасия Минаева, Денис Димитров, Александр Панченко, Сергей Марков
Читать источник
Связаться
Присоединяйтесь к AIRI в соцсетях
Вы можете задать нам вопрос или предложить совместный проект в области ИИ

Сообщение отправлено.

Спасибо!

Что-то пошло не так. Попробуйте снова