Slav-NER: the 4th Cross-lingual Challenge on Recognition, Normalization, Classification, and Linking of Named Entities across Slavic languages

Abstract

This paper describes Slav-NER: the 4th Multilingual Named Entity Challenge in Slavic languages. The tasks involve recognizing mentions of named entities in Web documents, normalization of the names, and cross-lingual linking. This version of the Challenge covers three languages and five entity types. It is organized as part of the 9th Slavic Natural Language Processing Workshop, co-located with the EACL 2023 Conference. Seven teams registered and three participated actively in the competition. Performance for the named entity recognition and normalization tasks reached 90% F1 measure, much higher than reported in the first edition of the Challenge, but similar to the results reported in the latest edition. Performance for the entity linking task for individual language reached the range of 72-80% F1 measure. Detailed evaluation information is available on the Shared Task web page.Tento článek popisuje Slav-NER: 4. vícejazyčnou soutěž pojmenovaných entit ve slovanských jazycích. Úkoly zahrnují rozpoznávání zmínek o pojmenovaných entitách ve webových dokumentech, normalizaci názvů a mezijazyčné propojování. Soutěž zahrnuje tři jazyky a pět typů entit a je organizována v rámci workshopu 9th Balto-Slavic Natural Language Processing Workshop, který se koná společně s konferencí EACL 2023. Soutěže se zúčastnilo sedm týmů. Úspěšnost v úloze rozpoznávání pojmenovaných entit dosáhla 90% F-míry, což je mnohem více, než bylo zaznamenáno v prvním ročníku výzvy, ale podobně jako v posledním ročníku. Úspěšnost pro mezijazyčné propojení entit dosáhla 72-80 F-míry. Podrobné informace o hodnocení jsou k dispozici na webové stránce úlohy.