Fine-tuned MT Metrics Struggle in Unseed Domains [ACL 2024]

Поделиться
HTML-код
  • Опубликовано: 16 окт 2024
  • Fine-tuned MT metrics, such as COMET, are touted to be robust. We show that it's not really the case.
    Paper: arxiv.org/abs/...
    Dataset: huggingface.co...

Комментарии •

Следующие
Автовоспроизведение
Do better scores for Machine Translation mean improvement? [ACL 2024]1:04Do better scores for Machine Translation mean improvement? [ACL 2024]
Do better scores for Machine Translation mean improvement? [ACL 2024]Vilém Zouhar
Просмотров 2,3 тыс.
AI, Machine Learning, Deep Learning and Generative AI Explained10:01AI, Machine Learning, Deep Learning and Generative AI Explained
AI, Machine Learning, Deep Learning and Generative AI ExplainedIBM Technology
Просмотров 354 тыс.
Low-rank Adaption of Large Language Models: Explaining the Key Concepts Behind LoRA19:17Low-rank Adaption of Large Language Models: Explaining the Key Concepts Behind LoRA
Low-rank Adaption of Large Language Models: Explaining the Key Concepts Behind LoRAChris Alexiuk
Просмотров 108 тыс.
The Raveyard - Pressure Update Trailer00:34The Raveyard - Pressure Update Trailer
The Raveyard - Pressure Update TrailerYourFriendZeal
Просмотров 138 тыс.
50 singles speed date in front of strangers46:5850 singles speed date in front of strangers
50 singles speed date in front of strangersnectar
Просмотров 1,1 млн
The Neon Faction Is BACK - TABS (final update)24:11The Neon Faction Is BACK - TABS (final update)
The Neon Faction Is BACK - TABS (final update)CaptainSauce
Просмотров 318 тыс.
Latto - Brokey (Official Video)05:08Latto - Brokey (Official Video)
Latto - Brokey (Official Video)Latto
Просмотров 2,1 млн
RAG vs. Fine Tuning8:57RAG vs. Fine Tuning
RAG vs. Fine TuningIBM Technology
Просмотров 30 тыс.
"Don't Learn to Code, But Study This Instead..." says NVIDIA CEO Jensen Huang11:35"Don't Learn to Code, But Study This Instead..." says NVIDIA CEO Jensen Huang
"Don't Learn to Code, But Study This Instead..." says NVIDIA CEO Jensen HuangGoda Go
Просмотров 1 млн
Query, Key and Value Matrix for Attention Mechanisms in Large Language Models18:21Query, Key and Value Matrix for Attention Mechanisms in Large Language Models
Query, Key and Value Matrix for Attention Mechanisms in Large Language ModelsMachine Learning Courses
Просмотров 6 тыс.
Fine tuning Whisper for Speech Transcription49:26Fine tuning Whisper for Speech Transcription
Fine tuning Whisper for Speech TranscriptionTrelis Research
Просмотров 23 тыс.
77% Of Employees Report AI Has Increased Workloads33:0277% Of Employees Report AI Has Increased Workloads
77% Of Employees Report AI Has Increased WorkloadsThePrimeTime
Просмотров 180 тыс.
GraphRAG: The Marriage of Knowledge Graphs and RAG: Emil Eifrem19:15GraphRAG: The Marriage of Knowledge Graphs and RAG: Emil Eifrem
GraphRAG: The Marriage of Knowledge Graphs and RAG: Emil EifremAI Engineer
Просмотров 52 тыс.
LLM vs NLP | Kevin Johnson10:36LLM vs NLP | Kevin Johnson
LLM vs NLP | Kevin Johnsondscout
Просмотров 17 тыс.
What are AI Agents?12:29What are AI Agents?
What are AI Agents?IBM Technology
Просмотров 534 тыс.
"I want Llama3 to perform 10x with my private knowledge" - Local Agentic RAG w/ llama324:02"I want Llama3 to perform 10x with my private knowledge" - Local Agentic RAG w/ llama3
"I want Llama3 to perform 10x with my private knowledge" - Local Agentic RAG w/ llama3AI Jason
Просмотров 430 тыс.
Она точно меня отвезет ? 🥲 #юмор #авто #грассавто00:59Она точно меня отвезет ? 🥲 #юмор #авто #грассавто
Она точно меня отвезет ? 🥲 #юмор #авто #грассавтоКирюнчик
Просмотров 128 тыс.
СКОЛЬКО у меня БЫЛО ДЕВУШЕК? 👀 Кто меня лучше знает? Сестра или Девушка?25:34СКОЛЬКО у меня БЫЛО ДЕВУШЕК? 👀 Кто меня лучше знает? Сестра или Девушка?
СКОЛЬКО у меня БЫЛО ДЕВУШЕК? 👀 Кто меня лучше знает? Сестра или Девушка?Милс Кел
Просмотров 580 тыс.
The Future of Brawl Stars in 2025!04:27The Future of Brawl Stars in 2025!
The Future of Brawl Stars in 2025!Brawl Stars
Просмотров 1,8 млн
Детектор лжи: есть ли у меня ПАРЕНЬ? Милана Некрасова13:46Детектор лжи: есть ли у меня ПАРЕНЬ? Милана Некрасова
Детектор лжи: есть ли у меня ПАРЕНЬ? Милана НекрасоваМилана Некрасова
Просмотров 174 тыс.
Султан Лагучев ПЕРЕПЕЛ хит Славы! Как вам такая версия? | Битва поколений00:45Султан Лагучев ПЕРЕПЕЛ хит Славы! Как вам такая версия? | Битва поколений
Султан Лагучев ПЕРЕПЕЛ хит Славы! Как вам такая версия? | Битва поколенийМУЗ
Просмотров 170 тыс.
НАКЛОНЯЮЩИЙСЯ ПОЛ! КТО ПОСЛЕДНИЙ УПАДЕТ в БАССЕЙН?52:00НАКЛОНЯЮЩИЙСЯ ПОЛ! КТО ПОСЛЕДНИЙ УПАДЕТ в БАССЕЙН?
НАКЛОНЯЮЩИЙСЯ ПОЛ! КТО ПОСЛЕДНИЙ УПАДЕТ в БАССЕЙН?Дюшес
Просмотров 650 тыс.
Какие флаги у континентов? #азия #европа #америка01:00Какие флаги у континентов? #азия #европа #америка
Какие флаги у континентов? #азия #европа #америкаПослезавтра
Просмотров 527 тыс.
ХОТЕЛА НАЧАТЬ ЖИТЬ ЗАНОВО НО УЗНАВ О СВОЁМ ДИАГНОЗЕ И ЗАПЛАКАЛА.22:58ХОТЕЛА НАЧАТЬ ЖИТЬ ЗАНОВО НО УЗНАВ О СВОЁМ ДИАГНОЗЕ И ЗАПЛАКАЛА.
ХОТЕЛА НАЧАТЬ ЖИТЬ ЗАНОВО НО УЗНАВ О СВОЁМ ДИАГНОЗЕ И ЗАПЛАКАЛА.ВАСЯ НА СЕНЕ
Просмотров 573 тыс.