https://arxiv.org/abs/2303.12528
MEGA: Multilingual Evaluation of Generative AI (Kabir Ahuja, Rishav Hada, Millicent Ochieng, Prachi Jain, Harshita Diddee, Samuel Maina, Tanuja Ganu, Sameer Segal, Maxamed Axmed, Kalika Bali, Sunayana Sitaram)
MS의 text-davinci-003에 대한 multilingual 평가. GPT-4는 어떨지가 궁금하긴 하네요. 여하간 multilingual 문제에 대한 인식을 갖고 있는 것 같으니 GPT-5는 multilingual 문제에 대해서 더 보완되어 나올 것이라는 것은 분명할 듯 싶습니다.
#llm #multilingual