--- tags: AI, jothon --- # 台灣語言模型競技場 Taiwan Chatbot Arena ![](https://s3-ap-northeast-1.amazonaws.com/g0v-hackmd-images/uploads/upload_789458f8f0f0c72441a45dca95a6458a.png =300x) ## 提案代表人 林彥廷 ## 專案簡介 台灣語言模型競技場(Taiwan Chatbot Arena)旨在建立一個創新平台,對繁體中文語言模型進行深入的基準測試(Benchmarking),重點評估它們在處理台灣觀點及社會議題方面的表現。 本計畫將透過群眾盲測的形式,對私有和開源語言模型的自然語言理解(NLU)和自然語言生成(NLG)能力進行客觀比較,特別注重模型對於繁體中文內容的處理效能。 此外,本計畫的一大創新之處在於,將收集來自廣泛用戶反饋的數據公開分享給研究和開發社群,以作為強化學習和人工智慧模型精進(Reinforcement Learning from Human Feedback, RLHF)的寶貴資源。 這是台灣在語言模型領域中前所未有的嘗試,旨在激勵本地以及全球的AI研究,推動語言技術的創新及多元化發展。 通過這項計畫,我們期望不僅增強公眾對於語言模型技術的理解和興趣,也希望透過分享高質量的互動數據,促進台灣及國際社群在語言模型研究與應用的進步,為語言技術的未來發展奠定堅實基礎。 :::success License: Apache-2.0 ::: :::warning - 專案簡介:https://sch001.g0v.tw/dash/prj/Psgw1_h15KNJoFo55nCCo4GTTi_Q7C - Hugging Face:https://huggingface.co/datasets/aigrant/tw_chatbot_arena - Github: https://github.com/adamlin120/chatbot-arena - Slides: https://docs.google.com/presentation/d/1Y2zOPgMWycnbTy1mGQ0VjzBUg55I6cRBy-l2QfG4Fu4/edit?usp=sharing - Demo site: https://chatbot-arena-woad.vercel.app/ - Chrome extension: https://chromewebstore.google.com/detail/chatbot-arena/oplnfncggmdhjlimaehkehgdmljcmkio?hl=zh-TW ::: ## 成果發表影片 <iframe width=100% height="315" src="https://www.youtube.com/embed/9TgSwfv7fLY?si=21KJKaiZsR6j_KDO" title="YouTube video player" frameborder="0" allow="accelerometer; autoplay; clipboard-write; encrypted-media; gyroscope; picture-in-picture; web-share" referrerpolicy="strict-origin-when-cross-origin" allowfullscreen></iframe> > 影片連結:https://youtu.be/9TgSwfv7fLY