Wangchanberta QA Thaiqa Squad

🚀 Wangchanberta問答模型

Wangchanberta問答模型基於預訓練模型 wangchanberta-base-att-spm-uncased，使用thaiqa_squad數據集進行微調，可有效處理泰語問答任務。

🚀 快速開始

模型簡介

預訓練模型：wangchanberta-base-att-spm-uncased。這是一個基於wangchanberta-base-att-spm-uncased的模型，使用thaiqa_squad數據集進行了微調。

源代碼

你可以在 這裡 找到該項目的源代碼。

💻 使用示例

基礎用法

以下是數據清洗部分的代碼示例，展示瞭如何使用BeautifulSoup移除HTML標籤以及使用string.punctuation移除標點符號。

from bs4 import BeautifulSoup
example = """<doc id="376583" url="https://th.wikipedia.org/wiki?curid=376583" title="ลูนา 1">
ลูนา 1 ลูนา 1 (อี-1 ซีรีส์) ซึ่งในขณะนั้นรู้จักกันในชื่อ เมชตา (; "ความฝัน") เป็นยานอวกาศลำแรกที่เดินทางไปถึงบริเวณใกล้เคียงของดวงจันทร์
และเป็นยานอวกาศลำแรกในโครงการลูนาของโซเวียตที่สามารถปล่อยขึ้นไปในทิศทางเดียวกับดวงจันทร์ได้สำเร็จ</doc>"""
example = BeautifulSoup(example).get_text()
print(example)
#"ลูนา 1 ลูนา 1 (อี-1 ซีรีส์) ซึ่งในขณะนั้นรู้จักกันในชื่อ เมชตา (; "ความฝัน") เป็นยานอวกาศลำแรกที่เดินทางไปถึงบริเวณใกล้เคียงของดวงจันทร์และเป็นยานอวกาศลำแรกในโครงการลูนาของโซเวียตที่สามารถปล่อยขึ้นไปในทิศทางเดียวกับดวงจันทร์ได้สำเร็จ"

import string
punct = string.punctuation
no_punct = [char for char in example if char not in punct]
example = ''.join(no_punct)
print(example)
#"ลูนา 1 ลูนา 1 อี1 ซีรีส์ ซึ่งในขณะนั้นรู้จักกันในชื่อ เมชตา ความฝัน เป็นยานอวกาศลำแรกที่เดินทางไปถึงบริเวณใกล้เคียงของดวงจันทร์ และเป็นยานอวกาศลำแรกในโครงการลูนาของโซเวียตที่สามารถปล่อยขึ้นไปในทิศทางเดียวกับดวงจันทร์ได้สำเร็จ"

📚 詳細文檔

數據集信息

• 語言：泰語（th）
• 數據集：thaiqa_squad
• 任務類型：問答（question-answering）

部分問答示例

問題1

• 問題：ใครเป็นคนกล่าวถึง nlp
• 背景：自然語言處理（Natural language processing - NLP）是語言學、計算機科學、信息工程和人工智能的一個子領域，研究計算機語言與人類（自然）語言之間的相互作用，旨在使計算機程序能夠分析和轉換自然語言數據。自然語言處理在1950年被提及，當時英國科學家艾倫·圖靈提出了一種測試計算機或機器是否能夠像人類一樣思考或行動的方法，這種方法現在被稱為圖靈測試。目前，自然語言處理普遍採用特徵學習和深度學習[1][2]，能夠取得良好的效果，例如在語言模型[3]中，與傳統的基於統計的自然語言處理方法或基於規則的處理方法相比。

問題2

• 問題：เฝิง เส้าเฟิง รับบทอะไรใน The Palace
• 背景：馮紹峰（William Feng, Feng Shaofeng）是因《鴻門宴傳奇》和《蘭陵王》而聞名的演員，出生於1978年10月7日。他一夜成名，在2011年出演穿越劇《宮鎖心玉》中的“八阿哥”一角，與楊冪搭檔。如今，馮紹峰成為娛樂圈中備受矚目的男主角之一，也是許多女孩心目中的理想型。他不僅長相帥氣，家庭背景也十分顯赫。馮紹峰是中國大型紡織企業老闆的獨子，其家族企業在溫州、廣州和福州都有工廠，總資產不少於10億人民幣。他是家族唯一的繼承人，但由於他渴望進入娛樂圈，便選擇在上海戲劇學院學習表演。畢業後，他在娛樂圈摸爬滾打了10多年，才取得如今的成就。此外，還有消息稱他正在與《金陵十三釵》的女主角“倪妮”戀愛。