English  |  正體中文  |  简体中文  |  全文筆數/總筆數 : 78818/78818 (100%)
造訪人次 : 34702902      線上人數 : 1368
RC Version 7.0 © Powered By DSPACE, MIT. Enhanced by NTU Library IR team.
搜尋範圍 查詢小技巧:
  • 您可在西文檢索詞彙前後加上"雙引號",以獲取較精準的檢索結果
  • 若欲以作者姓名搜尋,建議至進階搜尋限定作者欄位,可獲得較完整資料
  • 進階搜尋


    請使用永久網址來引用或連結此文件: http://ir.lib.ncu.edu.tw/handle/987654321/86826


    題名: 評估中文摘要之事實一致性並探討斷詞對其之影響;Does the Tokenization Influence the Faithfulness? Evaluation of Hallucinations for Chinese Abstractive Summarization
    作者: 李正倫;Li, Zheng-Lun
    貢獻者: 資訊工程學系
    關鍵詞: 自動萃取式摘要;預訓練模型;中文斷詞;事實一致性;Abstractive Summarization;Pre?trained Model;Tokenization;Hallucination
    日期: 2021-09-30
    上傳時間: 2021-12-07 13:17:07 (UTC+8)
    出版者: 國立中央大學
    摘要: 事實一致性問題是自動萃取式摘要中關鍵且棘手的問題,近年來受
    到許多研究者的關注,然而先前之研究集中於探討英文摘要中的事實
    一致性問題,中文摘要的事實一致性則尚被評估與研究。
    我們基於中文相對於英文較為不同的部分進行研究,也就是斷詞,
    現今的中文預訓練模型大多使用和 BERT 相同的斷詞系統,實際上相
    當接近單純使用字元進行斷詞。
    透過使用不同中文斷詞套件來訓練中文 BART 模型,並在 LCSTS
    中文摘要資料集上微調,我們證實了斷詞不只影響傳統 ROUGE 分數
    也同時影響了事實一致性。
    此外考慮到簡體和繁體中文的用詞差異,我們也建立了台灣新聞弱
    監督自動萃取式摘要資料集 TWNSum ,透過最簡單的 LEAD 方式抽
    取摘要並使用事實一致性評估篩選,表明從大量未標記的新聞語料中
    生成自動萃取式摘要資料集是可行的。;Hallucination is a critical and hard problem in abstractive summarization,
    getting increasing attention in recent years. However, hallucination in some
    languages, or specifically, in Chinese, is still unexplored. We experiment with
    a special procedure in the Chinese modeling, which is tokenization, to figure
    out the effect of tokenization on hallucinations in abstractive summarization.
    Tokenization is not often taken out for additional experimented in English
    due to the language characteristics. In the Chinese scenario, current models
    use either the character?level tokenization or the tokenization similar to the
    character?level tokenization, such as the BERT tokenizer. By applying dif ferent Chinese tokenizers to the BART model, we confirm that the tokenizer
    will affect both the ROUGE score and the faithfulness of the model. More over, considering the difference between the traditional Chinese and simpli fied Chinese tokenizers, we create Taiwan Weakly supervised News Sum marization dataset (TWNSum) by using the simple LEAD method and the
    hallucination evaluation filtering. Additionally, our TWNSum dataset shows
    that creating an abstractive summarization dataset from a large amount of
    unlabeled news by a weakly supervised method is feasible.
    顯示於類別:[資訊工程研究所] 博碩士論文

    文件中的檔案:

    檔案 描述 大小格式瀏覽次數
    index.html0KbHTML108檢視/開啟


    在NCUIR中所有的資料項目都受到原著作權保護.

    社群 sharing

    ::: Copyright National Central University. | 國立中央大學圖書館版權所有 | 收藏本站 | 設為首頁 | 最佳瀏覽畫面: 1024*768 | 建站日期:8-24-2009 :::
    DSpace Software Copyright © 2002-2004  MIT &  Hewlett-Packard  /   Enhanced by   NTU Library IR team Copyright ©   - 隱私權政策聲明