《框架語(yǔ)義分析:理論、方法與實(shí)踐》系統(tǒng)闡述了框架語(yǔ)義分析的核心理論與前沿方法,聚焦自然語(yǔ)言處理中語(yǔ)義理解的關(guān)鍵技術(shù),內(nèi)容涵蓋從傳統(tǒng)知識(shí)指導(dǎo)的框架識(shí)別到基于大語(yǔ)言模型的創(chuàng)新方法,深入探討了關(guān)系建模、區(qū)域檢測(cè)和標(biāo)記注意力等特色模型,凸顯了多技術(shù)融合與可解釋性優(yōu)勢(shì)。通過(guò)系統(tǒng)化實(shí)驗(yàn)驗(yàn)證與案例分析,本書為語(yǔ)義角色標(biāo)注、信息抽取等任務(wù)提供了實(shí)用解決方案,兼具理論深度與實(shí)踐價(jià)值。
本書適合自然語(yǔ)言處理研究者、高校師生及工業(yè)界研發(fā)人員閱讀學(xué)習(xí)。
第1章 緒論 001
1.1 框架語(yǔ)義分析 002
1.1.1 框架語(yǔ)義知識(shí)庫(kù) 002
1.1.2 框架語(yǔ)義分析任務(wù)描述 006
1.1.3 框架語(yǔ)義分析語(yǔ)料資源 008
1.2 框架語(yǔ)義分析方法概述 010
1.2.1 目標(biāo)詞識(shí)別方法 010
1.2.2 框架識(shí)別方法 012
1.2.3 框架語(yǔ)義角色標(biāo)注方法 016
1.3 框架語(yǔ)義分析的評(píng)價(jià)指標(biāo) 025
1.4 框架語(yǔ)義分析的挑戰(zhàn) 026
1.5 本章小結(jié) 028
第2章 知識(shí)指導(dǎo)的框架識(shí)別方法 029
2.1 相關(guān)工作 032
2.1.1 框架識(shí)別 032
2.1.2 知識(shí)表示 032
2.2 任務(wù)定義 033
2.3 基于圖的框架知識(shí)表示 033
2.3.1 面向框架網(wǎng)的圖卷積網(wǎng)絡(luò) 034
2.3.2 面向框架定義的表示 035
2.3.3 面向框架元素的表示 036
2.3.4 基于注意力的融合表示 037
2.4 知識(shí)指導(dǎo)的框架識(shí)別模型 038
2.4.1 目標(biāo)詞編碼器 038
2.4.2 框架網(wǎng)編碼器 040
2.4.3 模型訓(xùn)練與預(yù)測(cè) 040
2.5 實(shí)驗(yàn)與結(jié)果分析 041
2.5.1 實(shí)驗(yàn)環(huán)境設(shè)置 041
2.5.2 對(duì)比實(shí)驗(yàn)結(jié)果 042
2.5.3 消融實(shí)驗(yàn)結(jié)果 045
2.6 樣例分析 046
2.7 本章小結(jié) 047
第3章 面向關(guān)系建模的框架語(yǔ)義分析方法 049
3.1 相關(guān)工作 052
3.1.1 流水線模式的方法 052
3.1.2 聯(lián)合建模的方法 053
3.2 任務(wù)定義 054
3.3 面向關(guān)系建模的框架語(yǔ)義分析模型 054
3.3.1 模型總體結(jié)構(gòu) 054
3.3.2 上下文編碼 055
3.3.3 框架識(shí)別 056
3.3.4 跨度表示 057
3.3.5 論元識(shí)別 058
3.3.6 角色分類 060
3.3.7 模型訓(xùn)練和預(yù)測(cè) 061
3.4 實(shí)驗(yàn)與結(jié)果分析 062
3.4.1 實(shí)驗(yàn)環(huán)境設(shè)置 062
3.4.2 對(duì)比實(shí)驗(yàn)結(jié)果 064
3.4.3 消融實(shí)驗(yàn)結(jié)果 067
3.5 本章小結(jié) 070
第4章 基于區(qū)域檢測(cè)的框架語(yǔ)義分析方法 072
4.1 相關(guān)工作 074
4.1.1 基于表格填充的方法 074
4.1.2 基于表格編碼的方法 075
4.2 任務(wù)定義 075
4.3 基于區(qū)域檢測(cè)的框架語(yǔ)義分析模型 076
4.3.1 融合顯著性嵌入的編碼器 077
4.3.2 基于卷積網(wǎng)絡(luò)的表格編碼器 077
4.3.3 潛在目標(biāo)詞與論元區(qū)域檢測(cè) 080
4.3.4 面向區(qū)域的框架與角色分類 082
4.3.5 模型聯(lián)合訓(xùn)練 084
4.4 實(shí)驗(yàn)與結(jié)果分析 085
4.4.1 實(shí)驗(yàn)環(huán)境設(shè)置 085
4.4.2 對(duì)比實(shí)驗(yàn)結(jié)果 087
4.4.3 消融實(shí)驗(yàn)結(jié)果 089
4.4.4 超參數(shù)與效率分析 092
4.5 樣例分析 094
4.5.1 目標(biāo)詞預(yù)測(cè)樣例分析 094
4.5.2 語(yǔ)義結(jié)構(gòu)預(yù)測(cè)樣例分析 095
4.6 本章小結(jié) 096
第5章 基于標(biāo)記注意力的框架語(yǔ)義分析方法 098
5.1 相關(guān)工作 101
5.1.1 標(biāo)記及基于標(biāo)記的跨度表示 101
5.1.2 基于標(biāo)記的框架語(yǔ)義分析方法 102
5.2 任務(wù)定義 103
5.3 基于標(biāo)記注意力的框架分類模型 103
5.3.1 標(biāo)記注意力輸入表示 104
5.3.2 標(biāo)記表示框架分類 107
5.4 基于標(biāo)記注意力的框架語(yǔ)義角色標(biāo)注模型 108
5.4.1 潛在論元生成 109
5.4.2 框架語(yǔ)義角色標(biāo)注 110
5.5 實(shí)驗(yàn)與結(jié)果分析 113
5.5.1 實(shí)驗(yàn)環(huán)境設(shè)置 113
5.5.2 對(duì)比實(shí)驗(yàn)結(jié)果 114
5.5.3 消融實(shí)驗(yàn)結(jié)果 120
5.5.4 運(yùn)行效率分析 123
5.6 樣例分析 125
5.7 本章小結(jié) 127
第6章 基于大語(yǔ)言模型的框架語(yǔ)義分析方法 128
6.1 相關(guān)工作 129
6.2 零樣本和少樣本框架語(yǔ)義分析方法 130
6.2.1 提示設(shè)計(jì)的要素與原則 130
6.2.2 零樣本框架語(yǔ)義分析方法 132
6.2.3 少樣本框架語(yǔ)義分析方法 136
6.3 基于指令微調(diào)的框架語(yǔ)義分析方法 141
6.3.1 指令數(shù)據(jù)構(gòu)建 142
6.3.2 大模型指令微調(diào) 148
6.4 實(shí)驗(yàn)與結(jié)果分析 149
6.4.1 實(shí)驗(yàn)環(huán)境設(shè)置 149
6.4.2 零樣本實(shí)驗(yàn)結(jié)果 150
6.4.3 少樣本實(shí)驗(yàn)結(jié)果 151
6.4.4 指令微調(diào)實(shí)驗(yàn)結(jié)果 153
6.5 本章小結(jié) 155
第7章 框架語(yǔ)義分析研究總結(jié)與發(fā)展趨勢(shì) 157
7.1 研究總結(jié) 158
7.2 發(fā)展趨勢(shì) 160
參考文獻(xiàn) 162