面向中文社交媒體評(píng)論的詞法分析

第1 章中文分詞研究／1
1.1 研究背景和意義／2
1.2 中文分詞研究現(xiàn)狀／5
1.3 面臨的問(wèn)題與挑戰(zhàn)／19
第2 章面向微博語(yǔ)料的新詞識(shí)別／22
2.1 新詞定義及其分析／23
2.2 新詞識(shí)別的統(tǒng)計(jì)量／26
2.3 新詞識(shí)別算法／33
第3 章面向微博語(yǔ)料的新詞識(shí)別方法的作用／43
3.1 新詞識(shí)別實(shí)驗(yàn)語(yǔ)料介紹／43
3.2 新詞識(shí)別實(shí)驗(yàn)評(píng)價(jià)方法／44
3.3 普通新詞識(shí)別實(shí)驗(yàn)設(shè)計(jì)及結(jié)果分析／45
3.4 低頻新詞識(shí)別實(shí)驗(yàn)設(shè)計(jì)及結(jié)果分析／50
3.5 小結(jié)／55
第4 章基于λ-主動(dòng)學(xué)習(xí)的中文微博分詞方法／57
4.1 候選樣例池的構(gòu)建／58
4.2 基于半監(jiān)督學(xué)習(xí)方法的初始分詞器／70
4.3 λ-主動(dòng)學(xué)習(xí)方法／72
第5 章基于λ-主動(dòng)學(xué)習(xí)分詞方法的作用／79
5.1 λ-主動(dòng)學(xué)習(xí)分詞方法實(shí)驗(yàn)語(yǔ)料介紹／79
5.2 評(píng)價(jià)方法／80
5.3 基于規(guī)則修正的跨領(lǐng)域微博分詞結(jié)果／80
5.4 初始分詞器的分詞結(jié)果／82
5.5 λ-主動(dòng)學(xué)習(xí)擴(kuò)充的語(yǔ)料對(duì)LSTM 分詞器的影響／83
5.6 小結(jié)／86
第6 章基于深度神經(jīng)網(wǎng)絡(luò)的中文微博分詞／88
6.1 神經(jīng)網(wǎng)絡(luò)／89
6.2 基于LSTM 神經(jīng)網(wǎng)絡(luò)的中文分詞方法／90
6.3 基于BLSTM 神經(jīng)網(wǎng)絡(luò)的中文分詞方法／93
6.4 基于BLSTM 和CRFs的協(xié)同訓(xùn)練微博分詞框架／96
第7 章基于深度神經(jīng)網(wǎng)絡(luò)的中文微博分詞的作用／107
7.1 基于深度神經(jīng)網(wǎng)絡(luò)的中文微博分詞實(shí)驗(yàn)數(shù)據(jù)介紹／107
7.2 評(píng)價(jià)方法／107
7.3 λ-主動(dòng)學(xué)習(xí)方法對(duì)LSTM 分詞器的影響／108
7.4 協(xié)同訓(xùn)練方法的分詞結(jié)果／110
7.5 小結(jié)／116
參考文獻(xiàn)／118
索引／139