資料介紹
中文抽詞在中文自然語言處理中是最基礎(chǔ)的工作。本文提出了一種無詞典的t-score 和二分
相結(jié)合的抽詞算法。它首先對原始文本進(jìn)行預(yù)處理,利用噪音詞的輔助信息來做初始切分,經(jīng)過處理后一部分詞被抽取出來,存入結(jié)果集。接著利用本文的抽詞算法來進(jìn)行二次抽詞,本算法應(yīng)用了N-Gram 的思想,經(jīng)過實(shí)驗(yàn)證明,該算法不但抽詞速度快,而且抽取出的詞相對長度大,維護(hù)了中文語言的完整性,為進(jìn)一步進(jìn)行語義分析和索引構(gòu)建打下了良好的基礎(chǔ)。
關(guān)鍵字:無詞典;t-score;二分法;快速抽詞
相結(jié)合的抽詞算法。它首先對原始文本進(jìn)行預(yù)處理,利用噪音詞的輔助信息來做初始切分,經(jīng)過處理后一部分詞被抽取出來,存入結(jié)果集。接著利用本文的抽詞算法來進(jìn)行二次抽詞,本算法應(yīng)用了N-Gram 的思想,經(jīng)過實(shí)驗(yàn)證明,該算法不但抽詞速度快,而且抽取出的詞相對長度大,維護(hù)了中文語言的完整性,為進(jìn)一步進(jìn)行語義分析和索引構(gòu)建打下了良好的基礎(chǔ)。
關(guān)鍵字:無詞典;t-score;二分法;快速抽詞
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 一種PLC控制步進(jìn)電機(jī)的分度算法 8次下載
- 一種側(cè)重于學(xué)習(xí)情感特征的預(yù)訓(xùn)練方法 4次下載
- 一種基于詞和文檔嵌入的關(guān)鍵詞抽取方法 4次下載
- 一種用于釋義識別的句子相似度算法 8次下載
- 一種針對DoT算法的模板攻擊方法 8次下載
- 一種針對DoT算法的模板攻擊方法 12次下載
- 一種適用于FPGA實(shí)現(xiàn)的盲均衡算法 7次下載
- 一種加權(quán)最大相關(guān)最小相似視覺詞典優(yōu)化 2次下載
- 一種低硬件資源消耗快速SVPWM算法 0次下載
- 一種新型的預(yù)測功能控制算法
- 一種求解電大平臺天線互耦的時(shí)域積分方程快速算法
- 一種無詞典快速抽詞算法的設(shè)計(jì)和實(shí)現(xiàn)
- 一種公歷到農(nóng)歷日期轉(zhuǎn)換算法的實(shí)現(xiàn)
- 一種基于SYN 漏洞的DDoS攻擊防御算法的實(shí)現(xiàn)
- 一種基于序列譯碼的快速相關(guān)攻擊算法
- 講解消息分發(fā)的一種編譯期實(shí)現(xiàn)法 451次閱讀
- 基于一種用于JumpStarter的抗離群的采樣算法 564次閱讀
- 基于一種無OS的MCU實(shí)用軟件框架 599次閱讀
- 一種實(shí)用的嵌入式無 OS 軟件框架 564次閱讀
- MD5到底算不算一種加密算法? 1436次閱讀
- 基于CORDIC的高速Sobel算法實(shí)現(xiàn) 3454次閱讀
- 一種全新的無監(jiān)督機(jī)器翻譯方法,在BLUE基準(zhǔn)測試上取得了10分以上提升 5943次閱讀
- 基于接收機(jī)的應(yīng)用提出了一種混合式高動態(tài)范圍AGC算法 6763次閱讀
- 一種基于STM32的智能采油控制系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn) 2252次閱讀
- 一種基于分布式算法的低通FIR濾波器 3188次閱讀
- 一種FFT插值正弦波快速頻率估計(jì)算法 9269次閱讀
- 一種AES密碼算法的實(shí)現(xiàn) 2922次閱讀
- 快速高效的實(shí)現(xiàn)浮點(diǎn)復(fù)數(shù)矩陣分解 955次閱讀
- 基于圖像增強(qiáng)的去霧快速算法的FPGA實(shí)現(xiàn) 5211次閱讀
- 一種改進(jìn)的無線傳感器網(wǎng)絡(luò)非測距定位算法 1191次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1490次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費(fèi)
- 6基于AT89C2051/4051單片機(jī)編程器的實(shí)驗(yàn)
- 0.11 MB | 4次下載 | 免費(fèi)
- 7基于單片機(jī)和 SG3525的程控開關(guān)電源設(shè)計(jì)
- 0.23 MB | 3次下載 | 免費(fèi)
- 8基于單片機(jī)的紅外風(fēng)扇遙控
- 0.23 MB | 3次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評論
查看更多