資料介紹
為提高中文分詞的準確率和未登錄詞( OOV)識別率,提出了一種基于字表示學習方法的中文分詞系統。首先使用Skip-gram模型將文本中的詞映射為高維向量空間中的向量;其次用K-means聚類算法將詞向量聚類,并將聚類結果作為條件隨機場(CRF)模型的特征進行訓練;最后基于該語言模型進行分詞和未登錄詞識別。對詞向量的維數、聚類數及不同聚類算法對分詞的影響進行了分析。基于第四屆自然語言處理與中文計算會議( NLPCC2015)提供的微博評測語料進行測試,實驗結果表明,在未利用外部知識的條件下,分詞的F值和OOV識別率分別達到95. 67%和94. 78%,證明了將字的聚類特征加入到條件隨機場模型中能有效提高中文短文本的分詞性能。

加入交流群
掃碼添加小助手
加入工程師交流群
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 面向異質信息的網絡表示學習方法綜述 13次下載
- 基于腦電信號掃視軌跡的異質遷移學習方法 12次下載
- 基于變分自編碼器的網絡表示學習方法 27次下載
- 一種基于塊對角化表示的多視角字典對學習方法 1次下載
- 一種針對有向網絡表示學習的優化方法 10次下載
- 基于異質網絡層次的基因節點表示學習方法 5次下載
- 一種結合屬性信息的二分網絡表示學習方法 13次下載
- 最紅編程語言Python的入門學習方法資料概述 18次下載
- 緬甸語分詞方法及其實現方法來開發緬甸語的語音合成系統 0次下載
- 一種融合節點先驗信息的圖表示學習方法 0次下載
- 基于SQL Server的中文分詞系統設計及應用 2.7k次下載
- ZigBee 簡介和學習方法 14次下載
- [學習嵌入式]嵌入式系統學習方法,輕松入門嵌入式 79次下載
- 第1章 ZigBee簡介和學習方法 8次下載
- 模擬電子電路的學習方法
- 深度學習中的無監督學習方法綜述 2.7k次閱讀
- 改進版BERT——SpanBERT,通過表示和預測分詞提升預訓練效果! 9.7k次閱讀
- SiATL——最新、最簡易的遷移學習方法 4.2k次閱讀
- 自然語言的語義表示學習方法與應用 7.9k次閱讀
- 北大語言計算與機器學習研究組推出一套全新中文分詞工具包pkuseg 4.6k次閱讀
- 面向人工智能的機器學習方法體系總結 4k次閱讀
- 機器學習入門寶典《統計學習方法》的介紹 5.3k次閱讀
- 如何學好機器學習?機器學習的學習方法4個關鍵點整理概述 6.9k次閱讀
- 第一種用于主動雙目立體成像系統的深度學習方法 1.2w次閱讀
- 斯坦福提出基于目標的策略強化學習方法——SOORL 5.9k次閱讀
- 最接近人腦的智能學習方法深度學習,你了解多少? 5k次閱讀
- 深度解析機器學習三類學習方法 1.5w次閱讀
- 解析圖像分類器結構搜索的正則化異步進化方法 并和強化學習方法進行對比 4.4k次閱讀
- 模型驅動深度學習的標準流程與學習方法解析 5.4k次閱讀
- 盤點變頻器維修10種學習方法以及事例分析 6.9k次閱讀
下載排行
本周
- 1MDD品牌三極管MMBT3906數據手冊
- 2.33 MB | 次下載 | 免費
- 2MDD品牌三極管S9012數據手冊
- 2.62 MB | 次下載 | 免費
- 3聯想flex2-14D/15D說明書
- 4.92 MB | 次下載 | 免費
- 4收音環繞擴音機 AVR-1507手冊
- 2.50 MB | 次下載 | 免費
- 524Pin Type-C連接器設計報告
- 1.06 MB | 次下載 | 免費
- 6新一代網絡可視化(NPB 2.0)
- 3.40 MB | 次下載 | 免費
- 7MS1000TA 超聲波測量模擬前端芯片技術手冊
- 0.60 MB | 次下載 | 免費
- 8MS1022高精度時間測量(TDC)電路數據手冊
- 1.81 MB | 次下載 | 免費
本月
- 1愛華AIWA HS-J202維修手冊
- 3.34 MB | 37次下載 | 免費
- 2PC5502負載均流控制電路數據手冊
- 1.63 MB | 23次下載 | 免費
- 3NB-IoT芯片廠商的資料說明
- 0.31 MB | 22次下載 | 1 積分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供電電路圖資料
- 0.63 MB | 6次下載 | 1 積分
- 5UWB653Pro USB口測距通信定位模塊規格書
- 838.47 KB | 5次下載 | 免費
- 6技嘉H110主板IT8628E_BX IO電路圖資料
- 2.61 MB | 4次下載 | 1 積分
- 7蘇泊爾DCL6907(即CHK-S007)單芯片電磁爐原理圖資料
- 0.04 MB | 4次下載 | 1 積分
- 8100W準諧振反激式恒流電源電路圖資料
- 0.09 MB | 2次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191439次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183353次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81602次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73822次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發燒友App





創作
發文章
發帖
提問
發資料
發視頻
上傳資料賺積分
評論