中文文本語料庫分詞一致性檢驗技術的初探
2005-04-29 00:00:00劉江鄭家恒張虎
計算機應用研究 2005年9期
摘 要：對大規模語料庫中的分詞不一致現象進行分析，提出了語料庫分詞一致性檢查和校對的新方法。該方法提取詞與詞之間語法、語義搭配信息，利用支持向量機的理論對候選序列進行判斷，給出一個切分結果，進而提高漢語語料庫切分的準確率。
關鍵詞：支持向量機；切分一致性；搭配
中圖法分類號：TP391
文獻標識石馬：A
文章編號：1001—3695(2005)09—0052—03
