pycorrector怎么安裝使用

發(fā)布時(shí)間：2022-01-13 10:09:39 來源：億速云閱讀：573 作者：iii 欄目：大數(shù)據(jù)

本文小編為大家詳細(xì)介紹“pycorrector怎么安裝使用”，內(nèi)容詳細(xì)，步驟清晰，細(xì)節(jié)處理妥當(dāng)，希望這篇“pycorrector怎么安裝使用”文章能幫助大家解決疑惑，下面跟著小編的思路慢慢深入，一起來學(xué)習(xí)新知識(shí)吧。

pycorrector 主要解決以下的中文輸入場(chǎng)景。

諧音字詞，如配副眼睛-配副眼鏡。
混淆音字詞，如流浪織女-牛郎織女。
字詞順序顛倒，如伍迪艾倫-艾倫伍迪。
字詞補(bǔ)全，如愛有天意-假如愛有天意。
形似字錯(cuò)誤，如高梁-高粱。
中文拼音全拼，如 xingfu-幸福。
中文拼音縮寫，如 sz-深圳。
語法錯(cuò)誤，如想象難以-難以想象。

安裝

可以使用 pip 安裝。

pip install pycorrector

也可以下載源碼后手動(dòng)安裝。

git clone https://github.com/shibing624/pycorrector.gitcd pycorrectorpython setup.py install

依賴庫kenlm安裝。

pip install https://github.com/kpu/kenlm/archive/master.zip

其他依賴庫包安裝。

pip install -r requirements.txt

使用例子

1.文本糾錯(cuò)

import pycorrectorcorrected_sent, detail = pycorrector.correct('少先隊(duì)員因該為老人讓坐')print(corrected_sent, detail)

output:少先隊(duì)員應(yīng)該為老人讓座 [[('因該', '應(yīng)該', 4, 6)], [('坐', '座', 10, 11)]]

規(guī)則方法默認(rèn)會(huì)從路徑~/.pycorrector/datasets/zh_giga.no_cna_cmn.prune01244.klm加載kenlm語言模型文件，如果檢測(cè)沒有該文件，則程序會(huì)自動(dòng)聯(lián)網(wǎng)下載。當(dāng)然也可以手動(dòng)下載模型文件(2.8G)并放置于該位置。

2.錯(cuò)誤檢測(cè)

import pycorrectoridx_errors = pycorrector.detect('少先隊(duì)員因該為老人讓坐')print(idx_errors)

output:[['因該', 4, 6, 'word'], ['坐', 10, 11, 'char']]

返回類型是list, [error_word, begin_pos, end_pos, error_type]，pos索引位置以0開始。

讀到這里，這篇“pycorrector怎么安裝使用”文章已經(jīng)介紹完畢，想要掌握這篇文章的知識(shí)點(diǎn)還需要大家自己動(dòng)手實(shí)踐使用過才能領(lǐng)會(huì)，如果想了解更多相關(guān)內(nèi)容的文章，歡迎關(guān)注億速云行業(yè)資訊頻道。

向AI問一下細(xì)節(jié)

pycorrector怎么安裝使用

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標(biāo)簽