模型:
KoichiYasuoka/chinese-bert-wwm-ext-upos
这是一个在中文维基百科文本(简体和繁体)上进行POS标注和依存分析预训练的BERT模型,由作者 chinese-bert-wwm-ext 衍生而来。每个词都由 UPOS (通用词性标注)进行标记。
from transformers import AutoTokenizer,AutoModelForTokenClassification tokenizer=AutoTokenizer.from_pretrained("KoichiYasuoka/chinese-bert-wwm-ext-upos") model=AutoModelForTokenClassification.from_pretrained("KoichiYasuoka/chinese-bert-wwm-ext-upos")
或者
import esupar nlp=esupar.load("KoichiYasuoka/chinese-bert-wwm-ext-upos")
esupar :使用BERT / RoBERTa / DeBERTa模型进行分词POS标注和依存分析的分词器POS标注和依存分析器