bert-base-multilingual-uncased google-bert
- 类型
- model
- 任务
- fill-mask
- 框架
- transformers
- 下载量
- 4,123,114
- 点赞
- 158
- 访问
- public
- 文件
- 0
标签
- 文本分类
- 多语言
- NLP
- 预训练
- transformers
- 掩码生成
- 深度学习
- 多语言语料
摘要
这是Google发布的BERT多语言基础版本,在102种维基百科最大语言上通过掩码语言建模(MLM)和下一句预测(NSP)进行自监督预训练。该模型为uncased版本,主要供下游任务微调使用,适用于文本分类、序列标注、问答等任务,也可直接用于fill-mask掩码预测。它是经典的双向transformer编码器,常作为多语言NLP任务的基座模型。
README
--- language: - multilingual - af - sq - ar - an - hy - ast - az - ba - eu - bar - be - bn - inc - bs - br - bg - my - ca - ceb - ce - zh - cv - hr - cs - da - nl - en - et - fi - fr - gl - ka - de - el - gu - ht - he - hi - hu - is - io - id - ga - it - ja - jv - kn - kk - ky - ko - la - lv - lt -…