模型:

jonfd/convbert-base-igc-is

英文

冰岛 ConvBERT-Base

该模型使用默认设置,在包含大约1.69亿个标记的 Icelandic Gigaword Corpus 上进行了预训练。模型使用了32,105个词汇大小的 WordPiece 分词器。

致谢

该研究得到了谷歌 TPU 研究云(TRC)提供的云 TPU 的支持。

该项目由冰岛教育、科学和文化部资助,由 Almannarómur 管理和协调,由冰岛2019-2023年语言技术计划资助。