模型:
sentence-transformers/gtr-t5-xxl
这是一个 sentence-transformers 模型:它将句子和段落映射到一个768维的稠密向量空间。该模型专门用于语义搜索任务。
该模型是从Tensorflow模型 gtr-xxl-1 转换而来的PyTorch模型。在使用此模型时,请参阅发布的文献: Large Dual Encoders Are Generalizable Retrievers 。tfhub模型和此PyTorch模型可能产生略微不同的嵌入,但在相同的基准测试上运行时,它们会产生相同的结果。
该模型仅使用了T5-11B模型的编码器。权重以FP16格式存储。
在安装了 sentence-transformers 后,使用该模型变得很容易:
pip install -U sentence-transformers
然后可以这样使用该模型:
from sentence_transformers import SentenceTransformer sentences = ["This is an example sentence", "Each sentence is converted"] model = SentenceTransformer('sentence-transformers/gtr-t5-xxl') embeddings = model.encode(sentences) print(embeddings)
该模型要求使用sentence-transformers 2.2.0或更新版本。
对于该模型的自动评估,请参见句子嵌入基准测试: https://seb.sbert.net
如果您发现该模型有帮助,请引用相应的出版物: Large Dual Encoders Are Generalizable Retrievers