跳到正文
Hugging Face Blog·· 6 天前精选AI 评分70

Hugging Face 讲解多向量嵌入模型的 Token Pooling 感知训练

Token Pooling-Aware Training for Multi-Vector Embedding Models

AI 导读

Hugging Face 演示如何通过 HierarchicalTokenPooling 合并相似 token 向量,并用 Sentence Transformers 训练模型在压缩后保持检索质量。

推荐理由

文章提供可复现的 Sentence Transformers 训练示例,并量化了相同向量预算下池化感知训练对检索质量的改善。

来源:Hugging Face Blog · huggingface.co