Hugging Face 讲解多向量嵌入模型的 Token Pooling 感知训练
Hugging Face 演示如何通过 HierarchicalTokenPooling 合并相似 token 向量,并用 Sentence Transformers 训练模型在压缩后保持检索质量。
推荐理由:文章提供可复现的 Sentence Transformers 训练示例,并量化了相同向量预算下池化感知训练对检索质量的改善。
Hugging Face 演示如何通过 HierarchicalTokenPooling 合并相似 token 向量,并用 Sentence Transformers 训练模型在压缩后保持检索质量。
推荐理由:文章提供可复现的 Sentence Transformers 训练示例,并量化了相同向量预算下池化感知训练对检索质量的改善。
GitHub推出由正则候选生成和微调ModernBERT上下文分类组成的密钥扫描器,并将其扩展至提交前扫描。相比原有LLM流水线,该方案使仓库所有者加权接受率提高11.5%,推送后扫描执行时间降低86%,服务成本降低超过98%;离线评测精度提高13%,召回率提高19%。
推荐理由:GitHub公开了混合式密钥扫描器的设计与评测结果,可供读者理解如何兼顾密钥检出率、误报率与部署成本。