nafyi.
Thèmes / retrieval methodology

Point de vue attribué · Pas une citation directe

Raw static token vectors are a poor fit for MaxSim

Markewich advises against scoring raw static token vectors with MaxSim: it performed worse than standard pooling in the team’s exploration, changes the training target, and assumes contextualized vectors that static embeddings do not provide.

Logan Markewich·Publié

Derrière ce point de vue

Les traductions sont destinées à la lecture ; les extraits originaux restent la source evidence.

Exploring Static Embedding Retrieval

Extrait original

Don't score raw static token vectors with MaxSim. It's worse than the standard pooling, the scoring method is technically changing the training target. MaxSim assumes contextualized vectors and static embeddings are not contextual.

Cet extrait ne contient pas de contexte supplémentaire. Consultez la conversation originale.

Ouvrir l’original · Paragraphe 45 (s’ouvre dans un nouvel onglet)Voir la page source

Ouvrir l’épisode et rechercher à —.

L’emplacement provient du texte original. Vérifiez la formulation et l’attribution dans leur contexte.