AI-verklarende term
Wat is RoPE (roterende positionele inbedding)?
Definitie
Een positionele coderingsmethode die query- en sleutelvectoren roteert om relatieve tokenposities te coderen.
AI-verklarende term
Een positionele coderingsmethode die query- en sleutelvectoren roteert om relatieve tokenposities te coderen.