AI-verklarende term

Wat is RoPE (roterende positionele inbedding)?

Definitie

Een positionele coderingsmethode die query- en sleutelvectoren roteert om relatieve tokenposities te coderen.