Barion Pixel

Hogyan kezeli a Reka AI Rho-1 nevű omni-modellje a különböző modalitásokat (szöveg, kép, videó és robotvezérlés)?

A Reka AI kiadta a Rho-1 nevű, 19 milliárd paraméteres omni-modell kutatási előzetesét, amely egyetlen neurális hálózaton belül, közös kontextusablakban dolgozza fel és generálja a szöveget, a képeket, a videót és a robotvezérlési műveleteket. A modell külső eszközök

  • Különálló, specializált modellekre osztja a feladatokat
  • Minden modalitást tokenként kezel egyetlen közös kontextusablakban
  • Külső eszközök hívásával integrálja az adatokat