aifeed.skAI Feed

Tag

#neautoregresívne modely

Všetky publikované články, v ktorých sa téma neautoregresívne modely objavuje ako dôležitý kontext. Aktuálne 1 textov v archíve.

Apple otestoval 1,7-miliardový neautoregresívny jazykový model v štyroch krokoch
Výskum4 min čítania3 zdroje

Apple otestoval 1,7-miliardový neautoregresívny jazykový model v štyroch krokoch

Apple vytrénoval 1,7-miliardový základný flow model na 2,1 bilióna tokenov a samodestiláciou z neho vytvoril Categorical Flow Map, ktorá generuje text už v štyroch inferenčných krokoch. Výsledok rozširuje možnosti paralelného generovania, zatiaľ však nepreukazuje nižšiu latenciu ani vyššiu kvalitu oproti porovnateľným autoregresívnym modelom.