Ce sa întâmplat
Black Forest Labs (BFL) a lansat FLUX 3 Action, un „World Action Model” cu greutate deschisă de 7 miliarde de parametri, conceput pentru robotică. Modelul preia observații ale camerei, starea robotului și instrucțiuni în limbaj natural pentru a genera acțiuni fizice. BFL raportează o rată de succes de 42,92% pe benchmark-ul RoboLab-120 de la NVIDIA, depășind liderul anterior, Cosmos3-Nano-Policy (parametri 16B) de la NVIDIA, cu 6,1 puncte procentuale. Lansarea include greutăți, cod și rețete de reglare fină, permițând dezvoltatorilor să adapteze modelul la roboți specifici folosind cadre precum LeRobot.
Black Forest Labs, cunoscut pentru modelele sale de imagine și video FLUX, s-a extins în robotică odată cu lansarea FLUX 3 Action. Acest model cu 7 miliarde de parametri este un „World Action Model” (WAM) deschis, care procesează intrările camerei, stările sistemului și instrucțiunile text pentru a scoate o secvență de 32 de acțiuni fizice, împreună cu o predicție a evoluției scenei vizuale.
Potrivit VentureBeat, BFL raportează că FLUX 3 Action atinge o rată de succes generală de 42,92% pe benchmark-ul RoboLab-120 al NVIDIA. Acest scor depășește modelul deschis de top anterior, Cosmos3-Nano-Policy de la NVIDIA, cu 6,1 puncte procentuale. În special, FLUX 3 Action folosește doar 7 miliarde de parametri în comparație cu cei 16 miliarde ai Cosmos, iar BFL susține că rulează de 1,43 ori mai rapid, stabilind o nouă frontieră Pareto pentru eficiență și performanță.
Lansarea include greutățile modelului, codul, rețetele de reglare fină și exemple reproductibile. BFL afirmă că echipele pot ajusta modelul folosind demonstrații colectate de la proprii roboți, menționând în mod specific compatibilitatea cu robotul SO-101 și cadrul LeRobot al Hugging Face. Compania a demonstrat, de asemenea, capacitățile modelului în medii non-robotice, inclusiv drone zburătoare și jocul video Doom fără decese în joc, deși acestea sunt caracterizate ca experimente timpurii.
BFL first previewed FLUX 3 Action in July when launching the broader FLUX 3 family, but it was initially restricted to selected research and commercial partners. The current release marks a shift toward broader accessibility, although specific commercial API pricing for the Action model has not yet been announced. The model builds on BFL's Self-Flow research, which aims to learn useful representations of motion and cause-and-effect from video data without relying on separate frozen representation models.
Detalii sursa: venturebeat.com ↗
De ce contează
Această ediție este semnificativă deoarece oferă o alternativă compactă, deschisă la modelele de robotică proprietare sau închise mai mari. Obținând scoruri de referință mai mari cu mai puțini parametri (7B vs 16B) și o inferență mai rapidă, BFL reduce bariera de intrare pentru echipele care doresc să implementeze politici robotice avansate fără resurse de calcul masive. Natura deschisă permite reglajul local și confidențialitatea datelor, ceea ce este critic pentru aplicațiile industriale în care datele proprietare nu pot părăsi instalația. De asemenea, validează abordarea „World Action Model”, în care preinstruirea video informează controlul fizic, reducând potențial nevoia de colectare extinsă de date specifice roboților.
The release of FLUX 3 Action is consequential for the robotics industry because it offers a high-performance, open-weight option that challenges larger, more resource-intensive models. By achieving superior benchmark results with fewer parameters, BFL demonstrates that efficiency and performance are not mutually exclusive, which is critical for edge deployment where compute resources are limited.
For developers, the open-weight nature of the model is a key differentiator. It allows teams to inspect, modify, and fine-tune the model within their own infrastructure, ensuring that proprietary robot demonstrations and operational data remain private. This is a significant advantage over hosted robotics services or proprietary models like Google's Gemini Robotics On-Device 2, which are limited to selected testers.
The model's architecture, which combines video with action generation, aligns with the growing trend of using generative models to understand physical dynamics. This approach may reduce the amount of robot-specific data required for training, as the model can leverage broad visual and physical representations learned from video. This could accelerate the development of robotic systems for tasks such as sorting, assembly, and navigation.
However, the practical impact depends on the final license terms and the ability of outside teams to reproduce the reported results. Robotics benchmarks are often fragmented, and direct comparisons between different model architectures (WAMs, VLAs, and action-reasoning models) are difficult. The success of FLUX 3 Action will ultimately be determined by its performance in real-world, diverse robotic environments rather than just simulation benchmarks.
Mecanism interactiv: cum funcționează de fapt
Explorați tehnologia care stau la baza acestei dezvoltări în mod interactiv.
In AI, what are a model's "parameters"?
Ce să urmărești în continuare
Dezvoltatorii ar trebui să monitorizeze disponibilitatea condițiilor finale ale licenței comerciale, deoarece versiunea actuală este în principal pentru cercetare și accesul partenerilor. Reproducerea independentă a rezultatelor benchmark-ului pe diverse hardware-uri este crucială, deoarece benchmark-urile robotice sunt adesea lipsite de standardizare. În plus, urmăriți integrarea FLUX 3 Action în API-uri comerciale mai largi sau dacă BFL își extinde strategia open-core pentru a include mai multe puncte finale specifice roboticii.
The most immediate factor to watch is the publication of the final commercial license terms for FLUX 3 Action. While BFL has released the weights and code, the specific conditions for commercial use, redistribution, and modification are not yet fully detailed. This will determine how widely the model can be adopted in industrial settings.
Independent verification of the benchmark results is crucial. BFL's reported 42.92% success rate on RoboLab-120 is based on their own testing, and NVIDIA's public leaderboard had not been updated with these results at the time of the report. Reproduction by third-party research groups will be necessary to confirm the model's performance and generalizability.
Developers should also monitor the integration of FLUX 3 Action into existing robotics frameworks and hardware. BFL has highlighted compatibility with the SO-101 robot and LeRobot, but the model's performance on other common robotic platforms, such as those from NVIDIA or Ai2, remains to be seen. The ease of on diverse hardware will be a key determinant of its adoption.
Finally, the competitive landscape in open-weight robotics is evolving rapidly. With models like Ai2's MolmoAct 2 and NVIDIA's GR00T N1.7 already available, the success of FLUX 3 Action will depend on its ability to offer distinct advantages in terms of performance, efficiency, and ease of use. The next few months will likely see more comparisons and benchmarks as the community tests the model in various applications.