Výzkumníci z Harvardu a MIT vytvářejí digitální svět simulující populaci Země
MatrAIx je infrastruktura pro testování digitálních produktů a AI systémů pomocí populace 8,3 miliardy simulovaných personas. Projektu z Harvardu a MIT umožňuje vyhodnocovat výkony AI chatbotů, webových prototypů a aplikací v realistických podmínkách s konkrétními uživatelskými profily. Výsledky ukazují, že personalizované evaluace poskytují nuancovanější zpětnou vazbu než obecné testování.
Pokud budete mít dost dat a energie, nejspíše dříve ne později dokážete s určitou přesnosti předpovídat budoucnost. Tak snad se budoucnost nestane danou už jen tím, že ji něco předpovědělo a nás už ani nenapadne, že by se to mohlo stát i jinak.
Co je MatrAIx a k čemu se používá?
MatrAIx je výzkumná infrastruktura pro evaluaci AI systémů a digitálních produktů. Místo testování na reálných uživatelích používá populaci 8,3 miliardy simulovaných personas s různými atributy, což umožňuje rychlé a komplexní testování chatbotů, webů i aplikací.
Jaké typy testovacích úkolů MatrAIx nabízí?
Platforma podporuje čtyři typy evaluace: průzkumy a dotazníky (Survey), konverzační AI (Chatbot), testování webových prototypů (Web) a vyhodnocování mobilních aplikací (App). Každý typ je zaměřen na jiný aspekt uživatelské zkušenosti.
Jaké výhody poskytuje personalizovaná evaluace oproti obecnému testování?
Personalizované personas umožňují detailnější zpětnou vazbu zaměřenou na konkrétní skupiny uživatelů. Místo jediného skóre o výkonu celkově výzkumníci vidí, které segmenty uživatelů jsou problematické a mohou lépe optimalizovat modely pro různé potřeby.
- Runway Solaris by mohl změnit způsob, jakým se vytvářejí webové stránky a aplikace — runway.com 68 % shoda
- Claude Agenti se v experimentu začali mezi sebou rvát — anthropic.com 68 % shoda
- Umělá inteligence začíná zrychlovat svůj vlastní pokrok — openai.com 67 % shoda
- MatrAIx
- Harvard
- MIT