Téma

Benchmarky

10 publikovaných článkov s dohľadateľnými zdrojmi a revíziami.

Slovensko

SLAIH upozorňuje na päť zdrojov pre slovenčinu v AI: od multimodálneho modelu po rečové a férovostné datasety

SLAIH vo svojom oznámení vyzdvihol päť prírastkov v katalógu pre slovenské jazykové technológie: multimodálny model MiniMax-M3, embeddingový benchmark SkMTEB, benchmark rodových stereotypov GEST, rečový korpus SloPalSpeech a open-source TTS systém Piper. Pri každej položke ide o opis a parametre, ktoré uvádza samotné SLAIH.

Odborný rozbor·4 min
Slovensko

SLAIH: pri slovenskom prepise reči nestačí jedno číslo z rebríčka

SLAIH opisuje, že dôveryhodný benchmark pre slovenské speech-to-text modely stojí na voľbe normalizácie, pestrej testovacej množine a meraní v zhoršených akustických podmienkach. Organizácia zároveň upozorňuje, že agregované skóre môže zakryť veľké rozdiely medzi čítanou a spontánnou rečou a že dnešný benchmark má aj jasne pomenované obmedzenia.

Odborný rozbor·3 min
Firmy a výskum

Google rozširuje experimentálny geopriestorový agent Earth AI a pridáva nové benchmarky

Google Research tvrdí, že jeho experimentálny Geospatial Reasoning agent získal technickú správu so štyrmi benchmarkmi vrátane dvoch nových sád GeoKTools a GeoExpertQueries, prešiel skorým testovaním s partnermi a rozširuje skorý prístup cez Ask Google Earth aj A2A API. Samotný Google zároveň upozorňuje, že aspoň časť výstupov treba chápať ako prvý návrh pre expertov, nie finálnu odpoveď.

Odborný rozbor·3 min
Slovensko

KInIT zhrnul výstupy projektu lorAI: od slovenského benchmarku sk-bench po PEFT-Bench

KInIT 26. októbra 2026 zverejnil stránku „Research powered by lorAI“, na ktorej sumarizuje publikácie podporené projektom lorAI a ďalšie práce s partnermi lorAI. Podľa KInIT záber týchto výstupov siaha od efektívnych LLM a fine-tuningu po auditing, benchmarking a human-centered AI; medzi konkrétnymi príkladmi uvádza aj slovenský benchmark sk-bench a benchmark PEFT-Bench pre parameter-efficient fine-tuning.

Odborný rozbor·3 min
AI systémy a vývoj
AI systémy a vývoj

DiffuSpace uviedol Clover-35B-A3B-Preview a tvrdí vyššiu rýchlosť aj silnejšie výsledky než podobne veľké autoregresívne modely

DiffuSpace oznámil prvú verziu modelovej línie Clover. Podľa firmy ide o 35B MoE difúzny jazykový model s 3B aktivovanými parametrami, otvorený pod licenciou Apache, pričom výrobca pripisuje jeho rýchlosť a výsledky prepracovanej architektúre Bidirectional Gated DeltaNet a uvádza vlastné benchmarky aj nameranú priepustnosť inferencie.

Odborný rozbor·3 min
AI systémy a vývoj

Lumma-Fev-v2 sľubuje rozhodovanie bez parsovania textu a v 27B verzii mení attention na bidirekčný

FrontiersMind predstavil rodinu decision modelov Lumma-Fev-v2, ktoré namiesto generovania viet vracajú pravdepodobnosti pre jednotlivé možnosti v jednom forward passe. Podľa článku majú vydané verzie 4B a 27B vyššiu priemernú presnosť než TypeSafe Jev 1.13.0 na ôsmich verejných benchmarkoch a 27B verzia zároveň prechádza na bidirekčný full-attention, zatiaľ čo Gated DeltaNet vrstvy ostávajú kauzálne.

Odborný rozbor·4 min
Firmy a výskum

Google Research predstavilo MilleMiglia pre middle-mile logistiku ako open-source generátor benchmarkov

Google Research 18. septembra 2026 predstavilo MilleMiglia, open-source generátor realistických inštancií pre middle-mile logistiku. Podľa autorov má vyplniť nedostatok verejných dát pre výskum optimalizácie sietí medzi distribučnými centrami; zdroj však neobsahuje nezávislé testy kvality ani porovnanie výkonu solverov.

Odborný rozbor·4 min·produkt
Firmy a výskum

Google Research opísal ToolGrad: answer-first generovanie datasetov pre tool-use v práci predstavenej na ACL 2026

Google Research 10. septembra 2026 zverejnil popis frameworku ToolGrad, ktorý pri tvorbe syntetických datasetov pre používanie nástrojov obracia bežný postup: najprv vytvorí a overí reťazec API volaní, až potom k nemu doplní používateľský dopyt. Zdroj uvádza nižšie náklady a vyššiu úspešnosť generovania, no ide o vlastné výskumné tvrdenia bez nezávislého overenia v dodanom podklade.

Odborný rozbor·4 min·zamer