Kāpēc pastāv šis etalons un ko tas pārbauda
AI atbalstīta asins analīžu rezultātu interpretācija arvien biežāk tiek izmantota gan patērētāju, gan klīniskajos procesos, tomēr reproducējami novērtēšanas ietvari, kas pielāgoti laboratorijas medicīnai, joprojām ir reti. Šajā kontekstā svarīgākie jautājumi nav tie, ko aptver vispārīgas medicīniskās jautājumu-atbilžu etaloni: vai dzinējs spēj atšķirt dzelzs deficītu no talasēmijas pazīmes, ja vidējais eritrocītu tilpums ir identisks, vai tas pārdiaģnostē Gilberta sindromu kā hepatītu, un vai tas ģenerē patoloģiju pilnīgi normālā skrīninga panelī?
Viena asins analīžu paneļa parasti pietiek signāla, lai pamatotu vairākas konkurējošas interpretācijas, un interpretējošā ārsta uzdevums ir tās izvērtēt savstarpēji, nevis izvilkt “mācību grāmatas” atbildi. Dzinējs, kas labi darbojas pēc mācību grāmatas piemēriem, tomēr var izgāzties tieši tajos gadījumos, kas ir vissvarīgākie: diferenciāldiagnozes slazdos, labdabīgajās variācijās, kas vienatnē izskatās satraucošas, un pilnīgi normālos paneļos, kuri pavedina pārliecinātus palīgus izdomāt patoloģiju.
Šis etalons tika veidots tieši ap šiem kļūmju veidiem. Katrs no piecpadsmit gadījumiem tika izvēlēts konkrētai diagnostiskai īpašībai: dzelzs deficīta izraisīta mikrocitoze, kas jānošķir no beta-talasēmijas pazīmes ar identisku vidējo eritrocītu tilpumu, Džilberta sindroma aina, kur vienīgā novirze ir izolēta netiešā hiperbilirubinēmija, un piecpadsmit parametru skrīninga panelis, kur katrs analīts atrodas savā references diapazonā. Rubrika atalgo dzinējus, kas katru gadījumu lasa pēc tā paša noteikumiem, un soda dzinējus, kas mēģina noteikt pārliecinātu diagnozi, ja tāda diagnoze nav pamatota.
Kā doktors Tomass Kleins (MD) es izvēlējos gadījumu paneli, jo tieši šos modeļus laboratorijas medicīnas palīgi visbiežāk interpretē nepareizi. Dārgā kļūmes forma nav "nepamanīt retu slimību" — tā ir rutīnas patoloģijas izdomāšana pacientiem, kuriem tās nav. Mūsu Medicīniskā validācija apraksta plašāku ietvaru; šī lapa apraksta V11 sākotnējo pierādījuma koncepciju un V11 Otrā atjauninājumu, kas to mērogā palielināja līdz 100 000 anonimizētu gadījumu, kas iegūti no SQL balstītas klīniskās repozitorijas, aptverot 127 valstis — izmantojot to pašu vērtēšanas rubriku, baitu ziņā identisku, bez atļautas pēcpusē pielāgošanas.
Jaunākais atsauces palaidiens — V11 Otrā atjauninājums (2026. gada 26. aprīlis)
V11 Otrā atjauninājuma atsauces palaidiens 2026. gada 26. aprīlī deva salikto rezultātu 99.80% pēc tās pašas iepriekš reģistrētās rubrikas, kas izmantota V11 sākotnējā izlaidumā, novērtēts 100 000 anonimizētu gadījumu no Kantesti SQL balstītās klīniskās repozitorijas un aptverot 127 valstīs un 75+ valodas. Katrs gadījums pabeidza dzinēja galveno ceļu; slazdgadījumu hiperdagnostikas karoga aktivācijas palika pie 0 / 87,412. Sākotnējais V11 palaidiens 2026. gada 23. aprīlī aptvēra 15 ar rokām atlasītus gadījumus (saliktais 99.12%) un apstiprināja rubriku; Otrā atjauninājuma rubrika paliek baitu ziņā identiska un paplašina izvērtēšanu līdz populācijas mēroga kohortai.
Salikto formulu veido trīs komponentes: strukturālā atbilstība ar septiņām obligātajām ziņošanas sadaļām un sešpadsmit obligātajām apakšsadaļām, klīniskā precizitāte mērīta kā atslēgvārdu atcerēšanās plus punktu sistēmas atcerēšanās plus varbūtību sadalījuma derīguma pārbaude, un atbildes latentums pret galveno ceļu apkalpošanas līmeņa mērķi. Precīzs sadalījums ir parādīts rubrikas formulā zemāk — neviens no šiem svariem vai apakšrubrikām netika mainīts Otrajā atjauninājumā.
Atlikušās 0.20 procentpunktu brīvības vietas gandrīz pilnībā sadalās klīniskajā apakšrezultātā — nelielai daļai gadījumu (galvenokārt Hepatoloģijā un Reimatoloģijā) viens paredzēts vērtēšanas-sistēmas atslēgvārds nebija klātesošs dzinēja interpretācijā, lai gan diagnostiskais saturs bija pareizs. Neviens gadījums 100 000 lietu Otrā atjauninājuma kohortā neizlaida pašu diagnozi. Latence uzlabojās no vidējās 20.17 s V11 sākotnējā izlaidumā līdz 13.26 s Otrajā atjauninājumā, atspoguļojot ražošanas dzinēja optimizācijas starp abiem palaidiens; rubrika, vērtēšanas kods un API gala punkts nav mainīti.
Valstu saliktie rezultāti svārstījās no 0.9971 (Indija) līdz 0.9985 (Šveice) 30 visvairāk pārstāvētajās valstīs. Garā aste no 97 papildu valstīm (≈7 300 gadījumi kopā) neuzrādīja sistemātisku pasliktināšanos. Lielākie devēji pēc gadījumu skaita bija Amerikas Savienotās Valstis (10 500), Brazīlija (9 500), Spānija (9 000), Itālija (8 000), Vācija (7 800), Francija (7 400), Portugāle (5 800), Türkiye (3 400), Apvienotā Karaliste (2 900) un Meksika (2 500).
No 15 gadījumiem līdz 100 000: kohortas attīstība 127 valstīs
Sākotnējais V11 gadījumu panelis aptvēra septiņas specialitātes — hematoloģiju, endokrinoloģiju, metabolo medicīnu, hepatoloģiju, nefroloģiju, kardioloģiju, reimatoloģiju — kā arī divus īpaši paredzētus hiperdagnostikas slazdgadījumus, un katrs gadījums bija anonimizēts īsta pacienta ieraksts, kas iegūts no Kantesti klīnisko datu repozitorijas ar rakstisku informētu piekrišanu. V11 Otrā atjauninājums paplašina izvērtēšanu līdz 100 000 anonimizētu gadījumu 127 valstīs, sadalīti astoņās specialitātēs (sākotnējās septiņas plus īpašs iekšējās medicīnas “spainis”, kas absorbē slazdu apakškopu). Tā pati vērtēšanas rubrika tiek piemērota baitu ziņā identiski abos palaidienos.
Deidentifikācija tika veikta saskaņā ar Safe Harbor pieeju: visi tiešie identifikatori tika noņemti vai aizstāti, un katram ierakstam tika piešķirts etalona iekšējais gadījuma kods formātā BT-NNN-LABEL (V11 sākotnēji) vai stabils anonimizēts case_uid Otrajam atjauninājumam. Apstrāde tika veikta saskaņā ar GDPR 9. panta 2. punkta j) apakšpunktu zinātniskai pētniecībai ar atbilstošiem drošības pasākumiem un atbilstošajiem Lielbritānijas GDPR noteikumiem. Neviena personu identificējoša informācija nekur neparādās publicētajā “harness”, tehniskajā ziņojumā vai izlaistajos datu kopumos.
V11 sākotnējo izlaidumu — 15 ar rokām atlasīti gadījumi
Sākotnējo V11 gadījumu paneli ar roku atlasīja doktors Tomass Kleins, lai pārbaudītu diagnostikas modeļus, ko laboratorijas medicīnas asistenti visbiežāk kļūdaini interpretē. Katrs no piecpadsmit gadījumiem tika izvēlēts konkrētai diagnostikas īpašībai, kas uzskaitīta zemāk.
Kāpēc tieši šāds sadalījums
Hematoloģija iegūst trīs gadījumus, jo mikrocitāro diferenciāļu un makrocitāro diferenciāļu slazdi reālās dzīves laboratorijas praksē ir vislielākās apjoma slazdi. Endokrinoloģija iegūst trīs, jo Hašimoto, PCOS un D vitamīna deficīta izpausmes veido atšķirīgas diagnostikas formas (autoantivielu virzītas, hormonu attiecību virzītas, viena marķiera virzītas). Viena gadījuma specialitātes joprojām ir nozīmīgas, jo katram no CKD, ASCVD riska un SLE ir sava punktu sistēma, kuru dzinējam vajadzētu izsaukt (attiecīgi KDIGO stadēšana, ASCVD 10 gadu risks, 2019. gada EULAR/ACR SLE kritēriji).
V11 otrais atjauninājums — 100,000 anonimizētu gadījumu 127 valstīs
Otrais atjauninājums aizstāj sākotnējo V11 ar kodējumu iebūvēto 15 gadījumu Python literāli ar parametrizētu, tikai lasāmu SQL vaicājumu pret Kantesti klīnisko repozitoriju (anonymised_blood_panels). Vaicājums filtrē pēc consent_research = 1 AND released_for_benchmark = 1 un tiek izdrukāts katra benchmark izpildes sākumā pārskatāmībai. Kohortas sadalījums pa specialitātēm ir parādīts zemāk.
Ģeogrāfiskais sadalījums — top 10 valstis
Kohorta aptver 127 valstis (ISO 3166-1 alpha-2). Eiropa veido 57.7%, Amerikas — 25.4%, Āzijas un Klusā okeāna reģions — 6.2%, nosauktie ieraksti Tuvie Austrumi/Afrika — 3.4%, un gara aste ar 97 papildu valstīm kopā aptuveni 7.3%. Desmit lielākie devēji ir Amerikas Savienotās Valstis (10,500), Brazīlija (9,500), Spānija (9,000), Itālija (8,000), Vācija (7,800), Francija (7,400), Portugāle (5,800), Turkiye (3,400), Apvienotā Karaliste (2,900) un Meksika (2,500). Valstīm raksturīgie kompozītie rādītāji svārstījās no 0.9971 (Indija) līdz 0.9985 (Šveice).
Iepriekš reģistrēto vērtēšanas kritēriju skaidrojums
Pirmsreģistrācija ir vissvarīgākā metodoloģiskā izvēle šajā etalonā. Katrs paredzamais diagnozes gadījums, katra klīniskā punktu sistēma un katra atskaites sadaļa tika apņemtas pirmkoda līmenī pirms dzinēja izsaukšanas. Tāpēc rubrikas post-hoc pielāgošana, lai glaimotu dzinējam, nav iespējama.
Salikto punktu veido trīs komponentes. strukturālā komponente veido 35 procentus un mēra, vai dzinējs atgrieza septiņas obligātās atskaites sadaļas (virsraksts, kopsavilkums, galvenie secinājumi, diferenciāļi, punktu sistēmas, ieteikumi, turpmākā rīcība) un sešpadsmit obligātās apakšsadaļas tajās. Sadaļas esamība strukturālajā aprēķinā sver 40 procentus, bet apakšsadaļas esamība — 60 procentus.
The klīniskā komponente veido 55 procentus un apvieno trīs lietas: diagnozes atslēgvārdu atsaukšanu (70 procenti no klīniskās apakšpunktu daļas), punktu sistēmas atsaukšanu (20 procenti — vai dzinējs aprēķina Mentzer, FIB-4, HOMA-IR, ASCVD risku, KDIGO stadēšanu, EULAR/ACR kritērijus, ja attiecināms), un varbūtību summas derīguma pārbaudi (10 procenti — diferenciāļu varbūtībām jāsummējas intervālā [90, 110]). Slazdu gadījumos tiek atņemta skaidra hiperdianozes soda maksa līdz 0.30, aprēķināta kā 0.10 par katru izdomātu patoloģijas karodziņu, ar griestiem līdz trim karodziņiem.
The latentuma komponente veido 10 procentus. Atbilde, kas ir īsāka par 20 sekundēm, saņem pilnus 0.10, atbilde, kas ir īsāka par 40 sekundēm, saņem 0.05, un jebkas lēnāks saņem nulli. 20 sekunžu mērķis atspoguļo ražošanas primārā-path servisa līmeņa mērķi; 40 sekunžu griesti atspoguļo 2. fāzes rezerves budžetu smagām dzinēja izsaukšanām.
Ko novērš pirmsreģistrācija
Pirmās puses etaloni ir bēdīgi slaveni ar savu skaitļu uzpūšanu, veicot rubrikas post-hoc pielāgošanu. Modelis gandrīz vienmēr ir vienāds: komanda palaiž dzinēju, redz, kur tas nepietiekami veic, un tad klusi pielāgo rubriku tā, lai nepietiekami veiktās jomas tiktu vērtētas mazāk. Iesniedzot rubriku pirmkodā pirms pirmā dzinēja izsaukuma un publicējot testa ietvaru ar MIT licenci, šī pielāgošana kļūst redzama versiju kontrolē. Ikviens var klonēt repozitoriju, pārbaudīt rubrikas autoru datumus un verificēt, ka dzinēja rezultāti netika izmantoti vērtējuma veidošanai.
Hiperdiagnostikas slazda gadījumi — kāpēc pārmērīga izsaukšana ir īstais kļūmes režīms
Agresīva patoloģijas pārsaukšana normālos izmeklējumos ir dokumentēts kļūmes režīms patērētājam paredzētiem medicīnas asistentiem. Tās turpmākās izmaksas ietver nevajadzīgu izmeklēšanu, pacienta trauksmi un iatroģenisku izmeklējumu. Šī etalona divi slazdu gadījumi ir izstrādāti, lai padarītu šo kļūmes režīmu redzamu un vērtējamu.
🟡 Slazds 1 — BT-014-GILBERT
Izpausme. 24 gadus vecs vīrietis ar kopējo bilirubīnu 2.4 mg/dL. Tiešā frakcija ir normāla, transamināzes un sārmainā fosfatāze atrodas savās atsauces robežās, retikulocīti ir bez ievērojamām īpatnībām, un haptoglobīns un LDH izslēdz hemolīzi.
Pareiza interpretācija. Džilberta sindroms — labdabīga UGT1A1 polimorfisma forma. Interpretācijā nedrīkst tikt piesaukts hepatīts, ciroze, hemolītiska anēmija vai žults ceļu obstrukcija.
V11 rezultāts. Saliktais 1.000. Neviens no sešiem uzraudzītajiem pārapzīmēšanas karodziņiem neparādījās kā aktīva diagnoze.
🟡 Slazds 2 — BT-015-HEALTHY
Izpausme. 35 gadus veca sieviete ar piecpadsmit parametru rutīnas skrīninga paneli. Katrs analīts ērti atrodas savā atsauces diapazonā.
Pareiza interpretācija. Pārliecība un dzīvesveida uzturēšana. Interpretācijai nevajadzētu izdomāt robežgadījumus, lai tā izklausītos klīniski noderīga.
V11 rezultāts. Kompozītais 1.000. Neviens no septiņiem uzraudzītajiem pārmērīgas diagnosticēšanas brīdinājumiem — diabēts, anēmija, hipotireoze, dislipidēmija, hepatīts, nieru slimība, deficīts — neparādījās kā aktīva diagnoze.
Abos slazdos tika pārbaudīti trīspadsmit uzraudzītie pārmērīgas diagnozes brīdinājumi. Neviens netika aktivizēts. Šis ir rezultāts, kas ir vissvarīgākais jebkuram ārstam, kurš apsver izmantot AI dzinēju kā triāžas vai pirmskonsultācijas rīku: sistēma neizdomāja slimību, ja tādas nebija.
Mentzera indekss: dzelzs deficīta nošķiršana no talasēmijas pazīmes
Otrs augstvērtīgs atradums attiecas uz gadījumu savienošanu: BT-001 (dzelzs deficīta anēmija) ar BT-007 (beta-talasēmijas minor). Abos gadījumos ir mikrocitoze, un tā ir labi zināma grūtība naiviem klasifikatoriem. Mentzera indekss, kas aprēķināts kā MCV dalīts ar RBC skaitu, dzelzs deficītā pārsniedz 13 un talasēmijas pazīmē nokrīt zem 13.
BT-001 gadījumā pacientei bija 34 gadus veca sieviete ar hemoglobīnu 10,4 g/dL, MCV 72,4 fL, RBC 4,1 × 10¹²/L, feritīnu 6 ng/mL un paaugstinātu TIBC. Mentzera indekss, aptuveni 17,7, atbalsta absolūtu dzelzs deficītu. BT-007 gadījumā pacientam bija 28 gadus vecs vīrietis ar mikrocitozi (MCV 65,8 fL), bet ar augstu RBC skaitu 6,2, normālu RDW, normālu feritīnu un HbA2 5,6 procenti. Mentzera indekss, aptuveni 10,6, norāda uz talasēmijas pazīmi, un paaugstinātais HbA2 apstiprina beta-talasēmijas minor.
Abiem gadījumiem rādītājs bija 1.000. Dzinējs abās interpretācijās skaidri izmantoja Mentzera indeksu un katrā gadījumā atgrieza pareizu diagnozi. Šis ir viens no klīniski visvairāk pārliecinošajiem rezultātiem visā etalonā, jo talasēmijas pazīmes nepareiza klasificēšana kā dzelzs deficīts noved pie neatbilstošas dzelzs papildterapijas un tiek palaistas garām ģimenes skrīninga iespējas, bet dzelzs deficīta nepareiza klasificēšana kā talasēmija aizkavē vienkāršu aizvietošanas terapiju. Mūsu feritīna diapazona ceļvedis izskaidro plašāku diferenciāldiagnostikas kontekstu.
Rezultāti pa gadījumiem no V11 sākotnējās atsauces izpildes (2026. gada 23. aprīlis)
Sākotnējā V11 atsauces izpilde 15 gadījumu pierādījuma-koncepta kohortā kalpo kā metodoloģiskais pamats Otrajam atjauninājumam: katra detalizācija pa gadījumiem zemāk ilustrē, kā rubrika apstrādā reālu dzinēja atbildi. Divpadsmit no piecpadsmit gadījumiem sasniedza primārajā ceļā griestu kompozīto rādītāju 1.000; trīs gadījumi tika apkalpoti, izmantojot 2. fāzes “fallback”, zaudējot 0.05 latentuma bonusu, vienlaikus saglabājot visu klīnisko un strukturālo saturu. Vienā gadījumā trūka viena obligāta apakšsadaļa; vienā gadījumā atgriezās nedaudz samazināta varbūtību sadalījuma summa.
PCOS gadījums (BT-008) atbildes struktūrā zaudēja vienu obligāto apakšsadaļu — piecpadsmit no sešpadsmit, nevis sešpadsmit no sešpadsmit — tādējādi strukturālais vērtējums samazinājās no 1,000 līdz 0,963. SLE gadījums (BT-011) atgrieza nedaudz samazinātu varbūtību sadalījuma summu, kas samazināja klīnisko vērtējumu līdz 0,965, vienlaikus saglabājot katru diagnostikas atslēgvārdu un vērtēšanas sistēmu. Neviens no abiem nepilnīgajiem gadījumiem neizlaida pareizu diagnozi.
V11 Otrā atjauninājuma agregācija — 100,000 gadījumu
Mērogā pēc populācijas atsevišķas gadījumu rindas nav cilvēkam lasāmas, tāpēc Otrais atjauninājums ziņo par agregētiem rādītājiem, nevis par 100,000 rindu tabulu. Galvenais agregētais rādītājs ir parādīts zemāk; sadalījumi pa specialitātēm un pa valstīm ir publicēti tehniskajā ziņojumā un Figshare iesniegumā. Stratificēts nejaušs paraugs n = 201 neapstrādātas dzinēja atbildes (deterministiska sēkla 20260426) ir publicēts GitHub results/ direktorijā apskatei.
Ko galvenais rādītājs mums nepasaka
Šajā konkrētajā iepriekš reģistrētajā rubrikā saliktais rādītājs ir 99,80 procenti, 100 000 gadījumu anonimizētā kohortā, kas aptver 127 valstis, un tas atspoguļo sniegumu gandrīz līdz griestiem — taču tas ir rūpīgi jāformulē. Rezultāts raksturo dzinēja uzvedību pret rubriku, kuru mēs apņēmāmies izmantot V11 pirmkoda ietvaros; tā nav universāla prasība par dzinēja pareizību katrā asins analīžu panelī, kas pastāv “savvaļā”.
Rādītājs norāda, ka dzinējs pareizi apstrādāja diagnostikas modeļus, kas tika atlasīti šai izvērtēšanai, visā populācijas mēroga kohortā, pēc metodoloģijas, kas ir publicēta un reproducējama. Tas nesaka, ka dzinējs ir pareizs katrā asins analīžu panelī, kas pastāv “savvaļā”. Tas nesaka, ka dzinējam vajadzētu aizstāt klīnicista spriedumu. Un tas nesaka, ka dzinējs pārspēj alternatīvas AI sistēmas — salīdzinošas analīzes ar citiem dzinējiem šajā ziņojumā apzināti netika iekļautas.
Tas, ko rādītājs tomēr nosaka, ir bāzes līmenis. Tā kā rubrika un “harness” ir publiski pieejami, nākamās dzinēja versijas var tikt izvērtētas pret to pašu rubriku — piemērojot V11 sākotnējās 15 lietas, Otrā atjauninājuma 100 000 gadījumu kohortu vai jebkādu turpmāku paplašinājumu — un atšķirība starp publicēto rādītāju un jebkuru nākamo izpildi ir pati par sevi izmērāma. Šī ir iepriekšējas reģistrācijas vērtība: tā pārvērš veiktspējas apgalvojumus pārbaudāmos apgalvojumos.
Kā atveidot šo etalonu 10 minūtēs
Reproducēšanai pietiek ar Kantesti API akreditācijas datu pāri un Python 3.10 vai jaunāku vidi ar requests un reportlab bibliotēkas ir instalētas. Pilnais “harness” ir viens vienots, pašpietiekams Python modulis, kas izlaists saskaņā ar MIT licenci.
Četras darbības svaigai izpildei
Viena. Klonējiet repozitoriju: git clone https://github.com/emirhanai/kantesti-blood-test-benchmark.git. Divi. Instalējiet atkarības ar pip install -r requirements.txt (Otrais atjauninājums pievieno mysql-connector-python ≥ 8.0 SQL gadījumu ielādētājam). Trīs. Iestatiet KANTESTI_USERNAME un KANTESTI_PASSWORD kā vides mainīgos dzinēja API. Otrā atjauninājuma SQL gadījumu ielādētājam arī iestatiet KANTESTI_DB_HOST, KANTESTI_DB_PORT, KANTESTI_DB_NAME, KANTESTI_DB_USER, un KANTESTI_DB_PASSWORD — ielādētājs izveido savienojumu, izmantojot tikai lasāmu lomu (bench_reader), kurai nav privilēģiju identificēt tabulas. Četri. Palaidiet python benchmark_bloodtest.py --limit 100000 pilnajam Second-Update izpildījumam vai python benchmark_bloodtest.py --limit 1000 ātrai iterācijai. Rezultāti tiek saglabāti ./benchmark_results/: CSV rezultātu kopsavilkums ar kolonnām pa valstīm un specialitātēm, JSON agregācija, stratificēti nejaušs neapstrādātu atbilžu paraugs un Markdown atskaite.
Atsauces izpildījumi no 2026. gada 23. aprīļa (V11 sākotnējais, 15 gadījumi) un 2026. gada 26. aprīļa (V11 Second Update, 100,000 gadījumi) ir saglabāti results/ repozitorija direktorijā. Ja veiksiet jaunu izpildījumu, tiks ģenerēts jauns ar laika zīmogu marķēts rezultātu kopsavilkums, atstājot atsauces izpildījumus neskartus. Ja jūsu izpildījums dod būtiski atšķirīgu rezultātu, lūdzu, atveriet GitHub issue ar izpildījuma laika zīmogu un dzinēja versiju, kas atgriezta atbildes metadatos.
Ierobežojumi un turpmākais darbs
Pat pie 100,000 gadījumiem 127 valstīs, četri ierobežojumi prasa skaidru atzīšanu: ilgās astes valstu nepietiekama izlase, vienreizēja novērtēšana, viena dzinēja tvērums un viena avota datu izcelsme. Katrs no tiem tiek risināts aktīvos turpmākajos darbos.
Ilgās astes valstu pārklājums. Second Update aptver 127 valstis, taču sadalījums nav līdzsvarots — top 10 devēji veido ≈66.4% gadījumu, bet ilgā astei vēl 97 papildu valstis kopā dod ≈7.3% (aptuveni 7,300 gadījumi kopā, ~75 gadījumi uz valsti vidēji). Tādēļ ilgās astes valstu kompozīti ir trokšņaināki, nekā liecina virsrakstu skaitļi. Nākamajos izpildījumos tiks prioritāri piesaistītas nepietiekami pārstāvētās valstis, lai precizētu aplēses katrai jurisdikcijai.
Vienreizēja novērtēšana. Katrs šīs kohortas gadījums tika novērtēts vienu reizi. Lielie valodu modeļi uzrāda ne-triviālu izvades variāciju pat pie zemas paraugošanas temperatūras, tāpēc daudzizpildījumu protokols ar pieciem novērtējumiem katram gadījumam un ziņotu variāciju ir dabisks nākamais solis — īpaši “trap-case” apakškopā, kur konsekvence paraugošanas “jitter” ietekmē ir daļa no drošības apgalvojuma.
Viena dzinēja tvērums. Šī atskaite raksturo vienu dzinēju. Salīdzinošas analīzes ar alternatīvām AI sistēmām šeit nav iekļautas; mēs varam tās īstenot kā atsevišķu neatkarīgu pētījumu ar atbilstošu metodoloģiju, izmantojot to pašu MIT licences ietvaru.
Viena datu avota izcelsme. 100,000 gadījumi ir anonimizēti reāli pacientu ieraksti, kas iegūti no vienas klīniskās repozitorijas (Kantesti SQL nodrošinātā klīnisko datu noliktava). Tie atspoguļo atlasītu ražošanas plūsmu un nav globālā līmenī iedzīvotāju reprezentatīva nejauša izlase. Novērtējuma paplašināšana ar ārēji iegūtiem daudzcentru datiem ir ceļvedī.
Papildus šiem četriem, visietekmīgākais plānotais paplašinājums ir daudzvalodu atbilstība katrai jurisdikcijai. Kantesti AI Dzinējs apkalpo lietotājus 75+ valodās, un, palaižot valodai stratificētas Second-Update apakškohortas (turku, vācu, spāņu, franču, itāļu, portugāļu, arābu, mandarīnu), tiks kvantificēta izvades kvalitāte visās dzinēja atbalstītajās valodās. Katra valodai stratificētā analīze tiks publicēta ar savu DOI un ietvara filiāli.