AI Aulis

AI-UUTISET SUOMEKSI · 14.11.2026

Tekoälyalan tärkeimmät uutiset joka aamu. Tekoäly kirjoittaa ja tarkastaa jutut alkuperäisiä lähteitä vasten – tarkista tärkeät tiedot lähteistä.

← Numero 14.11.2026Lehti

Elastic: jina-reranker-v3.5 paransi semanttista hakua keskimäärin eniten 20 ehdokkaalla

Tekoälyn tuottama sisältöTekoälyn kirjoittama

huggingface.co, elastic.co · 2 lähdettä · Lähteet julkaistu: 13.11.2026 · osan lähteistä ajankohta ei tiedossa

Elasticin 25 vertailutestin kokeessa jina-reranker-v3.5 vähensi semanttisen haun virhettä keskimäärin eniten 20 ehdokkaalla ja BM25-haun virhettä 100 ehdokkaalla. Kun semanttisesta hausta annettiin 200 ehdokasta, tulos oli keskimäärin huonompi kuin ilman uudelleenjärjestystä.

Elasticin Search Labs -blogissa 13.11.2026 julkaistu testi selvitti, montako hakutulosta yhtiön oman jina-reranker-v3.5-mallin kannattaa järjestää uudelleen. Scott Martens ja Sofia Vasileva ajoivat mallin 25 vertailutestillä, jotka on otettu BEIR-, CQADupStack-, CoIR- ja BRIGHT-kokoelmista.

Uudelleenjärjestysmalli (reranker) saa nopean ensivaiheen haun löytämät ehdokkaat ja järjestää ne osuvuuden mukaan. Testattu malli on listamalli (listwise reranker): se lukee kyselyn ja koko ehdokaslistan yhdellä ajolla. Kun malli pisteyttää ehdokkaat yksitellen, lisäehdokkaat eivät muuta muiden järjestystä. Listamallissa ne voivat heikentää koko tulosta. Kirjoittajien selityksen mukaan mallin huomio hajautuu ja kohina kasautuu.

Paras ehdokasmäärä riippui ensivaiheen hausta

Ensivaiheena oli Elasticsearchin BM25-avainsanahaku tai semanttinen vektorihaku jina-embeddings-v5-text-small-mallilla. Osuvuutta mitattiin nDCG@10-mittarilla. Se arvioi, kuinka hyvin osuvimmat dokumentit sijoittuvat kymmenen ensimmäisen tuloksen joukkoon. Taulukko näyttää, kuinka suuren osan virheestä uudelleenjärjestys poisti keskimäärin pelkkään ensivaiheen hakuun verrattuna (0,2097 ≈ 21 %).

Ehdokkaita BM25 Semanttinen haku
10 0,0878 0,0661
20 0,1433 0,0848
50 0,1875 0,0767
100 0,2097 0,0629
200 0,1873 −0,0239

Lähde: Elastic, 25 vertailutestin keskiarvo, nDCG@10. BM25: Elasticsearch Serverless, englannin analysaattori, oletusasetukset; haku palautti enintään 200 ehdokasta, joten suurempia määriä ei testattu.

Keskiarvo kätkee suuren vaihtelun. Semanttisessa haussa uudelleenjärjestys heikensi BRIGHT LeetCode- ja CoIR CoSQA -testien tulosta kaikilla ehdokasmäärillä. CoSQA:n tulokset tosin vaihtelivat ajojen välillä noin 0,01. BM25-haussa vain kolme CoIR-testiä hyötyi 200 ehdokkaasta enemmän kuin pienemmistä määristä.

Kirjoittajat myöntävät, ettei testi ole tieteellisesti tiukka. BEIR-kokoelmasta jätettiin pois suurimmat aineistot, ja ehdokasmäärät olivat kiinteitä. Tulokset eivät välttämättä päde muihin uudelleenjärjestysmalleihin.

BM25-haussa 50 ehdokasta kasvatti virhettä noin 2 % sataan ehdokkaaseen verrattuna mutta puolitti tokenien määrän. Kirjoittajat pitävät 50:tä edullisimpana valintana.

BM25 ja uudelleenjärjestys lähes semanttisen haun tasolle

Pelkkä semanttinen haku vähensi virhettä keskimäärin 25,7 % BM25-hakuun verrattuna. Kun BM25-haun sata parasta tulosta järjestettiin uudelleen, semanttinen haku vähensi virhettä tähän yhdistelmään verrattuna enää 4,2 %. Puolessa BEIR-testeistä BM25 ja uudelleenjärjestys voittivat semanttisen haun.

Semanttinen haku ja uudelleenjärjestys 20 ehdokkaalla olivat kuitenkin jokaisessa testissä parempia kuin BM25 ja uudelleenjärjestys sadalla ehdokkaalla, ja virhe oli keskimäärin 13,26 % pienempi.

Mallin saa Elasticista, Jinan rajapinnasta ja Hugging Facesta

Elasticsearchissa malli lisätään text_similarity_reranker-hakuvaiheena, ja ehdokasmäärää säädetään rank_window_size-asetuksella. Elastic suosittaa BM25-haun aloitusarvoksi 100 ja vertailuksi 50, semanttiselle haulle 20. Yhtiö kehottaa silti mittaamaan sopivan määrän omalla aineistolla. Mallia voi käyttää Elastic Inference Servicessä, Jina API:ssa ja omalle laitteistolle asennettavana konttina. Hugging Facessa olevat mallin painot ovat CC BY-NC 4.0 -lisenssillä ei-kaupallista käyttöä varten, ja kaupallisesta käytöstä sovitaan Elasticin kanssa.

Ilmoita virheestä tässä jutussa