Wikiprojekti:ORES

Kohteesta Wikipedia
Loikkaa: valikkoon, hakuun
Amir esittelemässä ORES-palvelua Wikimaniassa 2016.

Objective Revision Evaluation Service (ORES) on web-palvelu, joka tarjoaa koneoppimiseen perustuvia palveluita Wikimedia-projekteille. ORES on suunniteltu helpottamaan esimerkiksi vandalismin havaitsemista ja poistamista. Se on osana Wikimedia Scoring Platform -projektia.

Status[muokkaa | muokkaa wikitekstiä]

Tällä hetkellä "advanced support" on kytkettynä päälle ja ORES on beta-ominaisuuksissa käytössä. API-rajapinnasta saa tuloksia ja muokkauksia pystyy luokittelemaan. Osumatarkkuus on vielä heikohko ja vaatisi lisää muokkausten arviointia parantuakseen.

Todo[muokkaa | muokkaa wikitekstiä]

Käyttöönottosivun kohdat

  1. Basic support (phab:T158587) Yes check.svg Tehty
  2. Advanced support (mahdollisuus arvioida muokkauksia käyttöliittymän avulla) (phab:T161905) Yes check.svg Tehty
  3. Muokkauksen laatu (20k otos) -kampanjan tekeminen (phab:T163013) Yes check.svg Tehty
  4. Review tool (tuoreet muutokset lista) (siirryttiin suoraan tuoreiden muutosten uusiin suodattimiin)
  5. Tuoreiden muutosten uudet suodattimet + ORES Yes check.svg Tehty
  6. Muokkauksen laatu v2 (5k otos) phab:T166909 (ks. keskustelu)
  7. Vakautusbotti
    1. Käyttäjätunnus botille (sellainen joka toimii eri kielillä), sille reviewer-käyttöoikeus jotta se voi vakauttaa sivuja (tätä pitää pyytää Ejs-80:ltä), botille botti-käyttöoikeus Yes check.svg Tehty
    2. botille käyttäjäsivu jossa kerrotaan mistä siinä on kyse + linkit logeihin (vrt käyttäjä:SeulojaBot) Yes check.svg Tehty
    3. linkki github:iin ja github:iin englanninkielinen README [1] (kesken)
    4. Lista IP:stä joiden muokkaukset lähes aina kumotaan Yes check.svg Tehty
    5. Lista sivuista joiden muokkaukset lähes aina kumotaan Yes check.svg Tehty
    6. Jokin tapa testata bottia siten, että näkee mitä se vakauttaisi ilman, että se tekee mitään (?). Voi olla, että tähän riittää ohjeet siitä miten botin saa ladattua github:sta ja miten sen saa ajettua Yes check.svg Tehty
    7. Vakautustilasto botin toiminnan seurantaa varten Yes check.svg Tehty
    8. phab:T169457 - FlaggedRevs: Make null-edits optional
    9. Vakautustilastojen läpikäynti ja virheellisten positiivisten vähentäminen
  8. PendingChangesBot
    1. ks. phab:T165848 Yes check.svg Tehty
    2. ohjeet englanniksi Yes check.svg Tehty
    3. konfiguraatio tulemaan wikisivulta Yes check.svg Tehty
    4. Siirrettävä Ores-pistemäärän hakeminen ja version merkityt versiot tila botista pywikibotin-koodiin Yes check.svg Tehty
    5. Arviointisäännöt
      1. done: autoreview, bot, formerbot, interwiki, ores, patrolled, reverted, pagecreator, wordtest
      2. Puuttuvia
        1. IP / username whitelist (sivu wikipediassa, mahdollisuus antaa yksi nimi parametrina)
        2. Jeblad: Aggregation of weak classification; if enough users reads a specific version without complaining, should that lead to an automated classification?

Kampanjat[muokkaa | muokkaa wikitekstiä]

Muokkauksen laatu v2 (5k otos)
Luokitellaan 5 423 muokkausta: 46,7% valmis
(Katso ajantasaiset tiedot suoraan arviointityökalusta)

Mitä tällä voi tehdä?[muokkaa | muokkaa wikitekstiä]

  • Pisteytystä voidaan käyttää yhtenä mittarina, kun listataan potentiaalisia uusia seulojia ja automaattiseulottuja käyttäjiä
  • Pistetystä voidaan käyttää yhtenä sääntönä, jolla botti vakauttaa lyhyeksi ajaksi sivuja
  • Pisteytystä voidaan käyttää yhtenä kriteerinä, jolla botti hyväksyy muokkauksia

Työkaluja[muokkaa | muokkaa wikitekstiä]

Tähän on listattu työkaluja, jotka hyödyntävät ORES:ia ja toimivat suomenkielisessä Wikipediassa.

RTRC – Real-Time Recent Changes
ScoredRevisions
  • Lähdekoodi: https://github.com/he7d3r/mw-gadget-ScoredRevisions
  • Värittää muutokset tuoreet muutokset, linkitettyjen sivujen muutokset, tarkkailulista, käyttäjän muokkaukset ja artikkelin historia -sivuilla ORES-pistemäärän mukaan.
  • Värit ovat aika räikeät, ja CSS-säännöt ovat päällekkäisiä merkittyjen versioiden vastaavien sääntöjen kanssa (molemmat värittävät samoja muokkauksia).
Raun
PatruBOT
  • Espanjankielisessä Wikipediassa toimiva ORES-pisteytykseen perustuva vandalismintorjuntabotti

API[muokkaa | muokkaa wikitekstiä]

Tietokantataulut ToolLabsissa
  • mw:Extension:ORES/Schema - goodfaith/damaging true -pisteet kopioituvat mw:n tietokantaan (tuoreet muutokset -lista käyttää näitä)

Käännös[muokkaa | muokkaa wikitekstiä]

viestiryhmä kääntämättä yhteensä käännetty muuttunut oikoluettu
core  72  3874  3802 1 735
core-0-mostused  0  762  762 0 292
ext-abusefilter  51  450  399 8 44
ext-cite  5  29  24 2 3
ext-cite-visualeditor  10  41  31 0 2
ext-flaggedrevs-0-all  93  443  350 3 68
ext-ores  9  55  46 4 42
wiki-ai  0  92  92 0 89

Lisätietoa[muokkaa | muokkaa wikitekstiä]