Wikiprojekti:ORES

Kohteesta Wikipedia
Loikkaa: valikkoon, hakuun
Amir esittelemässä ORES-palvelua Wikimaniassa 2016.

Objective Revision Evaluation Service (ORES) on web-palvelu, joka tarjoaa koneoppimiseen perustuvia palveluita Wikimedia-projekteille. ORES on suunniteltu helpottamaan esimerkiksi vandalismin havaitsemista ja poistamista. Se on osana Wikimedia Scoring Platform -projektia.

Status[muokkaa | muokkaa wikitekstiä]

Tällä hetkellä "advanced support" on kytkettynä päälle, API-rajapinnasta saa tuloksia ja muokkauksia pystyy luokittelemaan. Järjestelmää ei ole vielä opetettu tunnistamaan muokkauksia, joten sen osumatarkkuus on olematon.

Todo[muokkaa | muokkaa wikitekstiä]

Käyttöönottosivun kohdat

  1. Basic support (phab:T158587) Yes check.svg Tehty
  2. Advanced support (mahdollisuus arvioida muokkauksia käyttöliittymän avulla) (phab:T161905) Yes check.svg Tehty
  3. Muokkauksen laatu (20k otos) -kampanjan tekeminen (phab:T163013) Yes check.svg Tehty
  4. Review tool (tuoreet muutokset lista) (siirryttiin suoraan tuoreiden muutosten uusiin suodattimiin)
  5. Tuoreiden muutosten uudet suodattimet + ORES Yes check.svg Tehty
  6. Muokkauksen laatu v2 (5k otos) phab:T166909 (ks. keskustelu)
  7. Vakautusbotti
    1. Käyttäjätunnus botille (sellainen joka toimii eri kielillä), sille reviewer-käyttöoikeus jotta se voi vakauttaa sivuja (tätä pitää pyytää Ejs-80:ltä), botille botti-käyttöoikeus Yes check.svg Tehty
    2. botille käyttäjäsivu jossa kerrotaan mistä siinä on kyse + linkit logeihin (vrt käyttäjä:SeulojaBot) Yes check.svg Tehty
    3. linkki github:iin ja github:iin englanninkielinen README [1] (kesken)
    4. Lista IP:stä joiden muokkaukset lähes aina kumotaan Yes check.svg Tehty
    5. Lista sivuista joiden muokkaukset lähes aina kumotaan Yes check.svg Tehty
    6. Jokin tapa testata bottia siten, että näkee mitä se vakauttaisi ilman, että se tekee mitään (?). Voi olla, että tähän riittää ohjeet siitä miten botin saa ladattua github:sta ja miten sen saa ajettua Yes check.svg Tehty
    7. Vakautustilasto botin toiminnan seurantaa varten Yes check.svg Tehty
    8. phab:T169457 - FlaggedRevs: Make null-edits optional
    9. Vakautustilastojen läpikäynti ja virheellisten positiivisten vähentäminen
  8. PendingChangesBot
    1. ks. phab:T165848 Yes check.svg Tehty
    2. ohjeet englanniksi Yes check.svg Tehty
    3. konfiguraatio tulemaan wikisivulta Yes check.svg Tehty
    4. Siirrettävä Ores-pistemäärän hakeminen ja version merkityt versiot tila botista pywikibotin-koodiin Yes check.svg Tehty
    5. Arviointisäännöt
      1. done: autoreview, bot, formerbot, interwiki, ores, patrolled, reverted, pagecreator, wordtest
      2. Puuttuvia
        1. IP / username whitelist (sivu wikipediassa, mahdollisuus antaa yksi nimi parametrina)
        2. Jeblad: Aggregation of weak classification; if enough users reads a specific version without complaining, should that lead to an automated classification?

Kampanjat[muokkaa | muokkaa wikitekstiä]

Muokkauksen laatu v2 (5k otos)
Luokitellaan 5 423 muokkausta: 41,3% valmis
(Katso ajantasaiset tiedot suoraan arviointityökalusta)

Mitä tällä voi tehdä?[muokkaa | muokkaa wikitekstiä]

  • Pisteytystä voidaan käyttää yhtenä mittarina, kun listataan potentiaalisia uusia seulojia ja automaattiseulottuja käyttäjiä
  • Pistetystä voidaan käyttää yhtenä sääntönä, jolla botti vakauttaa lyhyeksi ajaksi sivuja
  • Pisteytystä voidaan käyttää yhtenä kriteerinä, jolla botti hyväksyy muokkauksia

Työkaluja[muokkaa | muokkaa wikitekstiä]

Tähän on listattu työkaluja, jotka hyödyntävät ORES:ia ja toimivat suomenkielisessä Wikipediassa.

RTRC – Real-Time Recent Changes
ScoredRevisions
  • Lähdekoodi: https://github.com/he7d3r/mw-gadget-ScoredRevisions
  • Värittää muutokset tuoreet muutokset, linkitettyjen sivujen muutokset, tarkkailulista, käyttäjän muokkaukset ja artikkelin historia -sivuilla ORES-pistemäärän mukaan.
  • Värit ovat aika räikeät, ja CSS-säännöt ovat päällekkäisiä merkittyjen versioiden vastaavien sääntöjen kanssa (molemmat värittävät samoja muokkauksia).
Raun
PatruBOT
  • Espanjankielisessä Wikipediassa toimiva ORES-pisteytykseen perustuva vandalismintorjuntabotti

API[muokkaa | muokkaa wikitekstiä]

Tietokantataulut ToolLabsissa
  • mw:Extension:ORES/Schema - goodfaith/damaging true -pisteet kopioituvat mw:n tietokantaan (tuoreet muutokset -lista käyttää näitä)

Käännös[muokkaa | muokkaa wikitekstiä]

viestiryhmä kääntämättä yhteensä käännetty muuttunut oikoluettu
core  72  3855  3783 4 735
core-0-mostused  0  762  762 0 291
ext-abusefilter  50  449  399 8 44
ext-cite  5  29  24 2 3
ext-cite-visualeditor  8  39  31 0 2
ext-flaggedrevs-0-all  93  443  350 3 68
ext-ores  9  55  46 4 42
wiki-ai  0  92  92 0 87

Lisätietoa[muokkaa | muokkaa wikitekstiä]