Jump to content

Template:Model card ORES goodfaith edit/no

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training data, and ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Denne modellen bruker data om en revidering for å forutsi sannsynligheten for at revideringen er i god tro.


Motivasjon

[edit]

Ikke alle skadelige redigeringer er vandalisme. Denne modellen er ment å skille mellom redigeringer som er bevisst skadelige (dårlig tro/vandalisme) og redigeringer der det er ment å være skadelige (gode redigeringer/godtroende skade). Modellen gir et gissing om hvorvidt en gitt revisjon er i god tro, og gir noen sannsynligheter for å tjene som et mål for dens tillit. Denne modelen ble inspirert av forskning i Vikipedias kvalitetskontrollsystem og det potensielle for vandalisme deteksjon modeller for å også bli brukt som godtroede nykommere deteksjon systemer.

Brukere og bruk

[edit]
Use this model for
  • Denne modellen bør brukes for å prioritere gjennomgåelse og potensiell reversering av vandalisme på norsk Wikipedia.
  • Denne modellen bør brukes til å oppdage godvillige bidrag fra redaktører på norsk Wikipedia.
Don't use this model for
  • Denne modellen bør ikke brukes som en endelig voldgiftsdommer om hvorvidt en redigering bør anses som god tro.
  • Modellen bør ikke brukes utenfor norsk Wikipedia.
Current uses
  • Norwegian Wikipedia bruker modellen som en tjeneste for å lette effektive redigering av anmeldelser eller nykommerstøtte.
  • På individuell basis kan alle sende en riktig formatert API-opptak til ORES for en gitt revidering og få tilbake resultatet av denne modellen.
Example API call:
{{{model_input}}}

Etiske hensyn, advarsler og anbefalinger

[edit]

Norwegian Wikipedia bestemte seg for å bruke denne modellen.

Denne modellen er kjent for å gi nyere redaktører lavere sannsynlighet for å redigere i god tro.

Intern eller ekstern endring som kan gjøre denne modellen utdatert eller ikke lenger brukbar er:

  • Data drift betyr at opplæringsdata for modellen ikke lenger kan brukes.
  • Møter ikke de ønskede ytelsesmetrikene i produksjonen.
  • Norsk Wikipedia-fellesskap bestemmer seg for ikke å bruke denne modellen lenger.

Modell

[edit]

Utøvelse

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

Utførelse

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Data

[edit]
Data pipeline
Tabulerdata om redigeringer samles fra Mediawiki API, forhåndsbehandles (via log-transformasjoner, forening med offentlige redaktørdata, etc.), og kombineres med brukergenererte godvilje/skadelige etiketter.
Training data
Denne modellen ble trent ved hjelp av håndmerket opplæringsdata som er flere år gammel.
Test data
De rapporterte statistikkene ble beregnet ved å velge en tilfeldig deling av opplæringsdataene som skal holde seg ut fra opplæringsprosessen.

Lisense

[edit]

Citat

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
  title={ {{{language}}} {{{project}}} goodfaith model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/no }
}