Jump to content

Template:Model card ORES damaging edit/nl

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training dataen ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Dit model gebruikt 'gegevens over een herziening' om te voorspellen 'de kans dat de herziening schadelijk is'.


Motivering

[edit]

Sommige goedgeloofse bewerkingen zijn schadelijk voor een artikel, en niet alle schadelijke bewerkingen hebben slechte geloofsgevoel.

Dit model helpt bij het prioriteiten geven aan de herziening van potentieel schadelijke bewerkingen of vandalisme. Het biedt een voorspelling of een bepaalde herziening schadelijk is of niet, en biedt een aantal waarschijnlijkheid om te dienen als een maatstaf van het vertrouwen.

Gebruikers en gebruik

[edit]
Use this model for
  • Dit model moet worden gebruikt om de herziening en mogelijke terugkeer van vandalisme op de Nederlandse Wikipedia te prioriteren.
  • Dit model dient te worden gebruikt om schadelijke bijdragen van redacteuren op de Nederlandse Wikipedia te detecteren.
Don't use this model for
  • Dit model mag niet als uiteindelijk scheidsrechter worden gebruikt voor het bepalen of een bewerking schadelijk moet worden beschouwd.
  • Het model mag niet buiten de Nederlandse Wikipedia worden gebruikt.
Current uses
  • Nederlandse Wikipedia gebruikt het model als een dienst voor het faciliteren van efficiënte vandalisme triage, bewerken van recensies of nieuwkomersondersteuning.
  • Op individuele basis kan iedereen een goed geformatteerde API-oproep indienen aan ORES voor een bepaalde herziening en het resultaat van dit model terug krijgen.
Example API call:
{{{model_input}}}

Ethische overwegingen, waarschuwingen en aanbevelingen

[edit]

De Nederlandse Wikipedia besloot dit model te gebruiken.

Dit model geeft nieuwere redacteurs een hogere kans op schadelijke bewerkingen.

Interne of externe wijzigingen die dit model kunnen verouderen of niet langer bruikbaar maken:

  • Data drift betekent dat de traininggegevens voor het model niet langer bruikbaar zijn.
  • Niet voldoet aan de gewenste prestatiemetrices in de productie.
  • De Nederlandse Wikipedia-gemeenschap beslist dit model niet meer te gebruiken.

Model

[edit]

Prestaties

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

Uitvoering

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Gegevens

[edit]
Data pipeline
Tabelleerde gegevens over bewerkingen worden verzameld uit de Mediawiki API, vooraf verwerkt (via log-transformaties, verbonden met publieke redactiegegegegevens, enz.), en gecombineerd met door de gebruiker gegenereerde goodfaith/damaging labels.
Training data
Dit model is getraind met behulp van handmatig gemarkeerde traininggegevens die enkele jaren oud zijn.
Test data
De hier vermelde statistieken zijn berekend door een willekeurige verdeling van de opleidingsgegevens te selecteren die uit het opleidingsproces voortkomt.

Vergunningen

[edit]

Citaten

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_damaging,
  title={ {{{language}}} {{{project}}} damaging model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_damaging_edit/nl }
}