Jump to content

Template:Model card ORES goodfaith edit/de

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training data und ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Dieses Modell verwendet 'Daten über eine Revision' um zu prognostizieren 'die Wahrscheinlichkeit, dass die Revision in gutem Glauben ist'.


Motivation

[edit]

Dieses Modell soll zwischen beabsichtigten Schadensverlenen (Badfaith/Vandalism) und Schadensvorhaben (Goodfaith Edits/Goodfaith Damage) unterscheiden. Das Modell gibt einen Vermutung darüber, ob eine bestimmte Revision in gutem Glauben ist oder nicht, und bietet einige Wahrscheinlichkeiten, als Maß für sein Vertrauensniveau zu dienen. Dieses Modell wurde von der Forschung des Qualitätskontrollsystems von Wikipedia und dem Potenzial inspiriert, dass Vandalismuserkennungszentren auch als Goodfaith Newcomer -Detection-Systeme verwendet werden können.

Nutzer und Nutzung

[edit]
Use this model for
  • Dieses Modell sollte zur Priorisierung der Überprüfung und der möglichen Rückkehr von Vandalismus auf der Deutschen Wikipedia verwendet werden.
  • Dieses Modell sollte verwendet werden, um die guten Willensbeiträge von Redaktoren auf der deutschen Wikipedia zu erkennen.
Don't use this model for
  • Dieses Modell sollte nicht als letzter Schiedsrichter verwendet werden, ob eine Bearbeitung als gutgläubig betrachtet werden sollte oder nicht.
  • Das Modell darf nicht außerhalb der deutschen Wikipedia verwendet werden.
Current uses
  • Die deutsche Wikipedia nutzt das Modell als Dienstleistung zur Erleichterung effizienter Bearbeitungsbewertungen oder Unterstützung für Neulinge.
  • Jeder kann eine ordnungsgemäß formatierte API-Anruf zur Revision an ORES übermitteln und das Ergebnis dieses Modells erhalten.
Example API call:
{{{model_input}}}

Ethische Überlegungen, Vorsichtsmaßnahmen und Empfehlungen

[edit]

Die deutsche Wikipedia beschloss, dieses Modell zu verwenden.

Dieses Modell ist bekannt dafür, dass neuere Redakteure eine geringere Wahrscheinlichkeit haben, gut im Glauben zu bearbeiten.

Interne oder externe Änderungen, die dieses Modell veraltet oder nicht mehr nutzbar machen könnten, sind:

  • Datendrift bedeutet, dass die Trainingsdaten für das Modell nicht mehr nutzbar sind.
  • Er erfüllt nicht die gewünschten Leistungsindikatoren in der Produktion.
  • Die deutsche Wikipedia-Community beschließt, dieses Modell nicht mehr zu verwenden.

Modell

[edit]

Leistung

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

Durchführung

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Daten

[edit]
Data pipeline
Tabellendaten über Bearbeitungen werden aus der Mediawiki API gesammelt, vorverarbeitet (durch Log-Transformationen, mit öffentlichen Editordaten verbunden usw.), und mit benutzergenerierten Goodfaith-/Schädlichkeitsetiketten verbunden.
Training data
Dieses Modell wurde mit handverzeichneten Trainingsdaten ausgerüstet, die mehrere Jahre alt sind.
Test data
Die hier ermittelten Statistiken wurden durch die Auswahl einer zufälligen Aufteilung der Ausbildungsdaten berechnet, die sich aus dem Ausbildungsprozess herausstellen soll.

Lizenzen

[edit]

Zitat

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
  title={ {{{language}}} {{{project}}} goodfaith model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/de }
}