Jump to content

Template:Model card ORES goodfaith edit/hu

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training data és ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Ez a modell a revízióra vonatkozó adatokat használja a revizió jóhiszemű valószínűségének előrejelzéséhez.


Motiváció

[edit]

Nem minden káros szerkesztés vandalismus. Ez a modell arra irányul, hogy különbséget tegyen azok között a szerkesztések között, amelyek szándékosan károsak (báb hit/vandalismus) és azok között, amelyek károsak (jó szerkesztése/jóhiszteni kár). A modell kiszámítja, hogy adott felülvizsgálat jóhiszteni van-e, és bizonyos valószínűségeket biztosít annak mérésére, hogy a bizalom szintje. Ez a model a Wikipédia minőségellenőrzési rendszerének kutatása és a vandalismus észlelési modelljeinek a jóhisztens újlény észlelési rendszereként való felhasználásának lehetőségéről készült.

Használók és felhasználások

[edit]
Use this model for
  • Ezt a modellt a magyar Wikipédiában a vandalizmus felülvizsgálatának és lehetséges visszafordításának prioritásainak meghatározására kell használni.
  • Ezt a modellt a magyar Wikipédia szerkesztői jóhiszemű hozzájárulásainak felderítéséhez kell használni.
Don't use this model for
  • Ezt a modellt nem szabad a végső döntőnek tekinteni, hogy a szerkesztést jóhiszeműnek kell-e tekinteni.
  • A modellt nem szabad magyarországi Wikipédián kívül használni.
Current uses
  • A magyar Wikipédia a modell használatát szolgáltatóként használja a hatékony szerkesztési áttekintések vagy a beérkezők támogatására.
  • Egyénileg bárki átadhatja az ORES-nek egy adott felülvizsgálatra megfelelően formátált API-hívást, és visszakerülheti a modell eredményét.
Example API call:
{{{model_input}}}

Étikai megfontolások, figyelmeztetések és ajánlások

[edit]

A magyar Wikipédia úgy döntött, hogy ezt a modellt használja. Az idő múlásával a modellt a közösségben történő használat révén igazolták.

Ez a modell ismert, hogy az új szerkesztőknél kisebb valószínűséggel jóhiszemű szerkesztést biztosít.

A modell időjárásából vagy használatától mentesítő belső vagy külső változások:

  • Az adatmeghajtás azt jelenti, hogy a modell képzési adatait nem lehet többé használni.
  • Nem felel meg a gyártás során a kívánt teljesítményméreteknek.
  • A magyar Wikipédia közösség úgy dönt, hogy nem használja többé ezt a modellt.

Módellátás

[edit]

A teljesítmény

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

A végrehajtás

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Adatok

[edit]
Data pipeline
A szerkesztésekről szóló táblázatos adatokat a Mediawiki API-ből gyűjtjük, előzetesen feldolgozzuk (a napló átalakításai révén, a nyilvános szerkesztő adatokkal való csatlakozással stb.), és csatlakozzanak a felhasználó által generált jóhiszemű/szennyező címkékhez.
Training data
Ezt a modellt több évre régebbi kézzel címkézett képzési adatok segítségével képezték ki.
Test data
A jelentett statisztikákat a képzési folyamatból kiállított képzési adatok véletlenszerű részletezésével számították ki.

A jogosítványok

[edit]

Címelt

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
  title={ {{{language}}} {{{project}}} goodfaith model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/hu }
}