Jump to content

Template:Model card ORES damaging edit/ru

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training data, и ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Эта модель использует 'данные о пересмотре' для прогнозирования 'вероятности того, что пересмотр будет вредоносен'.


Мотивация

[edit]

Некоторые хорошие редакции вредят статье, и не все вредные редакции являются плохими. Эта модель (совместно с моделью хорошей веры) предназначена для различия между редактированием, которое умышленно вредит (плохое доверие/ вандализм) и редактирование, которое предназначено для вреда (хорошие редакции/хорошие повреждения).

Эта модель помогает приоритетно оценить потенциально вредные изменения или вандализм. Она дает прогноз о том, является ли данная переработка вредной, и дает определенные вероятности, чтобы служить мерой ее уровня доверия.

Пользователи и использование

[edit]
Use this model for
  • Эта модель должна использоваться для приоритетной оценки и потенциального отмены вандализма на русской Википедии.
  • Эта модель должна использоваться для обнаружения вредоносных вкладов редакторов на русской Википедии.
Don't use this model for
  • Эта модель не должна быть использована в качестве окончательного арбитра, чтобы определить, следует ли считать изменение вредным.
  • Модель не должна использоваться за пределами русской Википедии.
Current uses
  • Русская Википедия использует модель в качестве услуги для упрощения эффективного сортирования вандализма, редактирования отзывов или поддержки новичков.
  • На индивидуальной основе любой может подать правильно форматированный API-заказ в ORES для данного пересмотра и получить результат этой модели.
Example API call:
{{{model_input}}}

Этические соображения, предостережения и рекомендации

[edit]

Русская Википедия решила использовать эту модель.

Эта модель дает более новым редакторам более высокую вероятность повреждения редактирования.

Внутренние или внешние изменения, которые могут сделать эту модель устаревшей или больше не используемой, включают:

  • Дрейф данных означает, что данные о подготовке модели больше не могут быть использованы.
  • Не соответствует желаемым показателям производительности в производстве.
  • Русская община Википедии решила больше не использовать эту модель.

Модель

[edit]

Выполнение

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

Реализация

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Данные

[edit]
Data pipeline
Табличные данные об редактировании собираются из API Mediawiki, заранее обрабатываются (посредством преобразований журналов, объединения с данными общественного редактора и т.д.), а также объединяются с пользовательскими генерируемыми этикетками добросовестности / вреда.
Training data
Эта модель была подготовлена с использованием ручной подготовки данных, которые были напечатаны несколько лет назад.
Test data
Статистика, представленная здесь, была исчислена путем выбора случайного разделения данных о обучении, чтобы выдержать процесс обучения.

Лицензии

[edit]

Цитаты

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_damaging,
  title={ {{{language}}} {{{project}}} damaging model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_damaging_edit/ru }
}