Template:Model card ORES goodfaith edit/ja

Model card
This page is an on-wiki machine learning model card.
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)	Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)	WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interface	Ores homepage
Code	ORES Github、ORES training dataおよびORES model binaries
Uses PII	No
In production?	Yes
Which projects?	{{{language}}} {{{project}}}
このモデルは,修正に関するデータを使用して,修正が善意に行われる可能性を予測する.

動機

破壊的な編集はすべて破壊主義ではない.このモデルは,意図的に有害な編集 (悪信/破壊主義) と有害な編集を区別することを目的としている.このモデルは特定の修正が善信に存在するかどうか推測し,信頼レベルの測定として役立つ可能性を示している.このモデルはウィキペディアの品質管理システムの研究と,破壊主義検出モデルが善信新人検出システムとしても使用される可能性にインスピレーションを受けた.

ユーザー及び利用

Use this model for

• このモデルは,日本語ウィキペディアにおける破壊行為のレビューと潜在的な逆戻りに優先順位を与えるために使用されるべきである.
• このモデルは,日本語ウィキペディアの編集者の善意の貢献を検出するために使用されるべきです.

Don't use this model for

• このモデルは,編集が善意に評価されるべきかどうか最終的な仲裁者として使用されるべきではありません.
• このモデルは日本語ウィキペディアの外では使用されるべきではありません.

Current uses

• 日本語ウィキペディアは,効率的な編集レビューや新人サポートを可能にするサービスとしてこのモデルを使用しています.
• 個別的に,誰でも,適切なフォーマットされたAPI呼び出しをORESに提出し,このモデルの結果を返却することができます.

Example API call:

{{{model_input}}}

倫理的考慮事項,注意事項,勧告

日本語ウィキペディアはこのモデルを使用することを決定しました.時間とともに,このモデルはコミュニティでの使用によって検証されました.

このモデルは,新しい編集者に善意で編集する可能性が低いことを知られています.

このモデルが時代遅れになるか,もはや使用できないものとする内部または外部変更は,

• データ漂移は,モデルのためのトレーニングデータがもはや使用できないことを意味します.
• 生産で望ましいパフォーマンスメトリックを満たしていない.
• 日本語ウィキペディアコミュニティは,このモデルを使用しないことを決定しました.

モデル

性能

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

実施

Model architecture

{{{model_architecture}}}

Output schema

{{{model_output_schema}}}

Example input and output

Input:

{{{model_input}}}

Output:

{{{model_output}}}

データは

Data pipeline

編集に関する表記データは Mediawiki APIから収集され,事前処理 (ログ変換,公開編集者データなど) で結合し,ユーザー生成した善意/有害なラベルに結合されます.

Training data

このモデルは数年前の手書きの訓練データを使って訓練されました

Test data

ここで報告された統計は,訓練プロセスから引き離される訓練データのランダムな分割を選択して計算された.そのモデルはそのデータに基づいて予測を行い,その基礎的な基礎真実と比較した.

ライセンス

• Code: MIT license
• Model: MIT license

引用

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
  title={ {{{language}}} {{{project}}} goodfaith model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/ja }
}