Template:Model card ORES goodfaith edit/ca
| Model card | |
|---|---|
| This page is an on-wiki machine learning model card. | |
A model card is a document about a machine learning model that seeks to answer basic questions about the model. | |
| Model Information Hub | |
| Model creator(s) | Aaron Halfaker (User:EpochFail) and Amir Sarabadani |
| Model owner(s) | WMF Machine Learning Team (ml@wikimediafoundation.org) |
| Model interface | Ores homepage |
| Code | ORES Github, ORES training data, and ORES model binaries |
| Uses PII | No |
| In production? | Yes |
| Which projects? | {{{language}}} {{{project}}} |
| Aquest model utilitza dades sobre una revisió per predir la probabilitat que la revisió sigui de bona fe. | |
Motivació
[edit]No totes les edicions perjudicials són vandalisme. Aquest model pretén diferenciar entre edicions que són intencionadament perjudicials (malediccions/danys de bon estat) i edicions que pretenen ser perjudicials (bones edicions/danys de bon estat). El model proporciona una suposició de si una revisió donada és de bona fe, i proporciona algunes probabilitats de servir com a mesura del seu nivell de confiança. Aquest model es va inspirar en la investigació del sistema de detecció de vandalisme i el potencial perquè els sistemes de detecció de vandalisme també s'utilitzin com a sistemes de detecció de nous resultats de bon estat. ⁇ ref ⁇ Halfaker, A., Geiger, R. S., ⁇ Terveen, L. G. (2014, April). Snuggle: Disseny de la conferència SIGCHI sobre factors humans en sistemes de computació (pp. 311-320). ⁇ /ref ⁇
Usuaris i usos
[edit]- Aquest model s'ha d'utilitzar per prioritzar la revisió i la possible reversió del vandalisme a la Viquipèdia catalana.
- Aquest model s'ha d'utilitzar per detectar contribucions de bona fe per part d'editors a la Viquipèdia en català.
- Aquest model no s'ha d'utilitzar com a àrbitre definitiu de si una edició s'ha de considerar o no de bona fe.
- El model no s'ha d'utilitzar fora de la Viquipèdia en català.
- La Viquipèdia en català utilitza el model com a servei per facilitar revisions d'edició eficients o suport per a nouvinguts.
- De manera individual, qualsevol pot enviar una crida API amb format adequat a ORES per a una revisió donada i recuperar el resultat d'aquest model.
{{{model_input}}}
Consideracions ètiques, advertències i recomanacions
[edit]La Viquipèdia en català va decidir utilitzar aquest model. Amb el temps, el model s'ha validat mitjançant l'ús a la comunitat.
Aquest model és conegut per donar als editors més nous menor probabilitat d'editar de bona fe.
Els canvis interns o externs que podrien fer que aquest model sigui obsolet o ja no es pugui utilitzar són:
- La deriva de dades significa que l'entrenament de dades per al model ja no es pot utilitzar.
- No compleix les mètriques de rendiment desitjades en producció.
- La comunitat catalana de la Viquipèdia decideix no utilitzar aquest model més.
Model
[edit]Rendiment
[edit]Test data confusion matrix: {{{confusion_matrix}}}
Test data sample rates: {{{sample_rates}}}
Test data performance: {{{performance}}}
Implementació
[edit]{{{model_architecture}}}
{{{model_output_schema}}}
{{{model_input}}}
Output:
{{{model_output}}}
Dades
[edit]Les dades tabulars sobre les edicions es recullen a l'API Mediawiki, preprocessada (a través de log-transformations, unint-se amb dades de l'editor públic, etc.), i unida amb etiquetes de bona fe/dany generades per l'usuari.
Aquest model es va formar amb dades de formació etiquetades a mà que tenen diversos anys.
Les estadístiques que s'han informat aquí s'han calculat seleccionant una partició aleatòria de les dades d'entrenament per a mantenir-les fora del procés d'entrenament. El model llavors fa una predicció d'aquestes dades, la qual cosa es compara amb la veritat fonamental subjacent.
Llicències
[edit]- Code: MIT license
- Model: MIT license
Cita
[edit]Cite this model card as:
@misc{
Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
title={ {{{language}}} {{{project}}} goodfaith model card },
author={ Triedman, Harold and Bazira, Kevin },
year={ 2023 },
url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/ca }
}