Jump to content

Template:Model card ORES goodfaith edit/it

From Meta, a Wikimedia project coordination wiki
Model card
This page is an on-wiki machine learning model card.
A diagram of a neural network
A model card is a document about a machine learning model that seeks to answer basic questions about the model.
Model Information Hub
Model creator(s)Aaron Halfaker (User:EpochFail) and Amir Sarabadani
Model owner(s)WMF Machine Learning Team (ml@wikimediafoundation.org)
Model interfaceOres homepage
CodeORES Github, ORES training data, and ORES model binaries
Uses PIINo
In production?Yes
Which projects?{{{language}}} {{{project}}}
Questo modello utilizza dati relativi a una revisione per prevedere la probabilità che la revisione sia di buona fede.


Motivazione

[edit]

Non tutti gli editi dannosi sono vandalismo. Questo modello è inteso a distinguere tra editi che sono intenzionalmente dannosi (badfaith/vandalism) e editi che intendono essere dannosi (buoni editi/danni di buona fede). Il modello fornisce una ipotesi su se una data revisione sia o meno in buona fede, e fornisce alcune probabilità di servire come misura del suo livello di fiducia. Questo modelo è stato ispirato dalla ricerca del sistema di controllo della qualità di Wikipedia e dal potenziale per i modelli di rilevamento del vandalismo da utilizzare anche come sistemi di rilevare buoni nuovi arrivati.

Utenti e usi

[edit]
Use this model for
  • Questo modello dovrebbe essere utilizzato per dare priorità alla revisione e alla potenziale reversione del vandalismo su Wikipedia italiana.
  • Questo modello deve essere utilizzato per rilevare i contributi di buona fede degli editori della Wikipedia italiana.
Don't use this model for
  • Questo modello non deve essere utilizzato come arbitro finale di se un edit deve o meno essere considerato di buona fede.
  • Il modello non deve essere utilizzato al di fuori della Wikipedia italiana.
Current uses
  • La Wikipedia italiana utilizza il modello come servizio per facilitare le revisioni di modifica efficienti o il supporto per i nuovi arrivati.
  • Su base individuale, chiunque può inviare un'API chiamata correttamente formattata a ORES per una data revisione e ottenere il risultato di questo modello.
Example API call:
{{{model_input}}}

Considerazioni etiche, avvertenze e raccomandazioni

[edit]

La Wikipedia italiana ha deciso di utilizzare questo modello.

Questo modello è noto per dare agli editori più recenti una minore probabilità di modificare in buona fede.

Modifiche interne o esterne che potrebbero rendere questo modello obsoleto o non più utilizzabile sono:

  • La deriva dei dati significa che i dati di formazione per il modello non sono più utilizzabili.
  • Non soddisfa le metriche di prestazione desiderate nella produzione.
  • La comunità italiana di Wikipedia decide di non utilizzare più questo modello.

Modello

[edit]

Performance

[edit]

Test data confusion matrix: {{{confusion_matrix}}}

Test data sample rates: {{{sample_rates}}}

Test data performance: {{{performance}}}

Attuazione

[edit]
Model architecture
{{{model_architecture}}}
Output schema
{{{model_output_schema}}}
Example input and output
Input:
{{{model_input}}}

Output:

{{{model_output}}}

Dati

[edit]
Data pipeline
I dati tabulari sulle modifiche vengono raccolti dall'API Mediawiki, pre-elaborati (attraverso trasformazioni di registro, uniti ai dati dell'editore pubblico, ecc.), e uniti con etichette di buona fede/danni generate dagli utenti.
Training data
Questo modello è stato addestrato utilizzando dati di formazione etichettati a mano che hanno diverse anni.
Test data
Le statistiche riportate qui sono state calcolate selezionando una partizione casuale dei dati di formazione per trattenersi dal processo di formazione.

Permessi

[edit]

Citazione

[edit]

Cite this model card as:

@misc{
  Triedman_Bazira_2023_{{{language}}}_{{{project}}}_goodfaith,
  title={ {{{language}}} {{{project}}} goodfaith model card },
  author={ Triedman, Harold and Bazira, Kevin },
  year={ 2023 },
  url={ https://meta.wikimedia.org/wiki/Model_card_ORES_goodfaith_edit/it }
}