Community health initiative/Metrics kit/nl

Community Health Metrics Kit is een project dat wordt onderzocht door het team Trust and Safety, in samenwerking met het Gemeenschapsgezondheidsinitiatief, bij de Wikimedia Foundation. Het uiteindelijke doel is een openbare set met statistieken en gegevens die de relatieve gezondheid van Wikimedia-gemeenschappen per project documenteren. Dit project werd onderzocht in het boekjaar 2018–19 en zal in de toekomst verdere ontwikkeling van gemeenschapsstatistieken ondersteunen.

Achtergrond

Als beweging hebben Wikimedianen altijd aspecten van hun gemeenschappen gemeten. Er zijn regelmatig gegevens zoals de activiteitsniveaus van de redacteur, nieuwe gebruikers en het behoud van de redacteur verzameld. Hoewel deze metingen nuttige indicatoren geven over de gezondheid van een project, geven ze geen grote inzichten in uitdagingen en specifieke gebieden die moeten worden verbeterd. Het "Community Health Initiative" wil voortbouwen op het werk dat reeds is gedaan door individuele bijdragers, aangesloten groepen, academici en onderzoekers en de Wikimedia Foundation.

Dit project heeft twee primaire doelen:

1. om regelmatig geactualiseerde kwantitatieve statistieken te hebben die nuttige inzichten geven in aspecten van de gezondheid van een gemeenschap, en
2. om betere kwalitatieve opties te bieden voor het vinden van inzichten die niet effectief kunnen worden gemeten door kwantitatieve benaderingen.

Deze kit en de gegevens die het zal bevatten zullen gericht zijn op twee grote doelgroepen:

1. De lokale en wereldwijde gemeenschappen, om de relatieve gezondheid van hun projecten te bepalen en om de vroege tekenen van een ongezonde gemeenschap gemakkelijker te identificeren; en
2. De Wikimedia Foundation, die gebruik kan maken van de gegevens (nu op één gecentraliseerde plaats) om de trends in gezondheid van de gemeenschap beter te identificeren en ontwikkelingsinspanningen rechtstreeks te richten op het oplossen van problemen.

Waar staan we nu: Consultatie

Proces

Datum	Stage
juli - augustus 2018	Metingen definities; brainstorming; interne publiciteit
september 2018	Ontwerp; bepaling van de locatie; raadpleging van de gemeenschap over metingen
oktober – december 2018	Verdere werkzaamheden aan het ontwerp; de discussies in de gemeenschap zullen worden voortgezet
januari - maart 2019	Technische uitvoering, prototypes maken
Voor eind juni 2019	Lancering van Kit

Dit project bevindt zich momenteel in de fase ontwerp- en consultatie. Op dit moment hebben we een globaal idee van voor wie dit project bedoeld is (lokale gemeenschapsleden die de relatieve gezondheid van hun gemeenschappen/projecten willen beoordelen, en medewerkers van de Wikimedia Foundation die deze gezondheid willen monitoren voor zaken als hulpmiddel- of beleidsontwikkeling). We hebben ook een ruwe shortlist met meetwaarden die we graag in de kit willen hebben. Daar hebben we uw hulp bij nodig.

Feedback geven

Hoewel wij hiervoor het kader hebben opgesteld en onze ideeën hebben neergelegd, zal dit project zonder de kennis en expertise van de gemeenschap minder waardevol zijn. Wij vragen u om feedback te geven over onze ideeën en uw eigen ideeën te geven.

Gebruik alstublieft deze overlegpagina voor uw feedback. Om het makkelijker te maken, hebben we daar een aantal secties opgezet voor de aspecten van dit project waarover we het meest enthousiast zijn over uw meningen te vernemen. Een van die secties heet Overige feedback, omdat we anders dingen zouden kunnen missen. Voel u vrij om uw opmerkingen en suggesties achter te laten! Alvast bedankt voor uw bijdragen!

Meer betrokkenheid krijgen

Naast het vragen om feedback over wat we doen, zoeken we ook vrijwilligers die nauwer met ons aan het project willen samenwerken. Er zijn verschillende manieren waarop u kunt meedoen, als u geïnteresseerd bent:

• U kunt met ons samenwerken om de manier waarop we de data verzamelen in één of meer velden voor alle Wiki-gemeenschappen te verfijnen
• U kunt helpen bugs en fouten te vinden die we mogelijk maken
• U kunt onze steun krijgen om uw eigen gemeenschap beter te begrijpen via gemeenschapsgezondheidsstatistieken
• U kunt helpen de kennis over die nieuwe metingen in de beweging te delen

Als u geïnteresseerd bent om tijd te investeren in dit project op een of meer van die punten op middellange tot lange termijn, meld u dan aan op de bijbehorende sectie van de overlegpagina!

Hoe we de resultaten gaan gebruiken

In deze fase zal uw feedback direct invloed hebben op ons denken met betrekking tot dit project. Als een van de belangrijkste doelgroepen voor dit werk is het inzicht van de gemeenschap natuurlijk van onschatbare waarde. Als zodanig zal alles worden meegenomen en gebruikt om de toekomst van dit project te sturen, terwijl we ons richten op het ontwerp en de gebruiksscenario's.

Statistieken

We kijken nu naar statistieken die de gezondheid van de gemeenschap weerspiegelen. Deze worden geïnformeerd door opmerkingen en suggesties die tijdens deze consultatie worden gedaan, evenals door individuele gebruikersinterviews en andere ontwerponderzoeksmethoden. Op dit moment bekijken we statistieken die zaken weerspiegelen als:

• Actieve beheerders- en gebruikersstatistieken;
• Backlogstatistieken (vergeleken met het aantal mensen dat eraan werkt);
• Statistieken die al worden gebruikt om Wikimedia-projecten met elkaar te vergelijken (zoals Wikipedia-artikeldiepte);
• Aantallen vandalisme, blokken en andere administratieve taken;
• Andere statistieken die we nog niet hebben bedacht :)

Ontwerp

Twee schermafdrukken van het prototype zoals het nu bestaat.

We hebben wat tijd besteed aan het nadenken over hoe deze kit er uiteindelijk uit zou kunnen zien en gebruikt zou kunnen worden door leden van de gemeenschap. Onze eisen voor dit project zijn:

• Vindbaar: Het zou voor leden van de gemeenschap gemakkelijk te vinden en te gebruiken moeten zijn in hun werk.
• Leesbaar/Toegankelijk: Het moet eenvoudig zijn om de informatie te lezen en te absorberen die het probeert over te brengen.
• Up-to-date: Het moet live (of in ieder geval regelmatig), automatisch en met minimale onderhoudskosten worden bijgewerkt.
• Vertaalbaar: Het moet beschikbaar zijn voor gebruikers in zoveel mogelijk talen (idealiter beginnend met de Officiële talen van de Verenigde Naties), en beschikbaar zijn voor gebruikers om vertalingen te leveren waar die niet bestaan.

Op dit moment denken we om deze data te hosten op Toolforge, aangezien die optie de meeste van bovenstaande vereisten zou dekken. We zijn ons ervan bewust dat veel van de meetpunten die we met deze kit willen bereiken, al zijn verzameld door Wikistats, en we denken dat het eindproduct waarschijnlijk behoorlijk vergelijkbaar zal zijn qua uiterlijk, gevoel en doelgroep.

Oorspronkelijke plannen

Voortbouwend op bestaand werk

Enkele top-level inzichten van de gemeenschap maken deel uit van het WikiStats-portaal. Dit platform levert gegevens over:

• Totaal unieke apparaten
• Meest bekeken pagina's
• Nieuw geregistreerde gebruikers
• Nieuwe pagina's
• Bewerkingen
• Redacteuren
• Bewerkte pagina's
• Netto verschil in bytes
• Absolute bytes verschil

De enquête Inzichten in de gemeenschap biedt een inkijkje in een aantal aspecten van de gemeenschapsgezondheid en biedt ook nuttige demografische informatie.

Individuele projecten en bijdragers hebben verschillende benaderingen en API-queries gebruikt om specifieke inzichten te verkrijgen over specifieke workflows en kwesties. Voorbeelden hiervan zijn de Engelse Wikipedia's AdminStats en deze analyse van beheerdersnummers en verhoudingen op de verschillende Wikipedia's.

Er zijn veel eerdere onderzoeksprojecten die zich voornamelijk richten op onderwerpen als volksgezondheid of die aanverwante aspecten en kwesties belichten. We hebben hier in deze tabel een deel daarvan genoemd; Als we iets gemist hebben, voeg dat dan a.u.b. toe aan deze subpagina!

Research name	Date begun	Date published	Qual. or Quant.?	Topic	Contact/Author	Relevance
How much do Wikipedians value editing Wikipedia?	2017-12	2018-05	Qualitative	Editor satisfaction	Jana Gallus; Avinash Gannamaneni; Aaron Halfaker	High
Growth and diversity of Technology team audiences	2017-11	2018-05	Qualitative	Technical contributors satisfaction	Jonathan Morgan	High
Holder Administration in anderen Sprachversionen AdminCon 2018	N/A	2018-03	Quantitative	Administrators	User:Holder	High
The Keilana Effect: Visualizing the closing coverage gaps with ORES	N/A	2017-08	Quantitative	Gender gap	Aaron Halfaker; Emily Temple-Woods	High
Wikimedia CH Community Survey 2016	2016-12	2017-02	Qualitative	Community Survey	Wikimedia CH	High
New editor support strategies	2016-05	2016-10	Qualitative	New Editors	Jonathan Morgan; Joe Matazzoni; Pau Giner	High
Becoming Wikidatians: evolution of participation in a collaborative structured knowledge base	2016-05	2016-10	Qualitative	New Editors	Alessandro Piscopo, et al.	High
Impact of The Wikipedia Adventure on new editor retention	2014-11	2016-10	Qualitative	New Editors	Sneha Narayan, et al.	Medium
Online Community Conduct Policies	2016-03	2016-06	Qualitative	Conduct policies in other online communities	Patrick Earley; Karen Brown	Medium
Teahouse long term new editor retention	2015-11	2016-05	Qualitative	Editor satisfaction	Rebecca O’Neill	High
Survey of user in Ireland	2015-09	2016-05	Both	Editor retention	Jonathan Morgan; Aaron Halfaker	High
Wikimedia Nederlands survey (2015)	N/A	2016-04	Qualitative	Community Survey	Wikimedia Nederland	High
Wikimedia CH Community Survey 2015	2016-01	2016-02	Qualitative	Community Survey	Verena Linder	High
Wikimedia Deutschland Editor Survey 2016	2015-06	2016-02	Qualitative	Community Survey	Wikimedia CH	High
Monthly wikimedia editor activity dataset	2015-04	2015-08	Quantitative	Editor activity	Aaron Halfaker	Medium
Active editor spike 2015 (July update)	N/A	2015-07	Qualitative	General - Community Health	Haitham Shamma; María Cruz	High
Community Health learning campaign	2015-07	2015-07	Quantitative	Editor activity	Aaron Halfaker	Medium
VisualEditor's effect on newly registered editors (May 2015 study)	2015-06	2015-05	Quantitative	New editors	Aaron Halfaker	Medium
Active editor spike 2015	2015-03	2015-04	Quantitative	Editor activity	Aaron Halfaker; Dario Taraborelli	Medium
Global South User Survey 2014	2014-09	2015-02	Qualitative	Community Survey	Haitham Shammaa	High
Talk Sentiment Analysis: Editor Retention and Editing Prediction	2014-10	2014-12	Qualitative	Editor retention	Sergio Martinez-Ortuno; Lars Roemheld; Deepak Menghani; Leila Zia	Medium
The Role of Wikipedia Mentorship Programs in the Newcomer Experience	2014-07	2014-12	Qualitative	New Users	Gabriel Mugar with Chris Schilling and Aaron Halfaker	Medium
Wikipedia Gender Inequality Index	2014-06	2014-12	Quantitative	Gender Gap	Piotr Konieczny	Medium
Communicating on Wikipedia while female	2014-11	2014-11	Qualitative	Gender gap	Laura Hale	High
Framing Support for Newcomers	2014-07	2014-10	Qualitative	New Users	Yla Tausczik; Jonathan Morgan	Low
Asking anonymous editors to register	2014-03	2014-10	Qualitative	New Users	Aaron Halfaker	Medium
Non-finite Processes in Human Social Phenomena	2012-10	2014-10	Qualitative	Cooperation	Simon DeDeo	High
Women and Wikipedia	2014-01	2014-09	Qualitative	Gender Gap	Amanda Menking; Jonathan Morgan	High
Women and Wikipedia: Contributions in a Collaborative Online Space	2012-03	2014-05	Quantitative	Gendergap	Melanie Kill	Low
Wikimedia Community Visualization	N/A	2013-12	Quantitative	Editor activity	Haitham Shammaa	High
Newcomer survival models	2013-09	2013-09	Qualitative	Editor retention/New editors	Aaron Halfaker	High
Onboarding new Wikipedians/OB6	2013-09	2013-09	Quantitative	New Editors	Aaron Halfaker	Low
Exploring editing dynamics in different language Wikipedias – Towards a substantive grounded theory	2013-05	2013-08	Qualitative	Social dynamics	Pasko Bilic	High
Getting to know the grassroots	N/A	2013-07	Qualitative	Community Survey	Wikimedia Nederland	High
VisualEditor's effect on newly registered editors/June 2013 study	2013-06	2013-07	Quantitative	New Editors	Aaron Halfaker	Low
Gender micro-survey	2013-06	2013-07	Quantitative	Gender	Howie Fung	Low
WikiProjects as virtual Teams	2013-01	2013-07	Quantitative	Social dynamics	Jonathan Morgan	High
Notifications	2013-05	2013-05	Quantitative	Impact of Technical Feature	Aaron Halfaker	Medium
Anonymity and conformity over the net	2012-01	2013-03	Quantitative	Effects of anonymity	Aaron Halfaker	Medium
Post-registration editor survey	2012-11	2012-12	Quantitative	Editor motivation	Steven Walling	Medium
Wikipedia Editors Survey 2012	2012-06	2012-11	Both	Community Survey	Tilman Bayer	High
Wikipedia Editor Satisfaction Survey	2009-09	2012-10	Both	Editor satisfaction	Denis Barthel; Manuel Merz	High
MoodBar/Email confirmation	2012-07	2012-08	Quantitative	Communication	Dario Taraborelli	Low
Editor Lifecycles	2012-06	2012-07	Quantitative	Editor retention	Shilad Sen	High
Master Thesis Cultural differences in motivations to contribute to Wikipedia	2012-05	2012-07	Quantitative	Editor Motivation	Sjarlot Stal; Nick Geurts	Low
Editor milestones	2012-05	2012-07	Quantitative	New Editors	Shilad Sen; Aaron Halfaker	Low
Shallow Entry: A problem-centric approach to new editor orientation	2012-04	2012-07	Quantitative	Editor Motivation	Maryana Pinchuk	Medium
[1]	2012-04	2012-06	Quantitative	Editor Motivation	Aaron Halfaker	High
Motivations to Contribute to Wikipedia	2012-03	2012-06	Unclear	Editor Motivation	Audrey Abeyta	Low
Necromancy	2012-04	2012-05	Quantitative	Editor Retention	Steven Walling	Medium
Wikipedia Editors Survey 2011 November	2011-04	2011-11	Quantitative	Community Survey	Barry Newstead	High
Women and Wikimedia Survey 2011	2011-05	2011-10	Qualitative	Gender gap	Sarah Stierch	High
Summer of research 2011	N/A	2011-08	Both	mostly New editors, but also Editor retention		Medium
Wikipedia Editors Survey 2011 April	N/A	2011-04	Quantitative	Community Survey	Mani Pande	High
Expert participation survey	2010-12	2011-02	Quantitative	Expert participation	Dario Taraborelli	High
Hebrew Wikipedia satisfaction survey	2007	2007-07	Qualitative	Community Survey	Wikimedia HE	High
100 Questions for Wikipedians	2005	2005-02	Qualitative	Community Survey	Aphaia	Medium
Teahouse group dynamics	2017-05	Ongoing	Quantitative	Impact of harassment	Yiqing Hua; Dario Taraborelli; Leila Zia; Lucas Dixon; Nithum Thain; Cristian Danescu-Niculescu-Mizil	Medium
Detox	2017-01	Ongoing	Quantitative	New Editors	Ellery Wulczyn	High
Study of harassment and its impact	2016-05	Ongoing	Qualitative	Social dynamics	Jonathan Morgan	Medium
Good Faith Newcomer Prediction	2016-05	Ongoing	Qualitative	Social Dynamics	Anna Filippova, et al.	High
Understanding the Dynamics of Hackathons for Science	2016-04	Ongoing	Qualitative	Time commitment and workflow	Kevin Schiroo	Medium
Measuring editor time commitment and workflow	2016-01	Ongoing	Quantitative	Toxic language	Ellery Wulczyn	Medium
Beyond the Gender Gap: Understanding Women's Participation in Wikipedia	2015-10	Ongoing	Qualitative	Gender gap	Danielle McDonald Corple	Low
Online harassment resource guide	2015-07	Ongoing	Qualitative	harassment	J. Nathan Matias, et al.	Medium
Editor Behaviour Analysis & Graphs	2015-06	Ongoing	Quantitative	Editor statistics	Jeph Paul	High
Wikipedia Equality Sweden	2014-10	Ongoing	Quantitative	New Users	Aaron Halfaker	Low
HHVM newcomer engagement experiment	2014-08	Ongoing	Qualitative	Gendergap	Björn Helgeson; Jonathan Morgan	Medium
The sudden decline of Italian Wikipedia	2014-05	Ongoing	Quantitative	Editor Activity Decline	Nemo with Aaron Halfaker	Medium
Dynamics of Online Interactions and Behavior	2012-01	Ongoing	Both	Roles and Functions	Ofer Arazy; Dario Taraborelli	High
Wikipedian and Internet addiction	2010-09	Ongoing	Both	Social dynamics	Dario Taraborelli	Medium
Measuring editor labor hours	2016-04	N/A	Qualitative	Addiction?	OppidumNissenae; Geoide; Alexmar983	Low
Roles and Functions within Online Production Communities	2015-08	N/A	Quantitative	Editor activity	Aaron Halfaker	Low

Aandachtsgebieden

We zijn dit project begonnen door te kijken naar wat al is verzameld en wat niet is verzamelt en door te bepalen aan welke gegevenspunten en gebieden voor dit project prioriteit moet worden gegeven. Dit zal zowel het verzamelen van nieuwe gegevens als het anders gebruiken van bestaande gegevens omvatten (bijv. het verstrekken van nieuwe ratio's en vergelijkingen van al verzamelde informatie). Sommige van de brede gebieden die we hebben bekeken om in de "Metrics Kit" op te nemen:

• Demografische gegevens
• Statistieken beheerders
• Statistieken gebruikers
• Nieuwe accounts
• Activiteitsniveaus
• Retentiepercentages
• Prevalentie van vandalisme, trollen, intimidatie
• Misbruikfilter, vandalisme meldingen
• Culturele, etnische en genderbarrières
• Bias van de inhoud
• Taalbarrières
• Toegang tot hulpmiddelen
• Internettoegang
• Toegang naar bibliotheken en kennisbronnen

Toekomstplannen: Meer en eenvoudigere kwalitatieve enquêtes

Gebaseerd op de analyse van het initiatief "Community Health" van de beheerder van de Engelse Wikipedia. In dit project werden gebruikers ondervraagd over hun ervaringen met een belangrijk bord. We willen betere enquêtehulp bieden - om gemeenschappen te helpen zichzelf te onderzoeken door middel van gemakkelijk aanpasbare enquêteformulieren, goede technieken om respondenten te krijgen en de resultaten te analyseren.