Automatische Prüfung von Websites auf Barrierefreiheit - Ein Vergleich von Monitoring-Tools
- Behinderte Personen können durch digitale Angebote vorhandene Barrieren ausglei-chen und Zugang zu neuen Bereichen erhalten. Hierbei ist es wichtig, dass möglichst viele Personen gleichberechtigt auf die Angebote ohne neue Barrieren zugreifen. Dies spiegelt sich auch in Gesetzen und Richtlinien für Informationsangebote öffentlicher Stel-len und ab 2025 auch für bestimmte private Unternehmen wider. Für die Überprüfung der Barrierefreiheit von Websites können Automatische Monitoring Systeme (AMS) eingesetzt werden, die Websites immer wieder automatisch nach Barri-eren durchsuchen. Gegenstand dieser Bachelorarbeit ist ein Vergleich von drei AMS: Pa11y, ARC Monitoring und Siteimprove. Die AMS werden zuerst nach qualitativen Gesichtspunkten gegenübergestellt, wie zum Beispiel Preismodell, Hosting, unterstützte Richtlinien oder Einsatz von Gamification. Um quantitative Ergebnisse zu erhalten, verglichen wir die Scanergebnisse einer selbst konstruierten Test-Website, die Verstöße für alle Success Criteria der Web Content Ac-cessibility Guidelines (WCAG) 2.1 enthält. Die Ergebnisse wurden nach den Evaluati-onskriterien Coverage (Abdeckung) und Correctness (Richtigkeit) ausgewertet. Coverage umfasste die Abdeckung der WCAG Success Criteria, Principles, Guidelines und der in der EN 301549 zugeordneten betroffenen Benutzendengruppen. Um die Usability der AMS zu analysieren, wurde eine Heuristische Evaluation nach Nielsens 10 Heuristiken durchgeführt. Pa11y hat von allen AMS die beste Coverage, jedoch die schlechteste Correctness auf-grund vieler Falsch Positive durch unspezifische Meldungen. Eine Berechnung ohne diese verschlechterte die Coverage und verbesserte die Correctness. ARC Monitoring konnte aufgrund der schlechten Usability und mittelmäßigen quantitativen Werte am we-nigsten überzeugen. Siteimprove ist das AMS mit dem größten Funktionsumfang und der besten Usability. Die quantitativen Ergebnisse sind ohne Einberechnung der Notices ähnlich gut wie die von Pa11y. Die Coverage aller drei AMS zusammengefasst zeigt, dass sie eine manuelle Prüfung nicht ersetzen können. Die erzielten Werte zeigen selten eine Abdeckung von mehr als 50 %.
- Disabled persons can compensate existing barriers through digital products and gain access to new spaces. It is important that as many people as possible can access these products equally and without new barriers. This is also represented in legislation and guidelines for information services of public offices and from 2025 on also for certain private companies. Automated Monitoring Systems (AMS) can be used to check the accessibility of web-sites. AMS scan websites automatically and periodically. The main subject matter of this bachelor’s thesis is a comparison of three AMS: Pa11y, ARC Monitoring und Siteim-prove. First, we compared the AMS in qualitative aspects such as pricing, hosting, supported guidelines or usage of gamification. To gain quantitative data we then compared the scan results of a constructed test web-site that includes failures for all Web Content Accessibility Guidelines (WCAG) 2.1 suc-cess criteria. The findings were evaluated by the evaluation criteria coverage and cor-rectness. Coverage includes coverage of WCAG success criteria, principles, guidelines and affected user groups as established in EN 301549. To analyse the AMS‘ usability we conducted a Heuristic Evaluation after Nielsen’s 10 Heuristics. Pa11y has the best coverage of all AMS but the worst correctness due to many false positives from unspecific notices. Without incorporating these the calculated coverage was worse, but the correctness was better. ARC Monitoring could convince the least as its usability was bad and the quantitative outcome was mediocre. Siteimprove has the biggest range of functions and the best usability. The quantitative results are similar to Pa11y’s when accounted without notices. The coverage of all three AMS combined shows that they cannot replace a manual check. Most of the results do not exceed a coverage of 50 %.
Author: | Mona Steininger |
---|---|
URN: | urn:nbn:de:bsz:900-opus4-70363 |
Advisor: | Gottfried Zimmermann, Christoph Strauß |
Document Type: | Bachelor Thesis |
Language: | German |
Year of Completion: | 2023 |
Granting Institution: | Hochschule der Medien, FB 1: Druck und Medien |
Date of final exam: | 2023/08/24 |
Release Date: | 2023/09/25 |
Tag: | Automatische Monitoring Systeme; Bachelorarbeit; Digitale Barrierefreiheit; Usability Evaluation; Vergleich |
Page Number: | 78 |
Institutes: | FB 1: Druck und Medien |
Licence (German): | Creative Commons - CC BY-NC-ND - Namensnennung - Nicht kommerziell - Keine Bearbeitungen 4.0 International |