A Method for Assessing the Accessibility and Usability in Mobile Applications

Keywords: Access to information, software quality, mobile app evaluation, usability evaluation of web and mobile applications

Abstract

Internet is the largest means of disseminating information and the largest service delivery channel currently available. As the number of Internet users continues to grow, care should be taken to ensure that the quality characteristics of web and mobile applications include those that ensure access to information for the entire population, including people with special needs. In this regard, it is necessary to ensure compliance with the accessibility standards proposed by the World Wide Web Consortium (W3C) through the Web Content Accessibility Guidelines (WCAG) and the Mobile Web Best Practices (MWBP). Different authors claim that, even with knowledge of the accessibility gaps of existing applications, developers present problems in their evaluation, as well as in the evaluation of usability. While there is a guide to such an assessment, it is not complete and the elements defining the assessment are still at an early stage. In this sense, it is important to define a method that allows to evaluate not only the usability but also the accessibility of web and mobile applications, especially considering those users who have special needs. Based on the above, this paper proposes a method for the evaluation of usability and accessibility for mobile applications, developed in 6 iterative phases, the initial phases of the method seek to ensure compliance with the desired levels of accessibility according to the W3C, then the fulfillment of usability is sought by applying the remaining phases of the method, obtaining as results improvements in each iteration, when using the method to evaluate the "Dictionary of Neologism" application, there is evidence of greater detection of failures in the implementation of the W3C standard and improvements in responses obtained through satisfaction surveys.

Author Biographies

Andrés Paniagua L.*, Instituto Tecnológico Metropolitano, Colombia

Estudiante de Ingeniería de Sistemas, Facultad de Ingenierías,
Instituto Tecnológico Metropolitano, Medellín-Colombia, andrespaniagua250958@correo.itm.edu.co

Diana Bedoya R., Instituto Tecnológico Metropolitano, Colombia

MSc. en Ingeniería, Facultad de Ingenierías, Instituto Tecnológico Metropolitano, Medellín-Colombia, dianabedoya@itm.edu.co

Carlos Mera, Instituto Tecnológico Metropolitano, Colombia

PhD. en Ingeniería de Sistemas e Informática, Facultad de Ingenierías, Instituto Tecnológico Metropolitano, Medellín-Colombia, carlosmera@itm.edu.co

References

S. Kemp “Digital in 2018: World’s internet users pass the 4 billion mark - We Are Social”, Simon Kemp, 2018. [En Línea] Disponible en: https://wearesocial.com/blog/2018/01/global-digital-report-2018

ISO 9241-11:2018 Ergonomics of human-system interaction-Part 11: Usability: Definitions and concepts. 2018. [En Línea] Disponible en: https://www.iso.org/obp/ui/#iso:std:iso:9241:-11:ed-2:v1:en

MPIu+a “Modelo de Proceso de la Ingeniería de la usabilidad y de la accesibilidad, Usabilidad”, 2018. [En Línea]. Disponible en: http://webcache.googleusercontent.com/search?q=cache:dgv4bBX9YGAJ:lsi.ugr.es/~mgea/workshops/coline02/Articulos/toni.pdf+&cd=4&hl=es-419&ct=clnk&gl=co

E. Fernández-Díaz, M. C. Jambrino Maldonado, P. P. Iglesias Sánchez. “Accesibilidad Web. La nueva era de las WCAG 2.1, la transición a las futuras WCAG 3.0.” GECONTEC: Revista Internacional De Gestión Del Conocimiento Y La Tecnología, vol. 7, no. 2, pp. 43-65, May. 2019 [En línea]. Disponible en: https://www.upo.es/revistas/index.php/gecontec/article/view/4069/3385

W3C, “Accessibility, 2018. [En línea]. Disponible en: https://www.w3.org/standards/webdesign/accessibility

J. Aguado Delgado, F. J. Estrada Martínez “Guía de accesibilidad de aplicaciones móviles (APPS)”, Madrid: Ministerio de Hacienda y Fundación Publica, Secretaría General Técnica, Subdirección General de Información, Documentación y Publicaciones Centro de Publicaciones, 2017. Disponible en: https://administracionelectronica.gob.es/pae_Home/pae_Estrategias/pae_Accesibilidad/pae_documentacion/pae_eInclusion_Accesibilidad_de_apps.html

D. Pérez Oliveros, M. I. Vidal, G. E. Chanchí, “Identificación de problemas de accesibilidad en juegos serios”. Revista Colombiana de Computación, vol. 19, no. 2, pp. 24-36, Dic. 2018. https://doi.org/10.29375/25392115.3440

Ntc5854.accesibilidadweb.co “Introducción a la norma NTC 5854”, 2017. [En línea]. Disponible en: http://www.libano-tolima.gov.co/Transparencia/PublishingImages/Paginas/Modelo-Integrado-de-Planeacion-y-Gestion-/DOCUMENTO DE CONSULTA- NORMA NTC 5854.pdf

H. F Alarcón, A. M. Hurtado, C. Pardo, C. Collazos y F. J. Pino, “Integración de Técnicas de Usabilidad y Accesibilidad en el Proceso de Desarrollo de Software de las MiPyMEs”, Rev. Av. en Sist. e Informática, vol. 4, no. 3, pp. 159-166, Dec. 2007. Disponible en: https://revistas.unal.edu.co/index.php/avances/article/view/9934/10466.

T. Hansen, “El nuevo mundo laboral: cómo la tecnología móvil está transformando incluso la forma en que las PYMES hacen negocios, 2013. [En Línea]. Disponible en: https://news.microsoft.com/es-xl/el-nuevo-mundo-laboral-como-la-tecnologia-movil-esta-transformando-incluso-la-forma-en-que-las-pymes-hacen-negocios/

J. Jiménez Pernett, J. F. García Gutiérrez, and C. Bermúdez Tamayo, “Accesibilidad de sitios web sobre salud para mayores,” Rev. Esp. Geriatr. Gerontol., vol. 44, no. 6, pp. 342–348, Nov. 2009. https://doi.org/10.1016/j.regg.2009.07.001

W. Erickson, S. Trerise, C. Lee, S. VanLooy, S. Knowlton, y S. Bruyère, “The Accessibility and Usability of College Websites: Is your Website Presenting Barriers to Potential Students?,” Community Coll. J. Res. Pract., vol. 37, no. 11, pp. 864–876, Sep. 2013. https://doi.org/10.1080/10668926.2010.484772

Organización Mundial de la salud OMS, “Discapacidad y salud”, Who.int, 2018. [En línea]. Disponible en: https://www.who.int/es/news-room/fact-sheets/detail/disability-and-health

D. Zhang and B. Adipat, “Challenges, Methodologies, and Issues in the Usability Testing of Mobile Applications,” Int. J. Hum. Comput. Interact., vol. 18, no. 3, pp. 293–308, Nov. 2005. https://doi.org/10.1207/s15327590ijhc1803_3

E. Serrano Mascaraque, “Accesibilidad vs usabilidad web: evaluación y correlación”, Investig. Bibl. Arch. Bibl. e Inf., vol. 23, no. 48, pp. 61-103, Aug. 2009. https://doi.org/10.22201/iibi.0187358xp.2009.48.16970

A. C. Alarcón-Aldana, E. L. Díaz, and M. Callejas-Cuervo, “Guía para la evaluación de la Usabilidad en los Entornos Virtuales de Aprendizaje (EVA),” Inf. tecnológica, vol. 25, no. 3, pp. 135–144, Feb. 2014. https://doi.org/10.4067/s0718-07642014000300016

A. Fernández, E. Insfran y S. Abrahão, "Evaluación de Usabilidad para Aplicaciones Web", en XXXVI Conferencia Latinoamericana de Informática (CLEI 2010, Asunción, 2010. Disponible en: https://www.researchgate.net/profile/Adrian_Fernandez6/publication/235977400_Evaluacion_de_Usabilidad_para_Aplicaciones_Web/links/00b7d5166d42e27336000000.pdf

L. P. Cancio y M. Moráguez Bergues, “Usabilidad de los sitios Web, los métodos y las técnicas para la evaluación,” Rev. Cuba. Inf. en Ciencias la Salud, vol. 24, no. 2, pp. 176–194. Disponible en: http://scielo.sld.cu/pdf/ics/v24n2/ics07213.pdf

M. Medeiros Eler, J. M. Rojas, Y. Ge, y G. Fraser, “Automated Accessibility Testing of Mobile Apps,” in 2018 IEEE 11th International Conference on Software Testing, Verification and Validation (ICST), Vasteras, 2018, pp. 116–126. https://doi.org/10.1109/icst.2018.00021

R. Bandeira, R. Lopes y L. Carriço, "Towards mobile Web accessibility evaluation", 2019. [En Línea]. Disponible en: https://www.researchgate.net/profile/Luis_Carrico/publication/228576479_Towards_mobile_Web_accessibility_evaluation/links/09e4150785be2dc220000000/Towards-mobile-Web-accessibility-evaluation.pdf

C. S. Lanyi, N. Czank, and A. Sik, “Testing the accessibility of websites,” Int. J. Knowl. Web Intell., vol. 2, no. 1, p. 87, Feb. 2011. https://doi.org/10.1504/ijkwi.2011.038630

W3C, "Mobile Web Best Practices 1.0", W3.org, 2008. [En Línea]. Disponible en: https://www.w3.org/TR/mobile-bp/

J. Hilera, H. Amado, D. Martínez, J. Viera y L. Pestana, "Accesibilidad web: estudio de un caso con evaluación automática y evaluación de usuarios", en Actas del VI Congreso Internacional sobre Aplicación de Tecnologías de la Información y Comunicaciones Avanzadas (ATICA 2014), Alcalá, 2014. Disponible en: http://www.esvial.org/wp-content/files/ATICA2014pp149-156.pdf

D. Pérez Oliveros, G. Chanchi y M. Vidal, "Propuesta de un test heurístico de accesibilidad para sitios web basados en la norma NTC 5854", Rev. Ibérica Sist. e Tecnol. Informação, no. E-17, pp. 170-182, Jan. 2019. Disponible en: https://search.proquest.com/openview/e32cc8564adf1fa5b818ad33669a0694/1?pq-origsite=gscholar&cbl=1006393

M. Billi et al., “A unified methodology for the evaluation of accessibility and usability of mobile applications,” Univers. Access Inf. Soc., vol. 9, no. 4, pp. 337–356, Nov. 2010. https://doi.org/10.1007/s10209-009-0180-1

D. Woo y J. Mori, "Accessibility: A Tool for Usability Evaluation", Lecture Notes in Computer Science, vol. 3101, pp. 531-539, 2004. https://doi.org/10.1007/978-3-540-27795-8_53

E. D. Murphy, S. Ciochetto, K. T. Ashenfelter, L. A. Malakhoff, D. Coon, and N. Smith "2005 Census Internet Prototype Applications: Usability and Accessibility Testing", UserWorks Inc, Nov. 2013. Disponible en: https://www.census.gov/library/working-papers/2013/adrm/ssm2013-22.html

H. Petrie and O. Kheir, “The relationship between accessibility and usability of websites,” in Proceedings of the SIGCHI Conference on Human Factors in Computing Systems - CHI ’07, 2007, San Jose California, 2007. pp. 397–406. https://doi.org/10.1145/1240624.1240688

G. Brajnik, "Web Accessibility Testing: When the Method Is the Culprit", Lecture Notes in Computer Science, vol. 4061, pp. 156-163, 2006. https://doi.org/10.1007/11788713_24

N. Bevan, H. Petrie y N. Claridge, "Improving Usability and Accessibility", en Proceedings of IST Africa’07, 2007. Disponible en: https://pdfs.semanticscholar.org/d3fb/9ff751f71b883ca653776ce30707e5b0bab9.pdf

D. A. Albornoz, S. A. Moncayo, S. Ruano-Hoyos, G. E. Chanchí-Golondrino, and K. Márceles-Villalba, “Sistema software para la ejecución de pruebas de usabilidad bajo el enfoque de mouse tracking,” TecnoLógicas, vol. 22, pp. 19–31, Dec. 2019. vol. 22, pp. 39-51. Nov. 2019. https://doi.org/10.22430/22565337.1511

J. Nielsen, "Usability 101: Introduction to Usability", Nielsen Norman Group, 2012. [En Línea]. Disponible en: https://www.nngroup.com/articles/usability-101-introduction-to-usability/

C. A. Yanquén y J. E. Otálora Luna, "Medición de la usabilidad en el desarrollo de aplicaciones educativas móviles", Rev. Virtual Univ. Católica del Norte., no. 47, pp. 128-140, Feb. 2016. Disponible en: https://www.redalyc.org/pdf/1942/194244221009.pdf

How to Cite
[1]
A. Paniagua L., D. . Bedoya R., and C. . Mera, “A Method for Assessing the Accessibility and Usability in Mobile Applications”, TecnoL., vol. 23, no. 48, pp. 99–117, May 2020.

Downloads

Download data is not yet available.
Published
2020-05-15
Section
Research Papers

Altmetric

Some similar items: