����������������������������������������������������������������������������������������� ��� �

���������������������������������������������������������������������������������

 

Evaluaci�n de eficiencia en software educativo de la Universidad Laica Eloy Alfaro de Manab�

 

Efficiency evaluation in educational software of the Universidad Laica Eloy Alfaro de Manab�

 

Avalia��o de efici�ncia em software educacional da Universidad Laica Eloy Alfaro de Manab�

 

R�mulo Danilo Ar�valo-Hermida ^I

danylo.ah@hotmail.com

https://orcid.org/0000-0001-8350-9723

 

Sergio Fernando Mieles-Bachicoria ^II

sergiomieles19@gmail.com

https://orcid.org/0000-0001-9374-9376

 

Gema Liceth Vera-Paucar ^III

gemyvera9@gmail.com

https://orcid.org/0000-0002-1980-5170

 

 

Correspondencia: danylo.ah@hotmail.com

 

Ciencias t�cnicas y aplicadas

Art�culo de investigaci�n

 

 

*Recibido: 13 de septiembre de 2020 *Aceptado: 09 de octubre de 2020 * Publicado: 25 de noviembre de 2020

 

        I.            Ingeniero en Sistemas e Inform�tica, Magister en Inform�tica Empresarial, Docente Titular de la Universidad Laica Eloy Alfaro de Manab� Extensi�n El Carmen, L�der de Proyecto de Investigaci�n �Desarrollo de software para la gesti�n de procesos�, El Carmen, Ecuador.

     II.            Ingeniero en Sistemas, Magister en Curr�culo, Investigador Independiente, Ecuador.

   III.            Ingeniera en Sistemas, Investigadora independiente, Ecuador. ��

Resumen

La evaluaci�n de la calidad del software es un proceso muy necesario, pero poco aplicado en el contexto local, por lo cual, el presente trabajo tiene como objetivo realizar una valoraci�n de la eficiencia mediante la norma ISO/IEC 25010 del software denominado aula virtual, propiedad de la Universidad Laica Eloy Alfaro de Manab�, dentro del �mbito de la unidad acad�mica Extensi�n El Carmen.� Para el efecto se seleccionaron las caracter�sticas m�s relevantes a criterio de los investigadores y enfocadas a la eficiencia del software, se aplic� una investigaci�n cuantitativa en la cual se tom� en consideraci�n el criterio de dos tipos de usuarios (estudiantes y docentes) a los cuales se les aplic� un instrumento enfocado a medir indicadores de las caracter�sticas seleccionadas. El tama�o muestral investigado fue de 307 usuarios, correspondiendo a 17 docentes y 290 estudiantes, adem�s, se utilizaron 2 herramientas de testeo para medir par�metros t�cnicos. Posteriormente se utiliz� la investigaci�n descriptiva para detallar hallazgos y conclusiones del estudio. Se evaluaron cinco caracter�sticas tomadas de los modelos ISO/IEC acerca de calidad un uso y calidad del producto dirigidas a medir la eficiencia del software en menci�n, las cuales alcanzaron un nivel de puntuaci�n aceptable coincidiendo con la valoraci�n total de eficiencia del software, permitiendo concluir que el aula virtual a pesar de tener ciertas falencias mencionadas por sus usuarios mantiene un grado de eficiencia satisfactorio.

Palabras clave: Calidad de software; usabilidad; evaluaci�n; software de gesti�n.

 

Abstract

The evaluation of the quality of the software is a very necessary process, but it is little applied in the local context, therefore, the present work aims to carry out an evaluation of the efficiency through the ISO / IEC 25010 standard of the software called virtual classroom, property of the Universidad Laica Eloy Alfaro de Manab�, within the scope of the El Carmen Extension academic unit. For this purpose, the most relevant characteristics were selected at the discretion of the researchers and focused on the efficiency of the software, a quantitative investigation was applied in which the criteria of two types of users (students and teachers) were taken into consideration. They applied an instrument focused on measuring indicators of the selected characteristics. The sample size investigated was 307 users, corresponding to 17 teachers and 290 students, in addition, 2 testing tools were used to measure technical parameters. Descriptive research was then used to detail the findings and conclusions of the study. Five characteristics taken from the ISO / IEC models regarding quality, use and quality of the product were evaluated aimed at measuring the efficiency of the software in question, which reached an acceptable level of score coinciding with the total evaluation of software efficiency, allowing to conclude that the virtual classroom, despite having certain shortcomings mentioned by its users, maintains a satisfactory degree of efficiency.

Keywords: Software quality; usability; evaluation; management software.

 

Resumo

A avalia��o da qualidade do software � um processo muito necess�rio, mas pouco aplicado no contexto local, portanto, o presente trabalho visa realizar uma avalia��o da efici�ncia atrav�s da norma ISO / IEC 25010 do software denominado virtual sala de aula, propriedade da Universidad Laica Eloy Alfaro de Manab�, no �mbito da unidade acad�mica Extens�o El Carmen. Para tanto, as caracter�sticas mais relevantes foram selecionadas a crit�rio dos pesquisadores e voltadas para a efici�ncia do software, foi aplicada uma investiga��o quantitativa na qual foram considerados os crit�rios de dois tipos de usu�rios (alunos e professores). Eles aplicaram um instrumento focado na medi��o de indicadores das caracter�sticas selecionadas. O tamanho da amostra investigada foi de 307 usu�rios, correspondendo a 17 professores e 290 alunos, al�m disso, foram utilizadas 2 ferramentas de teste para mensura��o de par�metros t�cnicos. A pesquisa descritiva foi ent�o usada para detalhar as descobertas e conclus�es do estudo. Foram avaliadas cinco caracter�sticas retiradas dos modelos ISO / IEC quanto � qualidade, uso e qualidade do produto com o objetivo de medir a efici�ncia do software em quest�o, que alcan�ou um n�vel de pontua��o aceit�vel coincidindo com a avalia��o total da efici�ncia do software, permitindo concluir que a sala de aula virtual, apesar de ter algumas defici�ncias apontadas por seus usu�rios, mant�m um grau de efici�ncia satisfat�rio.

Palavras-chave: Qualidade de software; usabilidade; avalia��o; software de gest�o.

 

Introducci�n

En la actualidad el software es una parte fundamental de la mayor�a de las actividades que realiza el ser humano, su uso va desde tareas cotidianas como la comunicaci�n, el entretenimiento, la educaci�n y dem�s, pero tambi�n forma parte de actividades productivas, de comercio, industriales, agr�colas, entre otras. De acuerdo con Vaca & J�come (2018) el software puede realizar una gran diversidad de funciones que aportan al cumplimiento de los objetivos de las organizaciones que lo usan, permitiendo el acceso permanente a la informaci�n y facilitando la toma de decisiones, lo que influye de manera directa en la estabilidad de cada instituci�n.

Debido a su importancia el software actualmente se produce de forma masiva, sin embargo, esos desarrollos no siempre van de la mano con la aplicaci�n de metodolog�as y t�cnicas que garanticen un producto de calidad, por lo cual, seg�n Mascheroni, Greini, Petris & Dapozo (2012) mencionan que es de suma importancia que el software cumpla con par�metros m�nimos de calidad que satisfagan los requerimientos de los usuarios.

La calidad de software seg�n la IEEE (1990) corresponde al grado de cumplimiento de caracter�sticas, especificaciones, requerimientos o expectaciones que tiene un usuario con respecto a un sistema o componente de un sistema inform�tico. Sin embargo, hay que establecer diferencias entre el producto software y su proceso de desarrollo, debido a que ambos elementos deben cumplir con est�ndares de calidad que tienen dependencia, pero cumplen distintas especificaciones.

El enfoque de este trabajo se dirige hacia la evaluaci�n de calidad de un producto de software que se define por el nivel de satisfacci�n que tienen los usuarios con relaci�n al uso del sistema, con respecto a esto la ISO/IEC (2011) establece que �Est� determinada por la calidad del entorno de software, hardware y operativo, y las caracter�sticas de los usuarios, las tareas y el entorno social. Todos estos factores contribuyen a la calidad en el uso del sistema.� (p. 3).

El Ecuador no ha estado exento de la necesidad de implementar tecnolog�a para mejorar la gesti�n de procesos en las instituciones tanto p�blicas como privadas, esto lo demuestran datos del INEC (2019) donde se destaca que el 59,9% de sus habitantes hace uso de un computador u otro dispositivo tecnol�gico como celulares, tabletas, entre otros, los cuales obligatoriamente incluyen software para su funcionamiento.

Las instituciones de educaci�n superior a nivel mundial como en el Ecuador tienen la necesidad de gestionar un sinn�mero de procesos dentro del �mbito administrativo, educativo y todo lo que conlleva la gesti�n de la educaci�n, siendo pr�cticamente obligatorio el uso de diversos tipos de softwares que permitan optimizar los recursos, reducir tiempos y mantener comunicados a sus miembros desde cualquier lugar del pa�s, por ende, se debe realizar una valoraci�n constante de la eficiencia que brindan esos softwares con el fin de mantener una gesti�n de procesos de calidad. Los entornos virtuales de aprendizaje (EVA) son de los m�s utilizados para la gesti�n de la informaci�n educativa, as� como para el proceso de ense�anza-aprendizaje, pero a pesar del resultado positivo que se ha demostrado en el uso de los EVA se deben mejorar la calidad de estas herramientas para que los usuarios no tengan dificultades o impedimentos frente al proceso educativo, siendo esencial el an�lisis de satisfacci�n de estudiantes y docentes. (Blanco Martinez & Anta Fern�ndez, 2016)

La Universidad Laica Eloy Alfaro de Manab� (ULEAM) a lo largo de su existencia ha ido implementando de forma paulatina diversos softwares que han dado soporte a procesos administrativos y acad�micos, es as� como aproximadamente desde el a�o 2015 se implement� un entorno virtual de aprendizaje (EVA) el cual es utilizado hasta la actualidad, este EVA ha tenido una serie de actualizaciones que han a�adido nuevas funcionalidades, as� como permitido mejorar las ya existentes.

Los nuevos requerimientos que se implementan en un software muchas veces ocasionan que existan deficiencias de calidad de este, sobre todo en una caracter�stica que la ISO/IEC (2011) denomina eficiencia en el desempe�o, la cual incluye tres sub-caracter�sticas que son el comportamiento en el tiempo, la utilizaci�n de recursos y la capacidad. La valoraci�n de esta caracter�stica de la calidad de un producto software, en este caso del aula virtual de la ULEAM, es el objetivo principal del presente estudio.

 

Metodolog�a

El estudio se realiza como parte de una actividad del proyecto de investigaci�n denominado �Desarrollo de software para la gesti�n de procesos� perteneciente a la Carrera de Ingenier�a en Sistemas de la ULEAM Extensi�n El Carmen, que tiene una vigencia para el periodo 2018 - 2020.

Tipo de investigaci�n: La presente investigaci�n es de tipo cuantitativa, debido a que se fundamenta en una valoraci�n num�rica del software, tanto desde la perspectiva de los usuarios, as� como una valoraci�n t�cnica de las caracter�sticas del producto con base en los resultados brindados por dos herramientas de testeo (WebPagetest y MatchMetrics), de las cuales se tomaron en cuenta �nicamente los par�metros determinados por la norma ISO/IEC 25010, todo esto como un estudio de campo. Posteriormente, se utiliz� la investigaci�n descriptiva para detallar los hallazgos (potencialidades y deficiencias) del software y las conclusiones del estudio.

Producto software: El trabajo estuvo enfocado en la evaluaci�n de calidad del software acad�mico denominado aula virtual que pertenece a la ULEAM, el cual brinda funcionalidades generales dentro del �mbito de ense�anza-aprendizaje que se detallan a continuaci�n.

Desde la perspectiva de usuario docente:

�         Subir y compartir archivos

�         Programar tareas.

�         Asignar calificaciones a tareas.

�         Subir calificaciones.

�         Configurar componentes de evaluaci�n.

�         Crear foros.

�         Ingresar asistencias.

�         Obtener reportes de asistencia, calificaciones, estudiantes aprobados y reprobados, entre otros.

Desde la perspectiva de usuario estudiante:

�         Matricularse a las asignaturas.

�         Retirarse de una asignatura.

�         Descargar archivos.

�         Cargar tareas.

�         Ver calificaciones.

�         Contestar foros.

�         Obtener reportes como record acad�mico, notas.

Norma de evaluaci�n: Como base para determinar una valoraci�n de la calidad del aula virtual de la ULEAM se utiliz� a la norma ISO/IEC 25010, la cual detalla las caracter�sticas, subcaracter�sticas y par�metros a considerar en la evaluaci�n de sistemas inform�ticos y cualquier producto software. Adem�s, se utilizaron par�metros establecidos en la norma ISO/IEC 25040.

Herramientas de testeo: Se utilizaron dos herramientas para verificar de forma t�cnica el desempe�o que posee el aula virtual, estas fueron WebPagetest y MatchMetrics las cuales fueron seleccionadas con base en las rese�as y valoraciones de diferentes sitios web dedicados a evaluar herramientas de testeo y principalmente porque permiten hacer una valoraci�n del software desde la perspectiva del usuario, sin necesidad de ser el due�o del producto.

WebPagetest como lo mencionan en su sitio web https://www.webpagetest.org/ es una herramienta de c�digo abierto desarrollada por AOL que permite testear p�ginas web, Nor�n (2019)� en su sitio web pixelatumente.com menciona que a pesar de tener una apariencia antigua es� considerada una de las mejores debido a la gran cantidad de funciones que ofrece tanto a los desarrolladores como a los usuarios.

MachMetrics a pesar de ser una herramienta de pago, permite realizar pruebas de rendimiento gratuitas a trav�s de su direcci�n web https://www.machmetrics.com/, seg�n la empresa Capterra cuyo sitio web es capterra.es menciona qu� esta herramienta es confiable y permite conocer el rendimiento de los sitios web de forma eficaz.

Poblaci�n y muestra: El estudio tom� en cuenta a una poblaci�n que consisti� en estudiantes de las carreras de Ingenier�a Agropecuaria, Ingenier�a en Sistemas, Ingenier�a en Tecnolog�as de la informaci�n, Licenciatura en Educaci�n B�sica y Licenciatura en Contabilidad y Auditor�a (1438) y sus docentes (80) que formaron parte de la Universidad Laica Eloy Alfaro de Manab� Extensi�n El Carmen durante el periodo acad�mico 2019-2 (Desde octubre 2019 hasta febrero 2020) y que diariamente hac�an uso del software en menci�n, a la cual se aplic� un muestreo probabil�stico considerando un 5% de margen de error y 95% de nivel de confianza, obteniendo un tama�o de muestra de 307 usuarios, los cuales fueron distribuidos en dos estratos (17 docentes y 290 estudiantes) debido a que cada grupo utiliza funcionalidades diferentes dentro de la plataforma de gesti�n educativa.

Instrumentos de investigaci�n: La recolecci�n de datos acerca de la opini�n de los usuarios con respecto al aula virtual se realiz� mediante dos encuestas online utilizando Google Forms (una para cada estrato), cada una de ellas con 16 preguntas enfocadas principalmente a evaluar caracter�sticas de usabilidad, nivel de dominio, problemas frecuentes, eficiencia, eficacia y valoraci�n general del software.

 

Resultados

A continuaci�n, se detallan los procedimientos y resultados m�s relevantes que permitieron verificar el cumplimiento del objetivo planteado:

Planificaci�n: Debido a resultados preliminares basados en las encuestas aplicadas a los usuarios del aula virtual donde se determin� que las principales falencias que estos enfrentaban al hacer uso de esta plataforma eran en torno a las funcionalidades del software, se enfoc� este an�lisis en la calidad en uso (3 de 5 caracter�sticas) y calidad del producto (1 de 8 caracter�sticas) basado en la norma ISO/IEC 25010. Se descartan las dem�s caracter�sticas de acuerdo con consideraciones de los investigadores ya que no se enfocan en determinar la eficiencia del software y otras debido a que no se pueden aplicar desde el contexto de los usuarios del sistema.

Dise�o: De acuerdo con el criterio de los investigadores se elabor� una tabla en la cual se describen las caracter�sticas con su ponderaci�n respectiva y de la misma forma para las sub-caracter�sticas. En las sub-caracter�sticas pertenecientes a �Eficiencia en el desempe�o� se asign� una mayor ponderaci�n al �comportamiento en el tiempo�, debido a que los tiempos de espera del usuario influyen en gran manera al criterio que tienen acerca de la eficiencia de la plataforma.

 

Tabla 1: Caracter�sticas de calidad seleccionadas y su ponderaci�n.

Fuente: Norma ISO/IEC25010.

 

Para establecer la valoraci�n final de la eficiencia del aula virtual se tom� en consideraci�n los grados de satisfacci�n y niveles de puntuaci�n que establece la ISO/IEC 25040, a los cuales se les asign� una escala de acuerdo con la siguiente tabla:

 

Tabla 2: Grado de satisfacci�n y nivel de puntuaci�n.

Fuente: Norma ISO/IEC25040.

 

Aplicaci�n de la evaluaci�n

La calidad en uso del producto se valor� de acuerdo con un cuestionario aplicado a estudiantes y docentes que utilizan constantemente el aula virtual y se obtuvieron los resultados que se muestran en la siguiente tabla, d�nde se describen los porcentajes de valoraci�n asignados por cada estrato investigado a cada una de las caracter�sticas y sub-caracter�sticas, luego se calcula el porcentaje ponderado de cada estrato y de acuerdo con la representaci�n muestral, para finalmente establecer la valoraci�n porcentual final de cada caracter�stica.

 

Tabla 3: Resultados de la evaluaci�n de caracter�sticas de calidad en uso.

Caracter�stica	Sub-Caracter�stica	Valoraci�n de docentes sobre el 100%	Valoraci�n de estudiantes sobre el 100%	Docentes (5,54%)	Estudiantes (94,46%)	Valoraci�n total (100%)
Eficacia	No posee	52,94%	60,46%	2,93%	57,11%	60,04%
Eficiencia	No posee	54,90%	55,40%	3,04%	52,33%	55,37%
Satisfacci�n	Utilidad	66,67%	68,39%	4,35%	70,75%	75,10%
	Confianza	82,35%	71,61%
	Confort Placer	86,27%	84,71%

Fuente: Elaboraci�n propia.

 

La calidad del producto se obtuvo con base en la medici�n de la caracter�stica eficiencia en el desempe�o y sus sub-caracter�sticas correspondientes, a trav�s de las herramientas de testeo descritas en la metodolog�a. En la siguiente tabla se puede observar el valor porcentual obtenido por cada sub-caracter�stica, el cual es transformado a su valor ponderado de acuerdo con la valoraci�n asignada en el dise�o de la evaluaci�n, para luego establecer el porcentaje final de esta caracter�stica.

 

Tabla 4: Resultados de la evaluaci�n de caracter�sticas de calidad del producto.

Caracter�stica	Sub-caracter�sticas	% Valoraci�n Obtenida	% Ponderado Obtenido	% Final de caracter�stica
Eficiencia en el desempe�o	Comportamiento en el tiempo	80%	32,00%	80%
	Utilizaci�n de recursos	89%	26,70%
	Capacidad	70%	21,00%

Fuente: Elaboraci�n propia.

 

Una vez obtenidos los porcentajes finales de cada caracter�stica evaluada, se transformaron esos valores de acuerdo con la ponderaci�n establecida previamente, obteniendo una valoraci�n final del software de 66,71.

 

Tabla 5: Caracter�sticas con su porcentaje ponderado y puntuaci�n final.

Fuente: Elaboraci�n propia.

 

Finalmente, ubicando la puntuaci�n obtenida dentro de la escala de nivel de cumplimento y grado de satisfacci�n, se obtiene la valoraci�n final del software denominado aula virtual que se muestra en la siguiente tabla:

 

Tabla 6: Grado de satisfacci�n y nivel de puntuaci�n obtenido por el aula virtual.

Fuente: Elaboraci�n propia.

 

Discusi�n

Las pruebas de calidad del software, especialmente de la eficiencia del producto pueden ser abordadas desde diferentes enfoques (desarrolladores, usuarios, evaluadores, entre otros) y aplicando un sinn�mero de modelos de evaluaci�n gratuitos o de pago, sin embargo, no existe una calidad absoluta, esto coincide con el criterio de varios autores revisados por Mera Paz (2016) quien acota que es insuficiente la importancia e impacto que las organizaciones dan al proceso de pruebas de calidad y recomienda que las pruebas deben ser llevadas a cabo desde la programaci�n entre pares, mediante la experiencia y la valoraci�n de los clientes, que en este caso, es el argumento principal que se tom� para medir la eficiencia del aula virtual.

La selecci�n de la norma ISO/IEC 25010 para evaluar el producto software denominado aula virtual es uno de los modelos m�s completos y eficientes, adem�s permite obtener una certificaci�n internacional si se cumplen eficientemente las m�tricas establecidas, este criterio concuerda con el de Roa, Morales & Gutierrez (2015) quienes mencionan que las normas ISO/IEC de la familia 25000 permiten garantizar la calidad del producto software realizado, favoreciendo al desarrollador y a los usuarios, similar criterio tienen Mera, Miranda & Cuaran (2017) al mencionar que esta norma �enmarca� la� calidad� en� los� productos software,� garantizando� tambi�n� la� articulaci�n� de� los procesos� para� obtener� los� productos,� por� tanto� es� una referencia�� �ptima�� para�� la�� base�� de�� implementar�� un laboratorio de testing� (p. 153). Sin embargo, esta valoraci�n de eficiencia realizada necesitar� de pruebas m�s exhaustivas que podr�an dar un resultado m�s espec�fico y a detalle para establecer medidas a tomar y lograr as� una eficiencia de desempe�o �ptima del aula virtual.

La evaluaci�n de un software �nicamente desde la �ptica del usuario puede ocasionar discrepancias con el departamento t�cnico y de desarrollo, pero son los usuarios quienes deben tener una percepci�n de bienestar al estar en contacto con el sistema, ya que el uso constante del mismo debe brindar satisfacci�n y no frustraci�n, por ende, desde la parte t�cnica de administraci�n y desarrollo se debe buscar siempre el equilibrio de criterios y brindar un alto grado de usabilidad y eficiencia en el software producido para que el cliente est� satisfecho y sienta la necesidad de usarlo como herramienta de ayuda, m�s no por la obligaci�n del entorno.

 

Conclusiones

Que el aula virtual haya obtenido una valoraci�n de eficiencia satisfactoria, con un porcentaje final de 70,01%, permite notar un buen desempe�o de la plataforma a nivel general, sin embargo, se deben considerar ciertas falencias mencionadas por los usuarios y que se expresan a trav�s de las valoraciones asignadas a caracter�sticas como eficacia y eficiencia que no superan el 70% del promedio, y son las m�s bajas de las caracter�sticas evaluadas, las cuales deber�n ser analizadas y emprender acciones de mejora para alcanzar un grado de eficiencia �ptimo.

No se observa una distinci�n considerable entre la valoraci�n asignada al entorno virtual de aprendizaje por parte de los docentes y estudiantes, esto denota que aquellas falencias expresadas por estos usuarios son a nivel general del funcionamiento de la plataforma (eficiencia y eficacia) y no de funcionalidades espec�ficas, por otro lado, la valoraci�n total asignada a la caracter�stica de satisfacci�n muestra una buena actitud y dominio de los usuarios para el desarrollo de actividades dentro del sistema evaluado.

La caracter�stica de eficiencia en el desempe�o obtuvo una alta valoraci�n (80%), basada en resultados y par�metros establecidos por herramientas de testeo muy conocidas en el mercado tecnol�gico, esto demuestra que el aula virtual cumple con par�metros de calidad en ese sentido.

���

 

Referencias

1.      Blanco Martinez, A., & Anta Fern�ndez, P. (2016). La perspectiva de estudiantes en l�nea sobre los entornos virtuales de aprendizaje en la educaci�n superior. INNOEDUCA, 2(2).

2.      Capterra. (s.f.). capterra.es. Obtenido de https://www.capterra.es/software/167909/machmetrics

3.      IEEE. (1990). Standard Glossary of Software Engineering Terminology. IEEE 610-1990.

4.      INEC. (2019). Ecuadorencifras.gob.ec. Obtenido de https://www.ecuadorencifras.gob.ec/documentos/web-inec/Estadisticas_Sociales/TIC/2019/201912_Principales_resultados_Multiproposito_TIC.pdf

5.      ISO/IEC. (2011). Norma ISO/IEC 25010.

6.      ISO/IEC. (2011). Norma ISO/IEC 25040.

7.      Mascheroni, M. A., Greiner, C., Petris, R., & Dapozo, G. (2012). Calidad de software e ingenier�a de usabilidad. SEDICI. Obtenido de http://sedici.unlp.edu.ar/handle/10915/19202

8.      Mera Paz, J., Miranda G�mez, M., & Cuaran Rosas, S. (2017). An�lisis sistem�tico de informaci�n de la Norma ISO 25010 como base para la implementaci�n en un laboratorio de Testing de software en la Universidad Cooperativa de Colombia Sede Popay�n. 4to Congreso Internacional AmITIC 2017. Obtenido de https://revistas.utp.ac.pa/index.php/memoutp/article/view/1483

9.      Mera, J. A. (2016). An�lisis del proceso de pruebas de calidad de software. Ingener�a Solidaria, 12(20). doi:https://doi.org/10.16925/in.v12i20.1482

10.  Nor�n, A. (2019). pixelatumente.com. Obtenido de https://pixelatumente.com/

11.  Roa Molina, P., Morales, C., & Gutierrez, P. (2015). Norma ISO/IEC 25000. Tecnolog�a, Investigaci�n y Academia, 3(2). Obtenido de https://revistas.udistrital.edu.co/index.php/tia/article/view/8373/11349

12.  Vaca, T., & J�come, A. (2018). Calidad de software del m�dulo de talento humano del sistema inform�tico de la Universidad T�cnica del Norte bajo la norma ISO/IEC 25000. ResearchGate. Obtenido de https://www.researchgate.net/profile/Tulia_Vaca/publication/325022337_Calidad_de_software_del_modulo_de_talento_humano_del_sistema_informatico_de_la_Universidad_Tecnica_del_Norte_bajo_la_norma_ISOIEC_25000/links/5af1e333aca272bf4256311d/Calidad-de-softwar

�

 

 

 

 

 

 

 

 

 

�2020 por los autores. Este art�culo es de acceso abierto y distribuido seg�n los t�rminos y condiciones de la licencia Creative Commons Atribuci�n-NoComercial-CompartirIgual 4.0 Internacional (CC BY-NC-SA 4.0) (https://creativecommons.org/licenses/by-nc-sa/4.0/).