Professional Documents
Culture Documents
INTRODUCCIN
EVALUACIN DE SOFTWARE
Pgina 1
EVALUACIN DE SOFTWARE
Pgina 2
EVALUACIN DE SOFTWARE
Pgina 3
EVALUACIN DE SOFTWARE
Pgina 4
Nivel 2: Subcaractersticas
EVALUACIN DE SOFTWARE
Pgina 5
Para armar el modelo lo primero que hacemos es establecer este nivel que lo
componen los atributos del producto, para ello es aconsejable listar todos los
atributos que debe reunir el software ideal que para el modelo constituyen las
subcaractersticas, luego de validarlas con el cliente y obtener su aceptacin
procedemos a incluirlas en nuestra matriz del modelo de calidad de software
bajo la denominacin de subcaractersticas
Nivel 3: Mtricas
Para cada subcaracterstica establecemos las frmulas o medidas que usaremos para
poder llegar a determinar el grado de cumplimiento de las subcaractersticas.
Nivel 4: Indicadores
Aplicada las frmulas llegamos a calcular el nmero resultante obtenido que puede ser
un nmero, un porcentaje, un numerador y un denominador, en fin la medida en la cual
las subcaractersticas se cumplan
Para documentar cualquier anexo o papel de trabajo que describa el modelo de
calidad establecido se usarn los siguientes cdigos asignados a caractersticas y
subcaractersticas:
1. Se usarn las dos primeras letras para referenciar a la caracterstica
2. Se usarn las tres primeras letras para referenciar a la subcaracterstica
3. Se usarn las tres primeras letras para referenciar a categoras dentro de la
subcaracterstica
4. Se usar el cdigo anterior ms un nmero secuencial en orden ascendente
para referenciar a cada atributo de una subcaracterstica
5. Se usar un nmero secuencial en orden ascendente para referenciar a cada
papel de trabajo
6. Cada papel de trabajo deber llevar el cdigo del atributo relacionado adems
del nmero antes indicado en el prrafo anterior
CODIG
O
SUBCARACTERISTICA
FUNCIONALIDA ADE
EVALUACIN DE SOFTWARE
Pgina 6
ADECUACION
FI
US
EF
MA
PO
FIABILIDAD
USABILIDAD
EFICIENCIA
EXA
EXACTITUD
INT
INTEROPERABILIDAD
SEG
SEGURIDAD DE ACCESO
MAD
MADUREZ
TFA
TOLERANCIA A FALLOS
REC
RECUPERABILIDAD
ENT
ENTENDIMIENTO
APR
APRENDIZAJE
OPE
OPERABILIDAD
ATR
ATRACCION
CTI
COMPORTAMIENTO EN EL TIEMPO
URE
UTILIZACION DE RECURSOS
CAPACIDAD DE
MANTENIMIENT
O
CAN
PORTABILIDAD
CAM
CAMBIABILIDAD
EST
ESTABILIDAD
FPR
FACILIDAD DE PRUEBA
ADAP
ADAPTABILIDAD
FIN
FACILIDAD DE INSTALACIN
COE
COEXISTENCIA
REE
REEMPLAZABILIDAD
LME
LOGRAR METAS
EF
EFECTIVIDAD
PR
PRODUCTIVIDA
D
TCT
SE
RET
ETA
SEGURIDAD DE
USO
CCO
AUC
EVALUACIN DE SOFTWARE
Pgina 7
CONTRASEAS
SA
SATISFACCION
ACC
ADMINISTRACION CENTRALIZADA DE
CONTRASEAS
NSU
CMS
COS
AAI
ACCESIBILIDAD A LA INFORMACION
EBR
ENTRENAMIENTO BRINDADO
STE
SOPORTE TECNICO
MIN
MENSAJERIA INSTANTANEA
EVALUACIN DE SOFTWARE
Pgina 8
Nivel 1. Caractersticas
En este nivel se distribuye el puntaje asignado en el nivel 0 acorde a criterios de la
evaluacin. Este puntaje es sugerido por el personal tcnico pero debe estar
debidamente aprobado por el cliente. De las mtricas de producto tres
caractersticas fueron consideradas preponderantes para el caso y stas fueron:
Funcionalidad, usabilidad y fiabilidad a la cual le otorgamos el mayor puntaje de
una calificacin de 80 puntos y los 20 restantes fueron asignadas a las mtricas
de proceso, tal como se observa en las siguientes tablas.
Puntaje
20
USABILIDAD
12
FIABILIDAD
EFICIENCIA
SATISFACCION
CAPACIDAD DE MANTENIMIENTO
PRODUCTIVIDAD
PORTABILIDAD
EFECTIVIDAD
SEGURIDAD DE USO
TOTAL
EVALUACIN DE SOFTWARE
Pgina 9
80
factores
de
calidad
Puntaje
5
5
4
DE
2
DE
LA
2
20
Nivel 2: Subcaractersticas
En este nivel el personal del equipo de evaluadores establece los puntajes de
valoracin repartidos apropiadamente pero que en total deben sumar el valor
aprobado por el cliente en el nivel 1.
Para comprobar el cumplimiento de cada subcaracterstica se aplicaron tcnicas de
investigacin (Entrevista y encuestas), as como pruebas tcnicas, administrativas y/o
de cuestionario de relevamiento tcnico, las cuales tambin tuvieron un peso en esta
evaluacin acorde a criterios
Tabla 4.- Ejemplo de distribucin de Peso de Instrumentos usados en la evaluacin de software
Cuestionario
a usuarios
30
Prueba
Administrativa
Cuestionario
de
Relevamiento
Tcnico
50
20
100
50
EVALUACIN DE SOFTWARE
Pgina 10
Prueba
TOTAL
de caja
negra
50
100
X
50
100
100
100
30
20
100
100
100
Tanto el cuestionario como las pruebas se deben ejecutar en nmero mnimo de tres y
se debe determinar el peso relativo que deben tener en la evaluacin, el cual se puede
resumir de la siguiente forma:
Si en una subcaracterstica se aplican nicamente pruebas administrativas y/o
cuestionario tcnico, estas tienen un puntaje de 50% cada una, lo cual da un 100% de
la evaluacin total, pero este porcentaje debe ser analizado por el equipo evaluador, y
podra variar de acuerdo a cada componente y evaluador, tal como se aprecia en la
tabla anterior, por ejemplo aspectos educacionales pueden pesar ms que criterios
tcnicos en un nivel y eso har que el porcentaje mayor sea asignado al componente
que a nuestro criterio tiene mayor peso que el otro.
Las entrevistas que se deben realizar son de tipo tcnico respecto a las necesidades
tanto educativas como informticas requeridas
Las encuestas deben ser destinadas a los usuarios o posibles usuarios del software
educativo as como podran aplicarse cuestionarios de relevamiento tcnico.
Las encuestas deben usar preguntas con diversas escalas, las cuales pueden ser
escalas dicotmicas o escalas de Likert, puesto que permiten valorar de mejor forma y
con un criterio ms preciso las diversas percepciones de los usuarios o posibles
usuarios.
Las preguntas de escala usadas en el cuestionario plantean el nivel de apreciacin del
encuestado, sobre una base de afirmaciones se pueden codificar con los valores
establecidos, acorde a la escala que se adjunta:
Tabla 5: Escala de Likert de 5 niveles
Total
desacuerdo
Parcial
Desacuerdo
Medio
Parcial
Acuerdo
Total Acuerdo
Las pruebas deben ser ejecutadas sobre los productos software y ante la presencia de
los solicitantes de la evaluacin.
EVALUACIN DE SOFTWARE
Pgina 11
Evaluacin ponderada
El procedimiento planteado es:
Establecer un peso para cada caracterstica evaluada en la prueba. La suma
de los pesos da un 100%.
La sumatoria de la multiplicacin del cumplimiento de la caracterstica con el
respectivo peso.
Peso
Cumplimiento
Caracterstica
1
P1
C1
Donde:
Caracterstica
2
P2
C2
Caracterstica
3
P3
C3
Caracterstica
n
Pn
Cn
Valor
ponderado
EVALUACIN DE SOFTWARE
Pgina 12
Proporcin de cumplimiento
Tabla
7:
cumplimiento
Ejemplo
de
Cumplimiento
Caracterstica 1 1
Caracterstica 2 1
Caracterstica 3 0
.
..
Caracterstica n 1
Proporcin
0,75
Nivel 3: Mtricas
A cada mtrica seleccionada le asignar un puntaje mximo de referencia.
La suma de los puntajes mximos de todas las mtricas deber ser igual a 100
puntos.
Slo se usarn nmeros enteros en la puntuacin de cada caracterstica y
subcaracterstica
Todos los puntajes sern referidos como puntaje establecidos, en todos los niveles.
1.5.- Efectuar medicin
Para la medicin, las caractersticas, subcaractersticas, mtricas e indicadores
seleccionados o establecidos en el modelo deben ser evaluados y por ello se aplica la
EVALUACIN DE SOFTWARE
Pgina 13
ellas
con
la
respectiva
puntuacin
asociada
la
caracterstica,
Tipo de Caractersticas
Subcaractersticas
EVALUACIN DE SOFTWARE
Pgina 14
Mtricas
Indicadores PE PO
Calidad
Caractersticas
Subcaractersticas
Mtricas
Indicadores
PE
PO1
PO2
EVALUACIN DE SOFTWARE
Pgina 15
Instrumentos
Descripcin
Cuestionario
En este anexo que debe estar incluido en el informe se muestra una explicacin de los
instrumentos usados en la evaluacin y el objetivo del uso del mismo, as como debe
precisar que informacin se recogi en ellos.
CONCLUSIONES
Este modelo sirve para evaluar cualquier tipo de software educativo y permite
cuantificar la calidad del producto software a travs del uso de pruebas de caja negra,
pruebas administrativas, cuestionario de relevamiento tcnico, encuestas dirigidas a
usuarios y entrevistas de confirmacin con el personal tcnico o desarrollador de la
herramienta, los mismos que dan informacin de la calidad del producto software, la
cual resume valores cualicuantitavos del modelo de calidad establecido.
REFERENCIAS
Barroso, J., Medel, J. y Valverde, J. (1997). Evaluacin de medios informticos. Una
escala de evaluacin para software educativo. III Congreso Edutec 97.
EVALUACIN DE SOFTWARE
Pgina 16
EVALUACIN DE SOFTWARE
Pgina 17