Índice

1Objetivo del documento

El objetivo de este documento es establecer la forma en que se gestionará el control y revisión de la ejecución de las pruebas con la herramienta Salomé TMF.

2Afecta/Alcanza

Afecta aquellos perfiles del equipo de Test de gvSIG encargados del control de las pruebas de gvSIG.

Alcanza a cualquier proyecto de gvSIG.

3Equivalencia de conceptos entre el procedimiento 2 y SALOME TMF.

4Control de un ciclo de pruebas.

Desde el punto de vista del control, las tareas a realizar son:

1. Seleccionar las pruebas que aseguren la calidad de la versión.

2. Asignar las pruebas seleccionadas a los testeadores.

3. Preparar la ejecución de las pruebas.

4. Notificar el inicio de las pruebas (esta tarea no se realiza a través de SALOME TMF, y por tanto no se define en esta instrucción cómo debe realizarse)

5. Revisar los resultados obtenidos.

4.1Selección de las pruebas.

Como se indica en el Procedimiento 2. Testeo gvSIG, la correcta selección de las pruebas a ejecutar puede garantizar la eficiencia de las pruebas ejecución, para esto se ha establecido una guía para la selección de las pruebas a ejecutar según el ciclo de vida de la aplicación gvSIG (ver apartado Selección de las pruebas del Procedimiento 2. Testeo gvSIG).

La selección de las pruebas, en el contexto de SALOME TMF, se realiza dentro de una campaña, por lo tanto, una campaña es una suite o conjunto de pruebas.

A continuación se definen los pasos para la creación de una suite de pruebas y cómo asociarle pruebas.

4.1.1Creación de una suite de pruebas.

Para la creación de una suite de pruebas deben seguirse los siguientes pasos:

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar. El proyecto debe tener su plan de pruebas.

2. Acceder a la pestaña “Manage campaigns”.

3. Pulsar sobre “Create a campaign”.

4. Introducir en el campo “Campaign name” el nombre de la suite de pruebas y, si se considera necesario una descripción de la misma en el campo “Description”.

5. Pulsar “Validate”.

6. La suite de pruebas queda creada en el proyecto para que se le asocien los casos de prueba que se consideren oportunos.

4.1.2Selección de los casos de prueba que componen una suite.

Existen dos formas de realizar la selección de los casos de prueba que han de componer una suite:

a) Selección directa desde el plan de pruebas

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. Seleccionar una suite de pruebas creada y pulsar “Import”.

4. Sobre el plan de pruebas ir desplegando hasta llegar al nivel de caso de prueba.

5. Seleccionar todos aquéllos que vayan a formar parte de la suite (se pueden seleccionar varios mediante la tecla CTRL).

6. Pulsar sobre “>”.

7. Los casos de prueba seleccionados aparecen en el campo “Campaign”.

8. Pulsar “Validate”

9. Los casos de prueba seleccionados pasan a formar parte de la suite de pruebas.

En caso de que se quieran desasociar, el proceso consisten en seleccionar los casos de prueba que se desee desasignar de la suite, pulsar “<” y finalmente “Validate”.

a) Selección mediante su etiqueta.

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. Seleccionar una suite de pruebas creada y pulsar “Import”.

4. Seleccionar un módulo (se pueden seleccionar varios mediante la tecla CTRL).

5. Seleccionar la etiqueta que define el tipo de caso de prueba que se quiere asociar a la suite.

6. Pulsar sobre “>”.

7. Los casos de prueba etiquetados con la característica seleccionada aparecen en el campo “Campaign”.

8. Pulsar “Validate”.

9. Los casos de prueba seleccionados pasan a formar parte de la suite de pruebas.

4.2Asignación de las suites de test a los testeadores seleccionados.

SALOME TMF se permite asignar una prueba a un testeador a distintos niveles, esto es:

1. A nivel de suite.

2. A nivel de módulo.

3. A nivel de caso de uso.

4. A nivel de caso de prueba.

En cualquier caso, el proceso para la asignación es el mismo.

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. Seleccionar la suite/el módulo/el caso de uso/el caso de prueba a asignar a un testeador.

4. Sobre el elemento seleccionado pulsar en el botón derecho del ratón.

5. Aparece un menú emergente en el que se debe seleccionar la opción “Assign”.

6. Seleccionar del listado de usuarios aquél al que se quiera asignar la ejecución de la prueba.

7. Pulsar “Validate”.

8. El elemento queda asignado al usuario seleccionado (ver en la pestaña “Assigned To” a nivel de suite de pruebas).

Si se necesita se pueden adjuntar ficheros a la suite de pruebas, para ver qué pasos se deben seguir acceder al apartado Anexo A: adjuntar un archivo.

4.3Preparación de la ejecución de las pruebas.

4.3.1Crear los entornos de ejecución de las pruebas.

En primer lugar se va a definir el concepto de entorno:

Un entorno identifica una fase dentro del ciclo de vida del desarrollo de gvSIG según se definió en el Procedimiento 1, por lo tanto, se tendrán tres:

1. Aceptación.

2. Fusión y estabilización.

3. Release Candidate.

Para la creación del un entorno deben seguirse los siguientes pasos:

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage data”.

3. Acceder a la pestaña “Enviroments”.

4. Pulsar “Add”.

5. Introducir en el campo “Environment name” el nombre del entorno y, si se considera necesario una descripción del mismo en el campo “Description”.

6. Pulsar “Validate”.

7. Queda creado el entorno para que sea asociado a las diferentes ejecuciones de las suites de pruebas.

4.3.2Crear la ejecución de una prueba.

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. En la pestaña “Executions” pulsar “Add”.

4. Selección el entorno de pruebas.

5. Pulsar “Validate”.

6. La ejecución queda asociada a la campaña.

Si se necesita se pueden adjuntar ficheros a la definición de la ejecución, para ver qué pasos se deben seguir acceder al apartado Anexo A: adjuntar un archivo.

5Revisar los resultados obtenidos.

5.1Consultar los resultados.

Una vez los testeadores han ejecutado las pruebas que tienen asociadas, se podrá consultar el resultado de la ejecución.

Para consultar los resultados obtenidos se debe seguir los siguientes pasos:

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. Acceder a la pestaña “Executions” en concreto al apartado “Results” en el cuál se pueden ver los resultados de las ejecuciones.

A priori, es decir, sin acceder al detalle del resultado de la ejecución, la información que se muestra es:

1. Name: es el nombre de la ejecución, a la que se le añade un dígito que se va incrementando a medida que se lanza.

2. Date: es la fecha y hora en que se lanzó la ejecución.

3. Tester: se trata del testeador que ha ejecutado las pruebas:

4. Result: es el resultado de la ejecución. En este campo pueden aparecer dos valores:

5. Statistics: se trata de un primer desglose de los resultados, en él se distinguen dos partes, la primera, entre corchetes, se refiere a los escenarios indicando: aquellos escenarios que han dado resultado OK con una p, los que han dado resultado KO con una f, y los que el testeador ha marcado como inconclusos con una u. La segunda parte tras el carácter / apunta a los casos de prueba que componen la suite. Por ejemplo:

En el caso remarcado, la ejecución Exec0_1 de los 2 tests que la componen: 2 escenarios han dado como resultado OK, uno ha dado como resultado KO y uno no se ha podido concluir.

4. Hacer doble clic sobre una de las ejecuciones.

5. Aparece una pantalla en la que para cada uno de los casos escenarios que componen la suite de pruebas:

1. Family: módulo al que pertenece.

2. Suite: caso de uso al que pertenece.

3. Test: caso de prueba al que pertenece.

4. Dataset: escenario al que pertenece, se identifica mediante la palabra Dataset + número de escenario.

5. Resultado:

Escenario con resultado OK.

Escenario con resultado KO.

Escenario marcado como inconcluso.

Escenario inconcluso no marcado como tal.

6. Al hacer doble clic sobre alguno de los resultados, se muestra la pantalla de ejecución son los resultados obtenidos para cada uno de los pasos que componen el caso de prueba.

5.2Generar un informe de resultados.

Una vez ejecutadas las pruebas y a modo de cierre del ciclo de test, puede generarse el informe de resultados que recoge las campañas del proyecto, sus ejecuciones y el resultado de cada uno de los escenarios.

Para la generación del informe de resultados debe seguirse los siguientes pasos:

1. Acceder al gestor de pruebas SALOME, concretamente al proyecto o subsistema con el que se vaya a trabajar.

2. Acceder a la pestaña “Manage campaigns”.

3. Pulsar en “Tools” que aparece al lado del botón “Create a campaign”.

4. Se despliega un menú emergente, pulsar sobre la opción “Generate results report”.

5. Se abre una nueva ventana con la generación del informe.

6. Pulsar en el botón.

7. Aparece la pantalla “Guardar”. Sobre ella seleccionar una ubicación y como tipo de archivo.odt.

Anexo A: adjuntar un archivo.

A.1. Adjuntar un archivo.

Salome TMF permite adjuntar tres tipos de objetos: archivos, direcciones de Internet (URL) y capturas de pantalla. Los pasos para crear el adjunto difieren dependiendo del tipo de objeto aunque el paso previo es común a todos, para adjuntar un elemento es necesario acceder a la pestaña “Attachments”.

1. Cómo adjuntar un archivo:

1. Pulsar “Add File”.

2. Seleccionar un fichero a través del explorador de archivos:

3. Al hacer doble clic sobre el fichero aparece en la pestaña “Attachments”:

2. Cómo adjuntar una dirección de Internet (URL):

1. Pulsar “Add URL”.

2. Introducir en el campo “Enter URL” la dirección de internet.

3. Al pulsar “Validate” aparece en la pestaña “Attachments”:

3. Cómo realizar una captura de pantalla:

1. Pulsar en.

2. Aparece el cuadro para capturas de pantalla.

3. Al pulsar sobre él aparece el la pestaña “Attachments”.

A.2. Acciones sobre los adjuntos¹.