 |
|
Додаток Ж. Рекомендації до створення звіту про тестування
1. Вступ.
2. Розробка тестів (які види тестування використовувались, які були розроблені тестові випадки).
2.1. Функціональні тести.
2.2. GUI тести.
2.3. Тести на безпеку.
…
2.N. Тестування продуктивності.
3. Функціональне тестування.
3.1. Пройдені тести, їх результат.
3.2. Не пройдені тести.
4. GUI тестування.
…
N-2.Тестування продуктивності.
N-1.Метрики (покриття програмних вимог тестами).
N. Критерій прийняття/відхилення релізу.
2. Розробка тестів. Під час фази розробки тестових випадків було спроектовано тести для функціонального тестування, тестування безпеки чи GUI тестування та сценарії для тестування продуктивності (або вказати інші види тестів, які використовувалися). Кожен тестовий випадок містить детальні кроки, тестові дані і очікувані результати.
2.1. Функціональні тестові випадки. Під час фази розробки тестів було спроектовано 34 функціональні тестові випадки. Таблиця показує розподіл функціональних тестових випадків і наборів тестових даних для цих випадків за варіантами використання.
| Варіанти використання | Тестові випадки | Тестові дані |
| Setup Account | ||
| Trade Securities | ||
| View Performance | ||
| Edit Security | ||
| Edit Trader Account | ||
| View System Reports | ||
| Загалом |
Додаток 2 «Специфікація тестів для функціонального тестування» містить деталі функціональних тестових випадків.
| # | Тестові випадки | Тестові дані |
| 1. | Verify Image And Text | |
| 2. | Verify Sort Order Fields | |
| 3. | Verify Scrolling | |
| 4. | Verify Required Fields | |
| 5. | Verify Max Length In Edit Fields | |
| 6. | Verify Links | |
| 7. | Verify Default Values In Fields | |
| 8. | Verify Data Validation In Edit Fields | |
| 9. | Verify Buttons | |
| 10. | Verify Confirmation Message | |
| 11. | Verify UI Skin-ability | |
| Загалом |
2.2. GUI тестові випадки. Було розроблено 11 GUI тестових випадків. Нижче наведена таблиця показує список GUI тестових випадків з кількістю наборів тестових даних для кожного тестового випадку.
Додаток 3 «Специфікація тестів для GUI тестування» містить детальні GUI тестові випадки.
…
2.n. Аналогічний опис тестових випадків для інших видів тестування
3. Функціональне тестування
Результати тестування
Результати функціонального тестування наведено в додатку Результати виконання функціонального тестування .
Підсумок тестування
33 тести з 34 функціональних тестів наведених в Додатку2 «Специфікація тестів для функціонального тестування» пройшли успішно (169 із 170 множин тестових даних пройшли), отже функціональне тестування розглядається як частково успішне – 97% тестових випадків пройшли, 99.94% наборів тестових даних пройшли.
Відомі дефекти
Дефект #1
Коли адміністратор редагує профіль користувача система не інформує адміністратора, що користувач в даний момент залогований.
Опис:
Відповідно до тестового випадку Edit Trader Account (UTASK10298) система повинна інформувати адміністратора, що користувач в даний момент залогований, якщо адміністратор намагається редагувати профіль користувача.
Дефект полягає в тому, що система не інформує адміністратора про те, що користувач залогований. Адміністратор може змінювати профіль користувача у той час коли користувач залогований у систему.
Подолання дефекту:
Цей дефект неможливо виправити без шкоди для WEB сервера системи. Проблема полягає в тому, що доступ до контейнера сесії є обмеженим і небезпечним.
GUI тестування
Результати тестування
Результати GUI тестування представлені у додатку Результати виконання GUI тестування.
Підсумок тестування
10 з 11 GUI тестів наведених у Додатку Test Design Specification GUI Testing.doc [3] пройшли успішно (324 із 327 наборів тестових даних пройшли), отже GUI тестування можна розглядати як частково успішне- 90.9% тестових випадків пройшли успішно, 99.1% наборів тестових даних пройшли.
Відомі дефекти
Дефект #2
Каристувач не може переміщувати вказівник прокрутки на сторінці Портфоліо користувача. Цей дефект проявляється лише в оглядачі FireFox.
Опис:
Каристувач не може переміщувати вказівник прокрутки на сторінці Портфоліо користувача. Вказівник прокрутки можна перемітити лише з допомогою стрілок прокрутки. Цей дефект проявляється лише в оглядачі FireFox.
Подолання дефекту:
Це дефект FireFox v x.x: вказівник прокрутки фрейму об’єкта втрачає фокус.
Критерій успіх/провал проекту
Умови тестування, які визнавалися успішними були наступні:
Розробка тестів:
· Всі заплановані тестові випадки розроблено;
· Покриття тестами програмних вимог досягає 100%;
· Покриття тестами варіантів використання досягає 100%;
Тестування:
· Всі розроблені тестові випадки виконано;
· Виконано тестування продуктивності, вимоги продуктивності задоволено;
· Всі внутрішні дефекти виправлені і виправлення підтверджено.
Всі наведені умови задоволено, проект вважається успішним.