Що таке системне тестування - Кінцевий посібник для початківців

what is system testing ultimate beginner s guide

Що таке системне тестування при тестуванні програмного забезпечення?

Тестування системи означає тестування системи в цілому. Всі модулі / компоненти інтегровані для того, щоб перевірити, чи працює система належним чином чи ні.

Тестування системи проводиться після інтеграційного тестування. Це відіграє важливу роль у постачанні високоякісного продукту.

Список підручників:

• Що таке тестування системи
• Система проти наскрізного тестування

Процес тестування інтегрованої апаратної та програмної системи, щоб переконатися, що система відповідає зазначеним вимогам.

Перевірка : Підтвердження експертизою та надання об'єктивних доказів того, що визначені вимоги виконані.

Якщо додаток має три модулі A, B і C, то тестування, проведене комбінуванням модулів A & B або модуля B & C або модуля A & C, відоме як інтеграційне тестування. Інтеграція всіх трьох модулів та тестування його як цілісної системи називається тестуванням системи.

Що ви дізнаєтесь:

• Мій досвід
  • Приклад системного тестування
• Підхід
• Чому системне тестування?
• Це тестування White-Box або Black-Box?
• Як виконати тест системи?
  • Що перевірити?
• Переваги
• Критерії в'їзду / виїзду
• План тестування системи
• Процедура написання системних тестових справ
• Системні тестові випадки
• Види системного тестування
  • Більше типів системного тестування
• Що таке тестування системної інтеграції?
• Різниця між тестуванням системи та приймання
• Поради щодо проведення системного тесту
• Висновок
• Рекомендована література

Мій досвід

Тож ... ти справді думаєш, що знадобиться така величезна кількість часу, щоб перевірити те, що ти називаєш Тестування системи , навіть витративши багато зусиль на інтеграційне тестування?

Клієнт, до якого ми нещодавно звертались за проектом, не був переконаний у оцінці, яку ми надавали для кожного тестування.

Мені довелося подати приклад:

Майк, я хотів би детально розповісти про наші зусилля та важливість тестування системи на прикладі.

Стріляйте, відповів він.

Приклад системного тестування

Виробник автомобілів не виробляє автомобіль цілком. Кожен компонент автомобіля виготовляється окремо, наприклад, сидіння, рульове управління, дзеркало, розрив, трос, двигун, рама автомобіля, колеса тощо.

Після виготовлення кожного елемента перевіряється незалежно, чи працює він так, як передбачається, і це називається модульним тестуванням.

тестування генерації даних при тестуванні програмного забезпечення

Тепер, коли кожна деталь зібрана з іншою деталлю, ця зібрана комбінація перевіряється, якщо збірка не призвела до побічних ефектів щодо функціональності кожного компонента та чи працюють обидва компоненти як слід, і це називається інтеграційним тестуванням.

Як тільки всі деталі зібрані і машина готова, вона фактично не готова.

Потрібно перевірити весь автомобіль на різні аспекти відповідно до визначених вимог, наприклад, якщо автомобіль можна їздити плавно, перерви, передачі та інші функціональні можливості, які працюють належним чином, автомобіль не виявляє жодних ознак втоми після того, як проїхав 2500 миль безперервно, колір автомобіля загальновизнаний і сподобався, автомобіль можна їздити на будь-яких дорогах, таких як рівна і нерівна, недбала і пряма тощо, і цілі зусилля тестування називаються системним тестуванням, і це не має нічого спільного з інтеграційним тестуванням.

Приклад працював так, як очікувалося, і клієнт переконався у зусиллях, необхідних для перевірки системи.

Я розповів приклад тут, щоб підкреслити важливість цього тестування.

Підхід

Це проводиться після завершення інтеграційного тестування.

В основному це тестування типу «чорна скринька». Це тестування оцінює роботу системи з точки зору користувача за допомогою специфікаційного документа. Це не вимагає ніяких внутрішніх знань про такі системи, як дизайн або структура коду.

Він містить функціональні та нефункціональні сфери застосування / продукту.

Критерії фокусу:

Основна увага зосереджена на наступному:

1. Зовнішні інтерфейси
2. Мультипрограмні та складні функціональні можливості
3. Безпека
4. Одужання
5. Продуктивність
6. Плавна взаємодія оператора та користувача з системою
7. Встановлюваність
8. Документація
9. Юзабіліті
10. Навантаження / стрес

Чому системне тестування?

# 1) Дуже важливо пройти повний цикл тестування, і ST є етапом, коли це робиться.

# два) ST виконується в середовищі, подібному до виробничого, і, отже, зацікавлені сторони можуть добре зрозуміти реакцію користувача.

# 3) Це допомагає мінімізувати усунення несправностей після розгортання та виклики підтримки.

No4 ) На цьому етапі STLC випробовуються архітектура додатків та вимоги бізнесу.

Це тестування є дуже важливим, і воно відіграє значну роль у постачанні якісного продукту замовнику.

Давайте побачимо важливість цього тестування на наведених нижче прикладах, які включають наші повсякденні завдання:

• Що робити, якщо онлайн-транзакція не вдається після підтвердження?
• Що робити, якщо товар, розміщений у кошику веб-сайту, не дозволяє зробити замовлення?
• Що робити, якщо в обліковому записі Gmail створення нової мітки видає помилку при натисканні на вкладку створення?
• Що робити, якщо система виходить з ладу при збільшенні навантаження на систему?
• Що робити, якщо система виходить з ладу і не може відновити дані за бажанням?
• Що робити, якщо установка програмного забезпечення в систему займає набагато більше часу, ніж очікувалося, і в кінці видає помилку?
• Що робити, якщо час відгуку веб-сайту збільшується набагато більше, ніж очікувалося після вдосконалення?
• Що робити, якщо веб-сайт стає занадто повільним, що користувач не може забронювати свій проїзний квиток?

Вище наведено лише декілька прикладів, щоб продемонструвати, як системне тестування вплине, якщо його не зробити належним чином.

Усі вищезазначені приклади - це лише результат тестування системи, яке не було виконано або зроблено неправильно. Всі інтегровані модулі повинні бути протестовані, щоб переконатися, що виріб працює відповідно до вимог.

Це тестування White-Box або Black-Box?

Системне тестування можна розглядати як техніку чорного ящику.

Тестування чорної скриньки Техніка не вимагає внутрішнього знання коду, тоді як техніка білих ящиків вимагає внутрішнього знання коду.

При проведенні тестування системи функціональних та нефункціональних, охоплюється безпека, продуктивність та багато інших типів тестування, і вони перевіряються методом чорної скриньки, де вхідні дані надаються системі, а вихідні дані перевіряються. Внутрішні знання системи не потрібні.

Техніка чорного ящика:

Як виконати тест системи?

В основному це частина тестування програмного забезпечення, і План тестування завжди повинен містити певний простір для цього тестування.

Щоб протестувати систему в цілому, вимоги та очікування повинні бути чіткими, а тестувальник також повинен розуміти використання програми в режимі реального часу.

Крім того, найбільш часто використовувані сторонні інструменти, версії ОС, аромати та архітектура ОС можуть впливати на функціональність системи, її продуктивність, безпеку, можливість відновлення чи встановлення.

Тому під час тестування системи може бути корисним чітке уявлення про те, як буде використовуватися додаток, і з якими проблемами він може зіткнутися в режимі реального часу. На додаток до цього, документ з вимогами є таким же важливим, як і розуміння заявки.

Чіткий та оновлений документ з вимогами може врятувати тестувальника від ряду непорозумінь, припущень та питань.

Коротше кажучи, чіткий і чіткий документ з останніми оновленнями та розуміння використання додатків у реальному часі може зробити ST більш плідним.

Це тестування проводиться планово та систематично.

Нижче наведено різні кроки, що проводяться під час проведення цього тестування:

• Найпершим кроком є ​​створення плану випробувань.
• Створюйте тестові кейси системи та сценарії тестування.
• Підготуйте дані тесту, необхідні для цього тестування.
• Виконайте тестові кейси системи та сценарій.
• Повідомте про помилки. Повторне тестування помилок після виправлення.
• Регресійне тестування для перевірки впливу зміни коду.
• Повторення циклу тестування, поки система не буде готова до розгортання.
• Вийти з групи тестувань.

Що перевірити?

Викладені нижче пункти охоплюються цим тестуванням:

• Тестування наскрізне що включає перевірку взаємодії між усіма компонентами та разом із зовнішніми периферійними пристроями, щоб переконатися, що система працює нормально в будь-якому із сценаріїв.
• Він перевіряє, що вхідні дані, що надходять у систему, забезпечують очікуваний результат.
• Він перевіряє, чи всі функціональні та нефункціональні вимоги перевірені і чи працюють вони належним чином чи ні.
• До цього і дослідне тестування може бути проведено в цьому тестуванні після завершення тестування за сценарієм. Пошукові випробування і спеціальне тестування допомагає розкрити помилки, яких неможливо знайти під час сценарію, оскільки це дає свободу тестувальникам тестувати, оскільки їх бажання базується на їх досвіді та інтуїції.

Переваги

Є кілька переваг:

• Це тестування включає наскрізні сценарії тестування системи.
• Це тестування проводиться в тому ж середовищі, що і виробниче середовище, яке допомагає зрозуміти перспективу користувача та запобігає проблемам, які можуть виникнути, коли система працює.
• Якщо це тестування проводиться систематично та належним чином, це допоможе пом'якшити проблеми після виробництва.
• Це тестування перевіряє як архітектуру додатків, так і бізнес-вимоги.

Критерії в'їзду / виїзду

Давайте детально розглянемо критерії входу / виходу для системного тесту.

Критерії вступу:

• Система повинна була пройти критерії виходу з інтеграційного тестування, тобто всі тестові випадки повинні бути виконані, і не повинно бути критичної або пріоритетної P1, помилки P2 у відкритому стані.
• План випробувань для цього тестування слід затвердити та підписати.
• Тестові кейси / сценарії повинні бути готовими до виконання.
• Тестові сценарії повинні бути готові до виконання.
• Повинні бути доступні всі нефункціональні вимоги і повинні бути створені тестові кейси для них.
• Середовище тестування має бути готовим.

Критерії виходу:

• Усі тестові кейси повинні бути виконані.
• Жодні критичні помилки, помилки, пов'язані з пріоритетом чи безпекою, не повинні знаходитися у відкритому стані.
• Якщо будь-які помилки середнього або низького пріоритету перебувають у відкритому стані, тоді це слід реалізовувати з прийняттям замовником.
• Звіт про вихід слід подати.

План тестування системи

План випробувань - це документ, який використовується для опису мети, мети та обсягу продукту, що розробляється. Що має бути перевірено, а що не слід тестувати, стратегії тестування, інструменти, які слід використовувати, необхідне середовище та будь-яка інша деталь задокументована для подальшого тестування.

План тестування допомагає проводити тестування в дуже систематичному і стратегічному порядку, що допомагає уникнути будь-яких ризиків або проблем під час проведення тестування.

План системних випробувань охоплює такі моменти:

• Мета та завдання визначені для цього тесту.
• Сфера застосування (Перелічені особливості, що перевіряються, Перелічені особливості, що не перевіряються).
• Критерії прийняття тесту (Критерії, за якими буде прийнята система, тобто згадані пункти в критеріях прийняття повинні бути у стані проходження).
• Критерії входу / виходу (визначає критерії, коли тестування системи повинно розпочатися і коли воно повинно вважатися завершеним).
• Графік тестування (Оцінка тестування, яке має бути виконане в певний час).
• Тестова стратегія (Включає методи тестування).
• Ресурси (Кількість ресурсів, необхідних для тестування, їх ролі, доступність ресурсів тощо).
• Тестове середовище (операційна система, браузер, платформа).
• Тестові кейси (Перелік тестових випадків, які потрібно виконати).
• Припущення (якщо є якісь припущення, їх слід включити до плану випробувань).

Процедура написання системних тестових справ

Тестові випадки системи охоплюють усі сценарії та випадки використання, а також функціональні, нефункціональні, користувальницький інтерфейс, тестові випадки, пов'язані з безпекою. Тестові кейси пишуться так само, як і для функціонального тестування.

Тестові приклади системи включають наступні поля в шаблоні:

• Ідентифікатор тестового кейсу
• Назва тестового набору
• Опис - описує тест-тест, який буде виконано.
• Етапи - поетапна процедура, щоб описати, як проводити тестування.
• Тестові дані - фіктивні дані підготовлені для тестування програми.
• Очікуваний результат - Очікуваний результат відповідно до документа вимоги наведено у цій колонці.
• Фактичний результат - у цій колонці наведено результат після виконання тесту.
• Передача / невдача - Порівняння фактичного та очікуваного результату визначає критерії проходження / невдачі.
• Зауваження

Системні тестові випадки

Ось кілька зразків сценаріїв тестування веб-сайту електронної комерції:

1. Якщо сайт запуститься належним чином із усіма відповідними сторінками, функціями та логотипом
2. Якщо користувач може зареєструватися / увійти на сайт
3. Якщо користувач бачить доступні товари, він може додати товари до свого кошика, може здійснити оплату та отримати підтвердження електронною поштою, SMS або дзвонити.
4. Якщо основні функції, такі як пошук, фільтрація, сортування, додавання, зміна, список бажань тощо, працюють належним чином
5. Якщо кількість користувачів (визначена як у документі вимог) може одночасно отримати доступ до сайту
6. Якщо сайт запуститься належним чином у всіх основних браузерах та їх останніх версіях
7. Якщо транзакції здійснюються на сайті через певного користувача, вони досить безпечні
8. Якщо сайт запуститься належним чином на всіх підтримуваних платформах, таких як Windows, Linux, Mobile тощо.
9. Якщо політика повернення керівництва користувача / керівництва, політика конфіденційності та умови користування сайтом доступні як окремий документ і корисні будь-якому новачкові чи користувачеві, який вперше користується.
10. Якщо вміст сторінок правильно вирівняний, добре керований та без орфографічних помилок.
11. Якщо тайм-аут сеансу реалізований і працює належним чином
12. Якщо користувач задоволений після використання сайту, або іншими словами, користувачеві не важко користуватися сайтом.

Види системного тестування

ST називається надмножиною всіх видів тестування, оскільки в ньому розглядаються всі основні типи тестування. Хоча орієнтація на типи тестування може відрізнятися залежно від продукту, організаційних процесів, термінів та вимог.

Загалом це можна визначити, як показано нижче:

Тестування функціональності: Щоб переконатися, що функціональність продукту працює відповідно до визначених вимог, в межах можливостей системи.

Тестування на відновлюваність: Щоб переконатись, наскільки добре система відновлюється від різних помилок вводу та інших ситуацій відмови.

Тестування сумісності: Щоб переконатися, чи може система добре працювати зі сторонніми продуктами чи ні.

Тестування продуктивності: Переконатись у роботі системи за різних умов з точки зору експлуатаційних характеристик.

Тестування масштабованості: Щоб переконатися в можливостях масштабування системи різними термінами, такими як масштабування користувачів, географічне масштабування та масштабування ресурсів.

Тестування надійності: Щоб переконатися, що система може працювати довше, не створюючи збоїв.

Регресійне тестування: Щоб переконатися в стабільності системи під час інтеграції різних підсистем та завдань технічного обслуговування.

Тестування документації: Щоб переконатися, що посібник користувача системи та інші документи довідки є правильними та придатними для використання.

Тестування безпеки: Переконатися, що система не дозволяє несанкціонований доступ до даних та ресурсів.

Тестування юзабіліті : Щоб переконатися, що система проста у використанні, навчіться та працюйте.

Більше типів системного тестування

# 1) Тестування графічного інтерфейсу користувача (GUI):

Тестування графічного інтерфейсу проводиться, щоб перевірити, чи працює графічний інтерфейс системи належним чином чи ні. GUI - це в основному те, що видно користувачеві під час використання програми. Тестування графічного інтерфейсу включає тестування кнопок, піктограм, прапорців, списку, текстового поля, меню, панелей інструментів, діалогових вікон тощо.

# 2) Тестування сумісності:

Тестування сумісності робиться для забезпечення сумісності розробленого продукту з різними браузерами, апаратними платформами, операційною системою та базами даних відповідно до вимог.

# 3) Обробка винятків:

Тестування обробки винятків проводиться для того, щоб переконатися, що навіть якщо в продукті трапляється несподівана помилка, воно повинно відображати правильне повідомлення про помилку та не давати застосунку зупинитися. Він обробляє виняток таким чином, що помилка відображається тим часом, що продукт відновлюється і дозволяє системі обробляти неправильну транзакцію.

# 4) Тестування обсягу:

Об'ємне тестування - це тип нефункціонального тестування, при якому тестування проводиться з використанням величезної кількості даних. Наприклад, Обсяг даних збільшується в базі даних для перевірки продуктивності системи.

# 5) Стрес-тестування:

Стрес-тестування проводиться за рахунок збільшення кількості користувачів (одночасно) додатків до такої міри, що програма виходить з ладу. Це робиться для того, щоб перевірити момент, коли програма буде виходити з ладу.

# 6) Перевірка розумності:

Перевірка розумності виконується, коли збірка випущена із зміною коду або функціональних можливостей або якщо виправлена ​​помилка. Він перевіряє, що внесені зміни не вплинули на код, і через це не виникло жодної іншої проблеми, і система працює як раніше.

Якщо у випадку виникнення будь-якої проблеми, збірка не приймається для подальшого тестування.

В основному, ретельне тестування не проводиться для збірки, щоб заощадити час та витрати, оскільки воно відхиляє збірку для виявленої проблеми. Перевірка обґрунтованості проводиться для внесених змін або для виправленої проблеми, а не для повної системи.

# 7) Тестування диму:

Тестування диму - це тестування, яке виконується у збірці, щоб перевірити, чи є збірка подальшим тестуванням чи ні. Він перевіряє, що збірка стабільна для тестування, і всі критичні функції працюють нормально. Тестування диму проводиться для всієї системи, тобто проводиться наскрізне тестування.

# 8) Дослідницькі випробування:

Пошукове тестування як випливає з назви, вся справа в дослідженні програми. При дослідницькому тестуванні сценарій тестування не проводиться. Тестові кейси пишуться разом із тестуванням. Він зосереджений більше на виконанні, ніж на плануванні.

Тестер має свободу тестувати самостійно, використовуючи свою інтуїцію, досвід та інтелект. Тестер може вибрати будь-яку характеристику для першого тестування, тобто випадковим чином він може вибрати функцію для тестування, на відміну від інших методів, де для проведення тестування використовується структурний спосіб.

# 9) Тестування Adhoc:

Adhoc тестування - це неформальне тестування, де не проводиться документація чи планування для тестування заявки. Тестер перевіряє програму без будь-яких тестових випадків. Мета тестера - розірвати заявку. Тестер використовує свій досвід, здогадки та інтуїцію, щоб знайти найважливіші проблеми в додатку.

# 10) Тестування встановлення:

Тестування встановлення полягає у перевірці, чи програмне забезпечення не встановлюється без будь-яких проблем.

Це найважливіша частина тестування, оскільки встановлення програмного забезпечення є найпершою взаємодією між користувачем та продуктом. Тип тестування встановлення залежить від різних факторів, таких як операційна система, платформа, розповсюдження програмного забезпечення тощо.

Тестові кейси, які можна включити, якщо встановлення здійснюється через Інтернет:

• Погана швидкість мережі та розрив зв’язку.
• Брандмауер та безпека.
• Береться розмір та приблизний час.
• Одночасне встановлення / завантаження.
• Недостатня пам’ять
• Недостатньо місця
• Перервана установка

# 11) Тестування технічного обслуговування:

Після того, як продукт надходить у дію, проблема може виникнути в реальному середовищі, або може знадобитися деяке вдосконалення у продукті.

Виріб потребує технічного обслуговування після надходження в експлуатацію, про що піклується команда технічного обслуговування. Тестування, яке проводиться для будь-яких проблем, удосконалення або переходу на апаратне забезпечення, підпадає під тестування технічного обслуговування.

Що таке тестування системної інтеграції?

Це тип тестування, при якому перевіряється здатність системи підтримувати цілісність даних та функціонувати в координації з іншими системами в тому ж середовищі.

Приклад тестування системної інтеграції:

Візьмемо приклад відомого веб-сайту бронювання квитків - http://irctc.co.in.

Це можливість бронювання квитків; Інтернет-магазин взаємодіє з PayPal. Загалом ви можете вважати це A * B * C = R.

Тепер на системному рівні систему Інтернет-бронювання квитків, Інтернет-магазин та Інтернет-систему оплати можна перевірити самостійно, а потім перевірити, виконати інтеграційні тести для кожного з них. І тоді всю систему потрібно систематично тестувати.

Отже, де тестування системної інтеграції впливає?

Веб-портал http://Irctc.co.in - це комбінація систем. Ви можете проводити тести на одному рівні (одинарна система, система систем), але на кожному рівні ви можете зосередитися на різних ризиках (проблеми інтеграції, незалежна функціональність).

• Випробовуючи систему бронювання квитків через Інтернет, ви можете перевірити, чи можете ви забронювати квитки через Інтернет. Ви також можете розглянути проблеми інтеграції Наприклад, Система бронювання квитків інтегрує бек-енд із інтерфейсом (UI). Наприклад, як поводиться інтерфейс, коли сервер баз даних повільно реагує?
• Тестування Інтернет-служби бронювання квитків за допомогою Інтернет-магазину. Ви можете підтвердити, що Інтернет-магазин доступний для користувачів, які ввійшли в систему для бронювання квитків через Інтернет. Ви також можете розглянути можливість перевірки інтеграції в Інтернет-магазин. Наприклад, якщо користувач може вибрати і придбати товар без клопоту.
• Тестування інтеграції системи онлайн-бронювання квитків із PayPal. Ви можете перевірити, чи були після бронювання квитків гроші переказані з вашого рахунку PayPal на рахунок онлайн-бронювання квитків. Ви також можете розглянути можливість перевірки інтеграції в PayPal. Наприклад, що, якщо система внесе два записи в базу даних після дебетування грошей лише один раз?

Різницяміж тестуванням системи та тестуванням системної інтеграції:

Основна відмінність полягає в:

• Системне тестування відповідає за цілісність однієї системи у відповідному середовищі
• Тестування системної інтеграції стежить за цілісністю декількох систем, перебуваючи в одному середовищі.

Таким чином, системний тест - це початок реального тестування, коли ви тестуєте продукт у цілому, а не модуль / функцію.

Різниця між тестуванням системи та приймання

Нижче наведені основні відмінності:

Поради щодо проведення системного тесту

1. Повторюйте сценарії реального часу, а не виконуйте ідеальне тестування, оскільки системою буде користуватися кінцевий користувач, а не навчений тестер.
2. Перевірте реакцію системи різними словами, оскільки людина не любить чекати або бачити неправильні дані.
3. Встановіть та налаштуйте систему відповідно до документації, оскільки це те, що збирається зробити кінцевий користувач.
4. Залучаючи людей з різних областей, таких як бізнес-аналітики, розробники, тестувальники, клієнти можуть надіслати кращу систему.
5. Регулярне тестування - це єдиний спосіб переконатись, що найменша зміна коду для виправлення помилки не вставила ще одну критичну помилку в систему.

Висновок

Системне тестування є дуже важливим, і якщо його не зробити належним чином, критичні проблеми можуть зіткнутися в середовищі життя.

Система в цілому має різні характеристики, які слід перевірити. Простим прикладом може бути будь-який веб-сайт. Якщо його не протестувати в цілому, користувач може виявити, що цей сайт працює дуже повільно, або сайт може зірватися, коли велика кількість користувачів входить в систему одночасно.

І ці характеристики не можна перевірити, поки веб-сайт не буде перевірений в цілому.

Сподіваюся, цей підручник був дуже корисним для розуміння концепції системного тестування.

Рекомендована література

• Типи тестування програмного забезпечення: різні типи тестування з деталями
• Альфа-тестування та бета-тестування (повний посібник)
• Що таке тестування системної інтеграції (SIT): дізнайтеся на прикладах
• Функціональне тестування проти нефункціонального тестування
• Постійний процес інтеграції: як поліпшити якість програмного забезпечення та зменшити ризик
• 10 найкращих інструментів тестування інтеграції для написання тестів інтеграції
• Що таке інтеграційне тестування (Підручник із прикладом інтеграційного тестування)
• Що таке тестування на витривалість у тестуванні програмного забезпечення (приклади)