Тенденции в сфере Тестирования ПО в 2016 году

Тестирование как профессия существует уже не первый год, и наблюдая за происходящими в этой сфере тенденциями, можно выделить несколько основных. И так что происходит в тестировании ПО в этом году и какие предсказания на будущее для сферы тестирования

Python становится все более популярным для автоматизации тестирования
Python набирает популярность так как все больше тестировщиков, начинающих изучать автоматизацию выбирают более легкий для обучения и в тоже время мощный язык программирования

Python для автотестирования

Популярность Agile и Continuous delivery выросли в больших масштабах
Цикл релизов значительно сократился за последние годы, вместе с этим тестирование все больше проникло в цикл разработки продукта. То есть программисты все больше вовлечены во взаимодействие с тестировщиками еще на ранних стадиях кодирования. В последствии такие инструменты тестирования как автотесты и системы отслеживания багов стали все больше интегрированы в окружения разработки которые помогают с быстрым Continuous delivery

Континиус дэливери

Читать дальше →

Что такое Юзкейс (Use Case) или "Сценарий Использования" в Тестировании ПО?

Юзкейс (Use Case) — это перечень действий, сценарий по которому пользователь взаимодействует с приложением, программой для выполнения какого-либо действия для достижения конкретной цели. Тестирование по юзкейсам проводится для того чтобы обнаружить дополнительные логические дыры и баги в приложении, которые сложно найти в тестировании индивидуальных модулей, частей приложения отдельно друг от друга. Юзкейс тестирование может проводится как часть Приемочного тестирования. Для удобства визуального восприятия Use Case часто рисуют в виде диаграмм с переходами.

Пример Юзкейсов (Use Cases)
для разных типов пользователей онлайновой системы:

Юзкейс

Перед тестированием любого приложения или программы стоит поинтересоваться у заказчика чтобы тот предоставил хотя бы несколько Юзкейсов пользователей, какой набор сценариев используется чаще всего и отталкиваясь от этого составить тест кейсы таким образом, чтобы все сценарии были покрыты и имели наибольший приоритет и которые стоит покрыть автотестами в первую очередь.

Читать дальше →

Что такое Верификация и Валидация (Verification and Validation) и различия между ними?

Когда изучаешь теорию тестирования и сталкиваешься с двумя терминами которые при прочтении описания кажутся во многом почти одним и тем же. И сложно найти подробное описание различий тем более что вопрос Что такое Верификация и Валидация и отличие между ними звучит на собеседованиях довольно часто.

Validation and Verification

Для удобства сведем различия и определения в таблицу из двух колонок

Верификация

Валидация

  • Отвечает на вопрос правильно ли мы делаем продукт и все ли в соответствии с поставленными требованиями
  • Отвечает на вопрос делаем ли мы продукт правильно с точки зрения ожидания потребности пользователей или заказчика от нашего продукта
  • В процессе верификации убеждаемся что функционал нашего продукта работает правильно
  • В процессе валидации убеждаемся что функционал нашего приложения соответствует поведению которое ожидает и подразумевает от такого функционала пользователь или заказчик
  • Верификация включает в себя такие вещи как проверка соответствия требованиям, технической документации и корректности выполнения кода на каждом этапе цикла разработки и тестирования ПО
  • Валидация в большей степени включает в себя оценку продукта «в общем» и может включать в себя субъективную оценку насколько хорошо работает программа или приложение

Читать дальше →

Как перетащить объект в браузере используя Selenium Webdriver?

В наше время все чаще веб приложения пишутся активно используя JavaScript и JQuery и бывает что в автотесте один обьект нужно перетащить в другое место на странице

Для таких случаев в Selenium Webdriver существует класс Actions который в свою очередь имеет нужные нам методы DragAndDrop() и DragAndDropToOffset()

Для начала нам нужно 2 локатора: 1й — обьекта который нужно перетащить и 2й — локатор поверхности куда нужно этот объект перетащить

Для выполнения такой операции нам нужно написать:

var actions = new Actions(Driver);
var random = new Random();
int x = random.Next(-75, 75);
int y = random.Next(-75, 75);
actions.DragAndDrop(this.objectToDrag, this.fieldArea)
           .DragAndDropToOffset(this.objectToDrag, x, y)
           .Perform();


x и y — это координаты в пикселях поверности, куда именно нужно перетащить объект, расчитывается от центра (в данном случае высота и ширина задается рандомно, в пределах от -75 до 75)
this.objectToDrag — это элемент самого объекта
this.fieldArea — это элемент поверхности

Подробнее изображено на рисунке:
Drag and Drop Selenium WebDriver

Читать дальше →

Основные Атрибуты NUnit для написания автотестов на C#

Атрибуты NUnit для Тест сьюта и тест кейсов

Все классы в проекте, помеченные атрибутом [TestFixture] означают что данный класс содержит автотесты и фактически это тест сьют. Внутри данного класса должны размещаться методы с атрибутами [Test] которые в свою очередь и означают что данные методы это тест кейсы (автотесты)
[TestFixture]
public class Tests
{
 [Test]
 public void Test1() { }

 [Test]
 public void Test2() { }
}


Атрибуты NUnit для выполнения перед и после Тест сьюта

Бывают случаи когда требуется выполнение какого либо действия перед и после выполнения всего тест сьюта. Для этого используют атрибуты [TestFixtureSetUp] — выполняется перед запуском всех тестов из всего тестового класса и [TestFixtureTearDown] — выполняется после выполнения всех тестов в тестовом наборе. В коде это будет выглядеть таким образом:

[TestFixture]
public class Tests
{
 [TestFixtureSetUp]
 public void BeforeTestSuit() { }

 [TestFixtureTearDown]
 public void AfterTestSuit() { }
}


Читать дальше →

Что такое Исследовательское Тестирование (Exploratory testing)?

Исследовательское Тестирование в тестировании ПО

Исследовательское Тестирование — одновременно является и техникой и видом тестирования. Такое тестирование подразумевает под собой одновременно изучение проекта, функционала, проектирование тест кейсов в уме и тут же их исполнение не записывая и не создавая тестовую документацию.

Exploratory testing Исследовательское Тестирование

Эффективность Exploratory testing

Такой вид тестирования обычно не предусматривается в тест плане и тест кейсы выполняются и модифицируются динамически. Эфективность такого тестирования напрямую зависит от опыта тестировщика ранее имевшим дело с этим приложением, платформой, знанием мест скопления возможных багов и рисками кототые относятся к конкретному продукту.


Читать дальше →

Как прикрутить NUnit автотесты к Тимсити (TeamCity)

Настройка конфигурации для автотестов в тимсити позволит вам без вашего участия запускать тесты по расписанию или после любых изменений в коде и деплоймента, просто настроив билд конфигурацию и прописав зависимости и триггеры в билд конфигурации.

В статье предполагается что у вас уже созданы билдагенты и настроен Version Control Settings

Для начала следует создать темплейт в тимсити для вашей конфигурации

1) Для этого нужно перейти в раздел Администрирования
тимсити темплейт
2) Заполнить имя и нажать «Создать»

3) Приаттачить VCS Root и Выбрать билд агент в Agent Requirements

4)Заполнить General Settings и Build Step (создать 2 степа на ребилд проекта и на запуск)
билд степ в тимсити

Этого будет достаточно для самой простой конфигурации. Далее можно настроить зависимости от выполнения других конфигураций и триггерры для автозапуска автотестов

Читать дальше →

Разница между QA (Quality Assurance) и QC (Quality Control)?

QA (Quality Assurance) — это совокупность мероприятий, охватывающих все этапы разработки ПО включая эксплуатацию и релиз, которые предпринимаются на разных статиях жизненного цикла ПО, главной целью которого является обеспечение качества выпускаемого продукта. QC — одно из мероприятий в QA.

QA и QC разница

QC (Quality Control) — это совокупность мероприятий, которые проводятся в процессе разработки ПО, для получения исчерпывающей информации о соответствии тестироемого продукта поставленным изначально требованиям. В QC входят Test Management, Test Analysis, Test Design и другие.

Какая очередность выполнения видов тестирования для веб приложения?

Перед тем как приниматься к тестированию веб приложения, тестировщику следует понять какие виды тестирования следует провести над этим приложением. В большинстве случаев сам заказчик выбирает и просит тестировщиков провести типы тестирования, которые его интересуют и на которые он может выделить деньги. Но если такого решения от заказчика или продакт овнера не поступило, то как высококвалифицированные тестровщики мы должны сами определить какие виды тестирования выполнять над приложением.

Как самостоятельно определить какие виды тестирования провести?

Существуют различные типы веб приложений, такие как банковские клиенты, системы по подсчету статистики, интернет магазины, ресурсы по обучению. Для каждого из типов приложений всегда есть критические модули и юз кейсы, которые используют большинство пользователей. Для банковского приложения тестирование секьюрити будет намного более критично чем для какого-нибудь приложения опросника. Для второго скорее всего секьюрити тестирование проводится даже и не будет. Более важный приоритет здесь в точности подсчетов и понятности интерфейса.

В какой очередности по видам тестирования следует проводить тестирование веб приложения?

Здесь все просто и логично. Допустим после долгих переговоров с продакт овнером был выделен бюджет на проведение трех видов тестирования над веб приложением таких как Функциональное (Functional testing), Юзабилити (Usability testing) и Секьюрити (Security testing)
Что следует проводить первым?
Очередность выполнения видов тестирования
Ну давайте подумаем логически, зачем первым делом проводить секьюрити если у нас возможно не работает основной функционал. И с таким же успехом после проведения функционального сразу браться за юзабилити если в приложении возможно большая дыра в секьюрити

Читать дальше →

Каскадное тестирование ПО

Стремительное внедрение программных продуктов во многие сферы жизнедеятельности человека актуализирует необходимость разработки исключительно высококачественного программного обеспечения, осуществление которого невозможно без повышения уровня квалификации самих программистов и тестировщиков. В последнее время передовых компании, которые занимаются профессиональным тестированием программных продуктов, все чаще обращают внимание на преимущества процедуры каскадного тестирования. По своему замыслу, данный вид тестирования предусматривает корреляцию между статистическим и динамическим тестированием, которая позволяет произвести весь процесс наиболее качественно и предупредить возможные ошибки в случае использования исключительно одного способа.

Каскадное тестирование

Статистический этап предусматривает процедуру обнаружения дефектов тестируемого продукта без непосредственной проверки ее работоспособности на машине. Тестирование предусматривает выполнение следующих действий: выявления и рассмотрения тех требований, которые предъявляются к тестируемой системе (изучение проектов, сопутствующей документации, а также определение главных функциональных требований к программному продукту в целом); разработка хода испытаний (определение со стратегией тестирования, содержанием тестируемой системы, утверждение плана исследований); проектирование тестов (выявление цели тестов, их конфигурации, изучение методики проведения, формирование тестовых кейсов).

Читать дальше →