alexxlab всё, что нужно знать тестировщикам
Вот уже более двух лет команда компании «Точка качества» работает на проекте по созданию платежной системы для одного крупного банка. Поначалу задачи нашей команды сводились только к тестированию системы, однако через некоторое время заказчик поручил нам подготовку и проведение приёмо-сдаточных испытаний.
Задача эта нетипичная для тестировщиков. Поэтому мы решили поделиться своим опытом и рассказать, как её грамотно выполнить, оправдав доверие заказчика.
ЧТО ТАКОЕ ПРИЁМО-СДАТОЧНЫЕ ИСПЫТАНИЯ (ПСИ)?
Прежде чем выпускать продукт на рынок, заказчик должен убедиться в возможности использования разработанного решения, в его безопасности, надёжности, корректном функционировании и проверить другие характеристики, описанные в требованиях к продукту.
ПСИ особенно актуальны для проектов, на которых выпуск некачественного продукта может привести к значительным финансовым потерям (к слову, наш проект именно к таким и относится).
Итак, цели проведения ПСИ:
- Подтвердить соответствие продукта заявленным требованиям.
- Выявить ошибки, допущенные при разработке.
- Подтвердить возможность внедрения в опытную и промышленную эксплуатацию.
Избежать хаоса в подготовке и проведении ПСИ, развеять сомнения в методах убеждения и их эффективности помогают различные нормативно-правовые документы, которые стандартизируют процессы разработки и тестирования.
Один из таких документов, обязательный для любых приёмо-сдаточных испытаний, – это «Программа и методика испытаний».
ДОКУМЕНТ «ПРОГРАММА И МЕТОДИКА ИСПЫТАНИЙ»: ЧТО НУЖНО ЗНАТЬ ТЕСТИРОВЩИКУ
Написанием и форматированием данного документа обычно занимаются специально обученные люди, например, технические писатели.
Однако знать, из чего состоит документ, тестировщику не помешает. Кроме того, подготовка одного из разделов может быть поручена именно тестировщикам.
Обратимся к официальной документации. Согласно межгосударственному стандарту ГОСТ 19.
301-79, документ «Программа и методика испытаний» должен иметь следующую структуру:
- Раздел «Объект испытаний» – название продукта, область его применения.
- Раздел «Цель испытаний» – цели ПСИ, которые мы обозначили выше.
- Раздел «Требования к программе» – требования, подлежащие проверке во время испытаний и перечисленные в «Техническом задании» (ТЗ) на программу. Обратите внимание, требования, которые указываются в данном разделе, должны быть продемонстрированы во время испытаний (или хотя бы запланированы). Если в продукте реализовано 100% требований, но продемонстрировать по тем или иным причинам вы можете только 70%, значит, в этот раздел включаются только 70% требований, которые будут продемонстрированы заказчику. Оставшиеся 30% заказчик будет считать нереализованными до тех пор, пока не убедится в обратном.
- Раздел «Требования к программной документации» – состав программной документации, предъявляемой на испытании, а также специальные требования к документации, если они заданы в ТЗ.
- Раздел «Средства и порядок испытаний» – перечень технических и программных средств, используемых во время испытаний, а также порядок проведения испытаний. Рекомендуем максимально подробно описать все средства, которые вы планируете использовать для демонстрации. Базы данных, программы для чтения содержимого очередей, консоли, логи, автотесты – всё это должно быть зафиксировано в данном разделе, иначе засчитано и допущено к демонстрации не будет.
- Раздел «Методы испытаний» – указывается, как именно проводится демонстрация, какие методы используются для проверки реализации того или иного требования и ожидаемый результат по каждой проверке.
Какой из разделов под силу подготовить функциональному тестировщику? Конечно же, «Методы испытаний». Об этом поговорим позже, а пока ещё немного теории.
КРИТЕРИИ УСПЕШНОСТИ ПРИЁМО-СДАТОЧНЫХ ИСПЫТАНИЙ
Как правило, успешность ПСИ определяется на этапе заключения контракта. Одним из таких критериев может быть процент успешно пройденных во время демонстрации проверок.
Например, если на проверку выносятся 100 тест-кейсов и критерий pass-rate составляет 80%, то 80 тест-кейсов должно быть успешно пройдено, иначе считается, что продукт приёмку не прошел, а значит, не может быть допущен к опытной и промышленной эксплуатации.
На практике же успешность приёмо-сдаточных испытаний чаще определяется не одним критерием, а совокупностью нескольких. Например, учитывается процент реализованных требований от общего числа и ограничение по количеству дефектов того или иного приоритета. Оперируя данными по этим критериям, принимается решение об успешности ПСИ.
На этом необходимая теория заканчивается. В следующей части расскажем, как приёмо-сдаточные испытания проводила команда «Точки качества» и какие трудности ей пришлось преодолеть.
Приемо-сдаточные испытания — Этапы испытаний надежности комплексов программ — Тестирование программного средства
info_technology
admin
Организация завершающих испытаний комплексов программ.
Испытания главного конструктора, которые зачастую совмещаются с завершением комплексной отладки, должны оформляться документально и являются основанием для предъявления ПС заказчику на завершающиеся совместные испытания. Любые испытания ограничены допустимым объемом проверок и длительностью работы комиссии, поэтому не могут гарантировать абсолютную проверку изделия. Для повышения достоверности определения и улучшения характеристик ПС после испытаний главного конструктора программы целесообразно передавать некоторым пользователям на опытную эксплуатацию в типовых условиях. Это позволяет более глубоко оценить эксплуатационные характеристики созданного комплекса и устранить некоторые дефекты и ошибки. Опытная эксплуатация проводится разработчиками с участием испытателей и некоторых пользователей, назначаемых заказчиком. Результаты и показатели надежности опытной эксплуатации после испытаний главного конструктора могут учитываться при проведении совместных испытаний для их сокращения.
Совместные приемо-сдаточные испытания проводятся комиссией заказчика, в которой участвуют главный конструктор разработки и некоторые ведущие разработчики, аттестованные сертификационной лабораторией. Комиссия при испытании руководствуется следующими документами:
• утвержденным заказчиком и согласованным с разработчиком техническим заданием и спецификациями на ПС;
• действующими государственными и ведомственными стандартами на проектирование и испытания программ и на техническую документацию, а также согласованными с заказчиком стандартами «де-факто»;
• программой испытаний по всем требованиям технического задания;
• методиками испытаний по каждому разделу требований технического задания;
• комплектом эксплуатационной документации на комплекс программ.
Программа испытаний является планом проведения серии экспериментов и разрабатывается с позиции минимизации объема тестирования в процессе проведения испытаний для проверки выполнения требований технического задания и соответствия предъявленной документации.
Программа испытаний, методики их проведения и оценки результатов, разработанные совместно заказчиком и разработчиком, должны быть согласованы и утверждены. Они должны содержать уточнения и детализацию требований технического задания для данного ПС, а также гарантировать корректную проверку всех заданных характеристик, в том числе надежности. Программа испытаний должна содержать следующие четко сформулированные разделы:
• объект испытаний, его назначение и перечень основных документов, определивших его разработку;
• цель испытаний с указанием всех требований технического задания, подлежащих проверке, и ограничений на проведение испытаний;
• собственно программу испытаний, содержащую проверку комплектности спроектированного ПС в соответствии с техническим заданием, и план тестирования для проверки по всем разделам технического задания и дополнительным требованиям, формализованным отдельными решениями разработчиков и заказчика;
• методики испытаний, однозначно определяющие все понятия проверяемых характеристик, условия и сценарии тестирования, средства, используемые для испытаний;
• методики обработки и оценки результатов тестирования по каждому разделу программы испытаний.
Тестирование перед приемом на работу | Лицензирование и сертификация
Я сдаю экзамен
Найдите свой тест, найдите центр тестирования, зайдите в наш магазин, получите ресурсы для тестирования или свяжитесь с нами.
Узнать больше
Я являюсь спонсором тестирования
Узнайте больше о партнерстве с PSI для ваших потребностей в тестировании и разработке.
Узнать больше
Мне нужны решения для управления талантами
Хотите найти, нанять, развивать и удерживать квалифицированных сотрудников с проверенными оценками?
Откройте для себя Talogy.com
Важное примечание: Обновление, касающееся COVID-19 (новый коронавирус)
Избранные сообщения в блоге
Будьте в курсе последних исследований, передового опыта и советов наших экспертов
Не все микро-учетные данные одинаковы: 5 вариантов с новым микро-учетным законодательством
Д-р Изабель Гонтье, старший вице-президент Наука о содержании в PSI Services
Диапазон и формат доступных микроучетных данных очень разнообразны — от группируемых до специализированных, от полностью удаленных до мультимодальных.
Теперь проще, чем когда-либо, демонстрировать знания с помощью этого пути обучения и развития. Микро-учетные данные — это возможность более легко повысить квалификацию, независимо от того, остаетесь ли вы в новой области или переключаетесь на нее, и они более гибкие, чем некоторые традиционные маршруты.
Talogy – 27 апреля 2022 г.
Технологии и психология на практике: более надежный способ оценки талантов Знакомство с Talogy
Peter Celeste
Президент Talogy
Истории клиентов
NBRC
PSI и NBRC: вместе строим будущее респираторных обследований
Читать историю
The Linux Foundation
Везде и в любое время Сертификация Linux на основе технологии онлайн-прокторинга PSI и опыта совместной работы
Прочитать историю
Dixons Carphone
Непредвзятый отбор с Hire: Набор выпускников в Dixons Carphone
Прочитать историю
900 Медсестры интенсивной терапии
Предоставление пациентам опыта медсестер интенсивной терапии и прогрессивного ухода
Read Story
Washington State OIC
Создание первого экзамена по гибридному страхованию вместе.
Прочитать историю
Marks & Spencer
Создание разнообразных команд лидеров на будущее
Прочитать историю
OnlineDegree.com
Сделать колледж доступным с помощью Protorc0 Онлайн 0
Прочитать историю
Предыдущий
Следующий
Тесты на знание английского языка для жизни и учебы
- Тесты на знание английского языка одобрены Министерством внутренних дел для подачи заявлений на получение визы в Великобританию и широко принимаются учебными заведениями для поступления в университеты
Будущее начинается здесь
- Первый шаг к получению аттестата об эквивалентности средней школы, признаваемого всеми штатами, территориями и юрисдикциями США
Мы являемся ведущей мировой компанией по развитию карьеры
2000+
Эксперты
, работая психологами, технологами и менеджерами -клиентами
160
Страны
с тестирующими программами, управляемыми PSI
30M+
.
проводится PSI каждый год по всему миру
Узнайте, как PSI может вам помочь.
Свяжитесь с нами
Свяжитесь с нами
Свяжитесь с нами
Свяжитесь с нами
Свяжитесь с нами
Свяжитесь с нами
Запросить демонстрацию
О нас — PSI Online
Где люди раскрывают потенциал
PSI Services — мировой лидер в области кадровых решений с более чем 70-летним опытом реализации успешных программ тестирования, помогающих людям добиться успеха в учебе, личной жизни и работе.
Лучшее в своем классе программное обеспечение для тестирования
С 2014 года PSI приобрела ведущие компании, занимающиеся технологиями тестирования и оценкой персонала, которые теперь работают под брендом PSI.
Никто не обладает широтой и опытом PSI для создания современной рабочей силы.
Мы — PSI, ваш ведущий поставщик кадровых решений
Более 70 лет PSI предоставляет решения для оценки и управления талантами ряду организаций частного и государственного секторов. Мы приобрели ведущие технологические, контентные и консалтинговые компании как в США, так и за рубежом в рамках наших амбициозных планов роста, чтобы предложить клиентам идеальное сочетание новых технологий, контента мирового уровня и консалтингового опыта.
В настоящее время мы работаем с более чем 2000 экспертов в 160 странах и проводим более 15 миллионов тестов и оценок в год по всему миру.
Настоящее партнерство с каждым клиентом
PSI сотрудничает с нашими клиентами, чтобы предоставлять ориентированные на результат, ориентированные на ценность и услуги решения для тестирования с бескомпромиссной честностью. Работодатели, правительства, профессиональные ассоциации, органы по сертификации и лицензированию, а также ведущие образовательные учреждения доверяют нам выполнение нашей миссии по оказанию помощи людям в достижении успеха благодаря превосходному тестированию, включая разработку тестов, администрирование, мультимодальную доставку и услуги по управлению лицензиями.
Позвольте нам показать вам, насколько простым может быть тестирование, когда на вашей стороне эксперты и технологии PSI.
Лучший опыт для каждого кандидата
Каждый день десятки тысяч кандидатов проходят тест PSI, чтобы улучшить свою жизнь или потенциал заработка, а также воспользоваться нашим первоклассным обслуживанием по всему миру, чтобы сдать экзамены и получить оценку или сертификацию, часто на их местном языке. Более чем в 160 странах PSI реализует критически важные программы тестирования в каждом секторе, имея выдающийся послужной список в таких отраслях, как авиация, финансы, здравоохранение, производство, сертификация ИТ, недвижимость, косметология, страхование и строительство.
Готовы ли вы вместе определять будущее тестирования и оценки персонала? Узнайте, как наши инновационные технологии, проверенный контент и опыт мирового уровня помогают нашим клиентам раскрывать свой потенциал — в школе, дома, на работе или в одном из наших глобальных центров тестирования.