Quality Assurance, STUdying, GAmification, MAnagement

четверг, 12 июня 2014 г.

BBST: Foundations - обзор курса

Как я уже говорил и обещал, в апреле-мае я закончил онлайн-обучение по курсу BBST: Foundations. На днях мне пришло письмо об успешном окончании курса и диплом, и теперь я могу с полным правом выполнить свое обещание: написать о курсе подробнее.

Ранее я уже публиковал перевод статьи Сэма Канера "Неудача Udacity", об онлайн-образовании, о том, как сделать его более эффективным, что для этого необходимо. Мне было интересно сопоставить мнение Канера с тем, как он решал проблемы, обозначенные в статье, в своих онлайн-курсах.

BBST: Foundations - первый из серии курсов серии Сэма Канера, рассказывает, как ясно из названия, о базовых вещах в тестировании. Обязателен для прохождения, если вы планируете изучать следующие курсы. На текущий момент "следующими" ступенями являются курсы:

BBST: Bug Advocacy - оттачиваем навыки написания баг-репортов: начиная от определений бага, дефекта, жизненного цикла отчета, воспроизведения и исследования бага до написания хорошо структурированного отчета;
BBST: Test Design - от определения тест-дизайна и техник до их практического применения и эвристической модели тестовой стратегии (Heuristic Test Strategy Model)
BBST: Instructor Course - для тех, кто хочет стать инструкторами курсов BBST, либо для компании, либо как независимый консультант.

Стоимость курса BBST: Foundations - 125 долларов + будет необходимо оплатить членский взнос за вступление в AST - сообщество (насколько я помню, это 20$ за год как студент). Курсы по Bug Advocacy и Test Design стоят уже 200 долларов, а курс инструкторов - бесплатный.

Курс длится 4 недели: 3 недели на темы + 1 неделя на подготовку и сдачу экзамена. Рекомендуемое время для изучения - 12-14 часов в неделю. По своему опыту скажу, что у меня где-то так по времени и получалось. Одна деталь: это число "чистых" часов, без отвлечений. Желательно распланировать загрузку более равномерно в течение всей недели. Так как тем в курсе шесть, то получается по 2 темы на семь дней.

Темы курса BBST: Foundations:

Общий обзор курса и базовые понятия (компьютерная программа, баг, тестирование ПО, "ящики", виды тестирования и т. д.);
Стратегия тестирования (определение тестирования, миссия, цели тестирования, стратегия, дизайн, контекст, техники);
Использование эвристик и оракулов (определения оракулов, тестируемой системы, эвристик и их оценки, оракулы соответствия и оракулы Хоффмана)
Основы программирования и покрытие (вычисления, системы счисления, представления чисел в памяти, типы переменных, структуры данных, покрытия состояний и ветвей
Невозможность полного тестирования (покрытие, полное тестирование и примеры его невозможности
Измерения (основы измерений, параметры измерений, модель Вейбулла, искажения и дисфункции

Для курса вам понадобится достаточно хороший английский (мое мнение, не ниже уровня Intermediate - B1) - для чтения литературы, понимания лекций, комментирования своих и чужих ответов. В моей группе было 2 индуса, один белорус (это я), немец, португалец, остальные 12 человек - native-speaker'ы (UK, US, Canada, New Zealand). Так что только с "Ландан из зэ кэпитал оф Грэйт Бритэйн" и гугл-транслейтом будет тяжеловато.

Курс включает в себя:

Лекции (доступны в бесплатном доступе - http://www.testingeducation.org/BBST/foundations/);
Презентация - одна на весь курс, тоже в бесплатном доступе с лекциями;
Материал для чтения: обязательный и дополнительный. Я прочитал весь обязательный, дополнительный - что больше было для меня актуально на тот момент.
Тесты для самопроверки (quiz) - всего их 5, по одному к каждой теме. Для ответов можно пользоваться чем угодно (open book), авторы курса советуют проходить тест параллельно с просмотром лекций для лучшего понимания и закрепления материала. Каждый тест имеет жесткий дэдлайн, после которого ответы не принимаются и тест считается не пройденным.
Всего в каждом тесте порядка 10-12 вопросов, ответы с множественным выбором. Интересная схема оценки правильности ответа: полностью правильный ответ - 1 балл, частично правильный (если в вашем ответе выделенные ответы являются правильными, но ответ не полон. Например, если вы выбрали варианты A и B, а в правильном ответе должны быть варианты A, B, C, то ваш ответ будет частично правильным), то вы получите 0.25 балла, во всех других случаях (неправильный ответ или даже "частично неправильный") вы получаете 0 баллов за вопрос.
Еще один усложняющий момент теста - вы должны отвечать "According to the lecture", как хотите. В общем, у меня редко получалось набрать в тесте больше 70% от максимума.
Домашние задания: упражнения, которые нужно выполнить перед просмотром лекции (для того, чтобы оценить свой текущий уровень знаний и сравнить его с тем, что вы услышите на лекциях), командные задания (работа в группе из 4-5 человек по заданной теме, обсуждение в форуме, общий результат обсуждения оформляется в Вики), оценка работы коллег и других команд (peer evaluation). Именно командная работа и оценки коллег - одна из самых сильных частей данного курса. Небольшая ложка дегтя - хотелось бы еще больше фидбэка от инструкторов курса. Комментарии инструкторов есть, но их мало.
Вопросы для тренировки перед экзаменом: 10 "коротких" и 10 "длинных" (в зависимости от объема ответа, который от вас требуется: например, короткий - это пару абзацев, длинный - развернутое эссе, порядка 5 абзацев). Это отличная возможность поупражняться в своих ответах, оценить других и самому получить оценку.
Итоговый экзамен (Closed Book Exam - ничем нельзя пользоваться, так обучение онлайн, конечно, никто над вами не стоит, но если вас заподозрят в списывании - курс засчитывается как Failed без возможности пересдачи). Экзамен состоит из 3 "длинных" и "коротких" случайных вопроса из пула вопросов для тренировки перед экзаменом. Очень важно отвечать на вопрос кратко и по существу, не отвлекаясь на то, что не спрашивается в вопросе, так как это трактуется как неумение выделить только самое главное и/или незнание, а вследствие - желание написать все подряд "для объема". Лучше отвечать меньше, но качественнее, при этом вы должны показать, что поняли тему вопроса и знаете то, о чем пишете.
После итогового экзамена, вы будете должны оценить работы 2 коллег, а также поставить себе оценки за каждый вопрос.

У домашних заданий и тестов установлены дэдлайны, поэтому желательно, конечно, позаботиться о том, чтобы у вас было как минимум время и онлайн-доступ с возможностью работать с материалом (особенно актуально летом в период отпусков). Так как есть групповые домашние задания, то из-за разницы в часовых поясах лучше работать оперативно, не откладывать все на последний вечер.

Из 12 рекомендованных часов у меня выходило порядка 2-4 часов на теорию (лекции + материалы) и тест по теме, остальные 8-10 часов - на домашние задания. По этим данным можете судить сами, насколько курс Foundations практический.

В целом, курс однозначно стоит порекомендовать тем, кто уже обладает некоторым опытом в тестировании: вы получите структурированные знания, расширите свой кругозор и примените это сначала на практике в домашних заданиях, а затем и на проекте. На мой взгляд, это лучший курс как баланс между теорией и практикой. Сам рекомендую данный курс, и ставлю в свой дальнейший план прохождение курсов Bug Advocacy и Test Design.

На этом все. Если есть еще вопросы по BBST - пишите в комментариях, отвечу.

вторник, 10 июня 2014 г.

Хэб Схотс "Эвристики для распознания тестировщиков-профессионалов" - перевод

Продолжаю серию переводов статей по тестированию. Статья Хэба Схотса расскажет вам об эвристиках для распознавания тестировщиков-профессионалов. Если вас интересует данная тема, из самого свежего также порекомендую доклад Алексея Лянгузова "Успешный тестировщик. Путь профессионала" на SQA Days-15, о котором я писал в обзоре первого дня конференции.

Ссылка на оригинал - http://www.huibschoots.nl/wordpress/?p=1666
Формат текста (выделение терминов, курсив, цитирование) и ссылки на другие статьи из текста взяты с оригинала "как есть".

Helena Jeret-Mae задала вопрос в твиттере: "Какие ваши критерии профессионализма тестировщиков и CDT-комьюнити?" Позже в емейле она уточнила свой вопрос: "Обновленная версия моего вопроса: какие по-вашему мнению существуют эвристики распознавания профессионального тестировщика? Я заменила "критерии" на "эвристики", этот термин менее категоричный. И я оставила термин "профессионализм" на ваше усмотрение - я не знаю точно, что вы подразумеваете под ним".

В своем выступлении "Как стать великолепным тестировщиком" на конференции ContextCopengagen в январе 2014 года я говорил о тестировщиках и их навыках. Я говорил, что многие тестировщики не знают, что они делают, и не могут доходчиво объяснить, какую ценность они вносят в проект. Я повидал много тестировщиков, которые раз за разом используют один и тот же подход. Если я спрашиваю, какие тестовые техники им известны, они называют совсем немного. Если я прошу их объяснить мне техники или показать, как они работают, у них нет ответа. Для меня это шок, и я не могу объяснить, почему тестировщики, называющие себя профессионалами, знают так мало про свое ремесло и совсем не обучаются ему.

Вот почему я делаю различие между тестировщиками-профессионалами (которых я считаю очень мало) и тестировщиками по профессии. Конечно, я знаю и понимаю, что всегда будут люди с менталитетом "с 9 утра до 5 вечера", которые не читают книги или блоги и которые только хотят проходить курсы, если начальство их оплачивает. Я принимаю это как данность, но это не значит, что я хочу работать с такими тестировщиками!

Но достаточно разглагольствований, давайте я отвечу на вопрос.

Профессионализм - это быть профессионалом и быть в курсе ожиданий от профессионала. Професииональное тестирование сложное и многообразное, оно имеет несколько измерений: знания, навыки, опыт, отношение, этика и ценности. Я написал пост в своем блоге "Что делает тестировщика хорошим" в 2011-м году на эту тему, и сейчас мне есть что добавить, хотя все, что я написал тогда, тоже верно. В моих более ранних постах я не упоминал ценности и этику, и сейчас я нахожу их крайне важными. Джеймс Бах написал о них в заметке "Размышления об этике в тестировании" и "темы Быстрого Тестирования", которые упоминаются на слайдах презентации "Быстрое тестирование ПО".

Довольно трудно распознать профессионального тестировщика. Каждый тестировщик уникален и имеет неповторимые черты характера. Проекты тоже разные, и чтобы быть успешным в поиске походящего тестировщика-профессионала для вашего проекта, одни характеристики будут более важными, чем другие. Можно вспомнить много характеристик, поэтому чтобы распознавать хорошего тестировщика, я буду использовать эвристики. Эвристики - методы, подверженные ошибкам, предназначенные для решения проблем или принятия решений, наиболее рациональные способы для упрощения сложной проблемы или эмпирические правила.Они используются для определения достаточно хороших способов решения за разумное время. В Википедии я нашел такое определение: "Эвристики - техники, основанные на опыте, для решения проблем, обучения, открытий, которое не обязательно будет наилучшим. Там, где полный поиск непрактичен, эвристические методы используются для ускорения процесса поиска удовлетворяющего решения благодаря ментальным образам для уменьшения когнитивной нагрузки при принятии решений."

Мои эвристики для того, чтобы распознать тестировщиков-професионалов:

1. У них есть парадигма тестирования, и они могут объяснить свой подход в той или иной ситуации.
Профессиональные тестировщики могут объяснить, что такое тестирование, какую ценность они приносят и как они будут тестировать в данной ситуации.

2. Они действительно любят то, что они делают, и увлечены своим ремеслом.
Тестирование - трудная вещь, и чтобы быть успешным, тестировщику необходимо быть упорными в обучении и в своей работе. Страсть помогает им стать настоящими профессионалами. Посмотрите это видео, в котором Стив Джобс говорит о страсти.

3. Они постоянно и в первую очередь учитывают контекст.
Чтобы быть эффективным, тестировщики должны выбрать цели тестирования, техники и, в первую очередь, посмотреть на детали конкретной ситуации. Они признают, что нет "лучших практик", есть только хорошие практики в данном контексте.

4. Они рассматривают тестирование как человеческую активность для решения комплексных и трудных проблем, которая требует хороших навыков.
Тестировщики признают, что тестирование - не техническая профессия. Тестирование включает в себя знания из социальных наук, так как программное обеспечение разрабатывается людьми для людей.

5. Они знают, что разработка и тестирование ПО - командный вид спорта.
Ключ к сотрудничеству - становиться все более эффективным и продуктивным в тестировании. Разработка ПО - командный спорт: люди, работающие вместе, наиболее важная часть любого контекста проекта. Тестировщик-профессионал знает, как работать с разработчиками и другими участниками проекта в любой ситуации.

6. Они знают, что все может быть по-другому.
Тестировщики-профессионалы используют эвристики, практическое критическое мышление, которые и являются эмпирическим. Они знают, что время для тестирования ограничено, системы становятся все более сложными и помнить обо всем трудно. Поэтому эвристики являются очень полезными "инструментами" для тестировщиков. Они также знают, что собственные предубеждения и логические ошибки могут обмануть их. Они практикуют критическое мышление, чтобы уверенно и вдумчиво работать в трудных и сложных ситуациях. Тестировщики должны признавать и работать с неопределенностью, возможными специфичными результатами и неполными ответами.

7. Они задают вопросы, прежде чем cделать что-либо.
Тестирование зависит от многих вещей, и от видимого нам контекста. Что такое информация, которую мы должны найти? Что такое миссия тестирования? Это можно легко проверить, если дать тестировщику упражение на интервью. Если он или она начинает работу над упражнением или отвечает, не задавая вопросы, это о чем-то говорит.

8. Они используют разнообразные подходы.
Не существует подхода или техники, которая найдет все виды багов и выполнит все цели тестирования. Различные техники находят различные баги. Для того, чтобы найти баги, тестировщики должны знать много техник и подходов. Для этого нужны тренировки, практика и еще раз практика.

9. Они знают, что эстимации (оценки) - это переговоры.
Обратите внимание на эти статьи в блоге Майкла Болтона:

10. Они используют тест-кейсы и тестовую документацию с умом.
Контекст определяет, какую тестовую документацию вы должны создать и какой вид документации полезен. Совсем недавно отличная (и объемная) статья Джеймса Баха и Аарона Ходдера была опубликована в Testing Trapeze "Тест-кейсы не тестируют: на пути к культуре производительности тестирования". Также Фиона Чарльз поделилась своими интересными мыслями о тестовой документации в статье "Разрушаем Тиранию Форм".

11. Они непрерывно изучают свое ремесло, много тренируются и практикуют "осознанную практику".
Осознанная практика - структурированная активность с целью улучшения производительности. Андерс Эрикссон выделяет четыре основные компоненты осознанной практики. Она должна быть намеренной, направленной на улучшение производительности, предназначенной для вашего текущего уровня квалификации, сочетающая мгновенную обратную связь и повторения.

12. Они отказываются делать работу плохо, никогда не мошенничают, имеют мужество, чтобы сказать своим клиентам и коллегам о своих ценностях и этике.
Тестирование часто недооценивается, и многие уверены, что "любой может тестировать". В моих командах были опытные менеджеры проектов, которые говорили мне как работать. Профессиональные тестировщики знают как сдвинуть сроки и могут объяснить, почему они делают то, что делают.

13. Они любознательны и любят изучать новые вещи.
Тестировщики получают удовольствие от выяснения сути вещей. О любознательном поведении хорошо написал Гай Мейсон: "Любознательный ум можно описать как активный, вовлеченный, пытливый. Такой склад ума часто находится в поисках новой информации, получает удовольствие от исследований того, что есть и наслаждается процессом, сопровождающим процесс достижения этой цели".

14. Они могут обладать нижеперечисленными навыками межличностного общения. Как я упоминал ранее, от контекста зависит, какие навыки наиболее важны.

Письменные навыки (отчетности, сообщения, краткие сообщения)
Коммуникативные навыки (умение слушать, рассказывать истории, готовить презентации, умение говорит "нет", устный отчет, умение аргументировать и договариваться)
Социальные и эмоциональные навыки (эмпатия, умение вдохновлять, нетворкинг, управление конфликтами и консалтинг)
Навыки решения проблем
Навыки принятия решений
Навыки обучения и изучения
Быть проактивным и уверенным в себе

15. Они великолепно владеют навыками тестировщика:

Навыки мышления (критическое, латеральное, креативное, системное мышление)
Аналитические навыки
Моделирование
Анализ рисков
Планирование и оценка
Умение применять различные тестовые техники
Исследование
Проектирование эксперимента
Наблюдение

В приложении "Динамика исследовательского тестирования" к документу "Быстрое тестирование ПО" вы можете найти списки навыков.

16. Они обладают достаточными техническими навыками.
Есть много технических навыков, которыми должен обладать тестировщик, к примеру уметь использовать тулы, обладать навыками кодирования или желанием изучать техническую структуру приложения, которое он тестирует. Навыки автоматизации, такие как написание скриптов, знание SQL для работы с базами данных, быть способным сконфигурировать и установить ПО. знания и навыки работы с платформой, на которую устанавливается тестируемая система (Windows, Linux, мобайл, и т.д.)

Возможно, это список не полон. Вполне может быть, что я допустил ошибки. Поэтому, если хотите внести свою лепту или улучшить список, пожалуйста, дайте мне знать. Также я хочу сказать, что быть профессионалом не означает быть экспертом во всех упомянутых навыках. Если хотите узнать больше про уровень эксперта, советую посмотреть модель Дрейфуса. Настоящий профессионал знает, что он или она может сделать и когда надо попросить о помощи. Они не боятся учиться и не боятся сделать ошибку. Я считаю, это должен быть семнадцатый пункт в списке эвристик.

Между прочим, я погуглил запрос "кодекс этики тестирования ПО" и обнаружил Кодекс Этики ISTQB для тестировщиков-профессионалов. Мне интересно, знают ли о нем люди, которые сдавали экзамен И, что более важно, используют его в своей практике. А вы используете?

Хэб Схотс, 23 марта 2014 года.

P.S. Для дальнейшего улучшения качества переводов буду рад редакторской помощи: вы получите первым вариант статьи и сможете внести свои улучшения перед окончательной публикацией в блоге. Вы также будете включены в список благодарностей под каждым переводом со ссылкой (если пожелаете) на ваш профайл или сайт.
Если вы обладаете хорошим английским и русским, видите несовершенства данного перевода и желаете сделать будущие переводы лучше - пишите мне - www.google.com/+ЛадутькоАндрей

четверг, 5 июня 2014 г.

Книжная полка. Джош Кауфман "Сам себе MBA"

Новый экземпляр на книжной полке - Джош Кауфман "Сам себе MBA".

Если вы смотрите лекции ted.com, вы наверняка уже знакомы с этим автором по его выступлению "Первые 20 часов - как научиться чему-либо". В блоге уже есть конспект лекции и практические шаги по применению, которые я предлагаю использовать из своего опыта. Этот пост - самый популярный в моем блоге, значит, тема действительно актуальная для читателей. Просмотр данного видео или конспекта поможет вам в понимании и применении книжки, о которой я сейчас буду рассказывать.

Джош Кауфман "Сам себе MBA", на oz.by

Технико-тактические характеристики:

Год издания: 2014

Страниц: 464

Формат: 170*240 мм

ISBN: 978-5-91657-911-6

Язык - русский
Скорость чтения - выше среднего

Ориентировочное время на прочтение: 7 - 10 часов
Полезность - высокая

Прочтение книги - первый шаг в программе "Первые 20 часов": изучите достаточно материала для того, чтобы вы могли самостоятельно находить у себя ошибки. Если вы планируете начать знакомство с бизнесом, но не хотите тратиться на дорогостоящие программы MBA, то книга для вас. Как утверждает сам автор, данная книга - выжимка самой полезной информации, собранной из многочисленного количества прочитанных книг и приобретенного опыта Джоша Кауфмана.

Кроме самой модели обучения любому навыку, полезно обратить внимание на саму структуру книги. Информация подается кратко: настолько, чтобы описанную идею можно было освежить в памяти (если вы это знаете), либо чтобы получить первоначально необходимую минимальную информацию об идее, а при необходимости - обращайтесь к литературе из списка либо на сайт автора - http://personalmba.com/best-business-books/ Чем-то напоминает силлабус из подготовки к экзамену ISTQB, но язык более живой и доступный.

Книга состоит из двенадцати глав, некоторые из них имеют не только бизнес-направленность, но будут полезны любому человеку, который стремится развиваться. Из бизнес-направленных глав - Создание ценности, Маркетинг, Продажи, Доставка ценности, Управление финансами. Из глав "по саморазвитию" - Человеческий мозг, Работа над собой, Работа с другими, Понимание систем, Анализ систем, Улучшение систем. Так что данная книга будет полезна не только бизнес-ориентированным читателям: вы можете читать наиболее интересующие вас главы, а далее, как я уже говорил, двигаться по ссылкам и литературе.

Общий вывод: крайне полезная книга, если вас интересует бизнес - однозначно must read, но и "не бизнес-ориентированные" читатели найдут для себя немало полезного. Отдельного упоминания заслуживает как сама идея самообучения без финансовой иглы "дорогостоящих программ MBA", нацеленность на практику, структура книги: ее язык и ссылки на книги для углубленного изучения необходимой темы, и то, сама книга организована как учебник. В итоге, книга крутая как ни посмотри, обязательно к прочтению. Ну а я поставлю-ка себе в ToDo-лист - сделать карту памяти по книге.

воскресенье, 1 июня 2014 г.

Рубрика "ПочитайQA". Полезные ссылки за май-2014

Начинаем новый месяц, по традиции первого числа каждого месяца - рубрика "ПочитайQA", или список ссылок, на этот раз все самое интересное за май. Предыдущую подборку за апрель можно найти здесь - http://qastugama.blogspot.com/2014/05/2014-04-useful-links.html.

Мой майский done-лист:

Закончил курс BBST:Foundations, довольно плотная загрузка по 12-14 часов в неделю с жесткими дедлайнами и много практики, но оно того несомненно стоило. Более подробно расскажу в одном из июньских постов..
15 мая состоялась встреча QA Club Minsk, посвященная подготовке к ISTQB-экзаменов, на которой в неформальной обстановке антикафе я делился с коллегами своим подготовки и сдачи на сертификат.
Посчитал баллы на ISTQB Advanced Level Technical Test Analyst экзамене и написал обзор книги Graham Bath, Judy McKay "The Software Test Engineer's Handbook".

В июне, помимо рабочей активности, планирую пополнить Книжную полку, собрать мысли по BBST. Это из обязательного, остальное - по ситуации и летней погоде :)

Теперь к ссылкам. Разбиение на группы остается прежним-традиционным:

QA - Quality Assurance, обеспечение качества, все грани со всего мира. Наиболее заинтересовавшие меня статьи по профильной теме за месяц.
STU - Studying, образование и самообразование, обучение.
GA - Gamification, или геймификация тестирования, обучения, управления - всех составляющих Qastugama.
MA - Management and leadership - управление командой, людьми, лидерство. Все составляющие Management.
+
Books - обзоры прочитанных и/или рекомендованных книг.
+
Other - "сборный раздел". То, что не относится к предыдущим четырем темам, но то, чем я хотел бы с вами поделиться.
+
Bonus.Fun. - (не)серьезно о тестировании и вообще об IT.

Quality Assurance.

Srinivas Kadiyala "My Learnings on Mobile App Testing" - http://testingeduindia.blogspot.com/2014/05/my-learnings-on-mobile-app-testing.html
Software Testing Blog "10 Reasons Why Your Bugs are Getting Rejected and What You Can Do for it as a Tester!" - http://www.softwaretestinghelp.com/why-your-bugs-are-getting-rejected/
Software Testing Blog "Improving Your Mobile Testing Skills: Where to Start" - http://blog.utest.com/2014/05/08/improving-your-mobile-testing-skills-where-to-start/
Sticky Minds "Risk Management at Test Execution Phase Explained with Practical Example (Part 1 and 2)" -
http://www.softwaretestinghelp.com/risk-management-during-test-planning-risk-based-testing/
http://www.softwaretestinghelp.com/risk-management-at-test-execution-phase/
Alan Page "Stop Writing Automation" - http://angryweasel.com/blog/stop-writing-automation/
Michael Bolton "Scenarios Ain’t Just Use Cases" - http://www.developsense.com/blog/2014/05/scenarios-aint-just-use-cases/
Michael Bolton "Very Short Blog Posts (19): Testing By Percentages" - http://www.developsense.com/blog/2014/05/very-short-blog-posts-19-testing-by-percentages/
"James Bach’s Beautiful Testing Metaphors" от Eric Jacobson - http://www.testthisblog.com/2014/05/james-bachs-beautiful-testing-metaphors.html
Gojko Adzic "Focus on key examples" - http://gojko.net/2014/05/05/focus-on-key-examples/
"In Videos: The Best in Software Testing From James Bach" - подборка лучших выступлений Джеймса Баха - http://blog.utest.com/2014/05/20/in-videos-the-best-in-software-testing-from-james-bach/
Чайка по имени…Джеймс Бах: интервью с известным тестировщиком: http://bit.ly/1mk3uGZ
Хабрахабр "Автоматизация тестирования. Начало пути" C# - http://habrahabr.ru/post/223831/
Тестирование и QA: Интервью с Натальей Руколь - http://smartia.ru/article/testirovanie-i-qa-intervyu-s-natalei-rukol
Лена Фалилеева "Coded UI Test. 10 шагов на пути к успеху." - http://positiveflower.blogspot.com/2014/05/coded-ui-test-10.html
Владимир Кривенко "JMeter: Get started" - http://bugscatcher.net/archives/3613
Фриланс и тестирование, А. Петров - доклад https://www.youtube.com/watch?v=e-0FQn3GYvU&feature=youtu.be
Ольга Киселева "Проверка удаления данных - что происходит с системой?" - http://okiseleva.blogspot.com/2014/05/blog-post_21.html

Studying.

Reedy – Скорочтение, которое действительно можно использовать - http://habrahabr.ru/post/220775/

Gamification.

Bunchball blog "Can Gamification Help You Offer More Flexible Work Arrangements?" - http://www.bunchball.com/blog/post/1439/gamification-flexible-work-arrangements
Bunchball blog "10 Ways You’re Gamifying Every Day" - http://www.bunchball.com/blog/post/1447/10-ways-you%E2%80%99re-gamifying-every-day

Management.

Sticky Minds "The Origins and Future of Scrum: An Interview with Ken Schwaber" - http://www.stickyminds.com/interview/origins-and-future-scrum-interview-ken-schwaber
Иван Селиховкин "Несколько [моих] полезных видео на хабре" - http://pmlead.ru/?p=1920
Лиф Абрахам, венчурный инвестор: почему компаниям стоит отказаться от названия должностей - http://siliconrus.com/2014/05/kill-job-titles/
Максим Дорофеев "Главный признак хорошего списка задач" - http://cartmendum.livejournal.com/155387.html
Максим Дорофеев "Почему большинство инструментов (для ведения списков задач) плохие?" - http://cartmendum.livejournal.com/155131.html
Михаил Субоч "Как оставаться продуктивным когда хочется спать" - http://lifeidea.org/2014/05/low-energy-survival-guide/

Books.

"Обзор книги: Д.Роэм, Визуальное мышление" от Алексея Пименова - http://pimenaus.ru/2014/05/27/obzor-knigi-roem-vizualnoe-myshlenie/
"Обзор книги: Д.Вайнберг, Закон малинового варенья"от Алексея Пименова - http://pimenaus.ru/2014/05/23/obzor-knigi-vajnberg-zakon-malinovogo-varenya/
"Подборка книг на тему публичных выступлений, обучения и подготовки презентаций" от Натальи Руколь - http://natalyarukol.ru/2014/05/11/8-10-52-podborka-knig-na-temu-publichnyih-vyistupleniy-obucheniya-i-podgotovki-prezentatsiy
Записки программиста "FAQ: Как мне удается читать так много книг, и при этом еще запоминать что-то из прочитанного" - http://eax.me/reading/

Other.

Александр Селяев про аттестации "Ролевые Игры: Аттестация, Демотивация или "Олег, ну ты же все понимаешь..."" - http://seljava.blogspot.com/2014/05/blog-post.html
"Подслушано – жизнь намного интереснее любого вымысла" - http://fit4brain.com/5038
Саша Баглай "Этапы изменения" - http://www.apofig.com/2014/05/blog-post_16.html
Люди хаоса - http://interesno.co/mag/96d13bb8d8d4
20 гифок о том, как устроено все на свете - http://news.tut.by/kaleidoscope/398641.html

Bonus. Fun.

Гугл транслейт детектед: 25 эпичных ошибок машинного перевода - http://www.adme.ru/vdohnovenie-919705/gugl-translejt-detekted-694105/
Как правильно уезжать с работы в пятницу - http://coub.com/view/1vszl

Наступившее лето - пора отпусков и/или эффективного обучения. Желаю вам либо успешно совместить, либо выбрать одну из этих активностей, а затем насладиться процессом и результатом. До встречи в июне, оставайтесь с Qastugama!

четверг, 29 мая 2014 г.

Книжная полка. Graham Bath, Judy McKay "The Software Test Engineer's Handbook"

После небольшого перерыва - очередной экземпляр на моей книжной полке. Это книга Graham Bath, Judy McKay "The Software Test Engineer's Handbook". Уникальная книга, которую "нельзя просто так взять и прочитать". Для продвинутых тестировщиков и тех, кто считает себя таковыми, - must read. Подробности - ниже.

Технико-тактические характеристики:

Год издания: 2011

Страниц: 397

Формат: 205*290 мм

ISBN: 978-1933952246

Язык - английский
Скорость чтения - ниже среднего

Ориентировочное время на прочтение: 14-18 часов
Полезность - высокая

Эта книга оказалась для меня уникальной по нескольким причинам. Первое - скорость чтения на "не родном языке" упала где-то в два раза. Второе - книга и сама по себе нелегкая в понимании, но при этом - нисколько не сложная и не занудная. Авторам удалось пройти по лезвию бритвы между тем объемом информации, которая заложена в книге, и вниманием читателя, чтобы читатель не бросил читать книгу как "слишком заумную и непонятную". В первую очередь, благодаря многочисленным примерам из своего опыта (так называемым "war stories") и увлекательному повествовательному стилю.

Вряд ли вы прочитаете ее одним залпом. Лично я читал книгу почти 3 месяца, небольшими порциями, с начала и до конца. Как вариант, можете читать только интересующие вас главы. Особенно, если вы по этой книге будете готовиться к экзаменам ISTQB Advanced Level Test Analyst и Technical Test Analyst, о которых вы можете почитать в моем блоге, или вы просто ищете информацию по какой-то одной конкретной теме из нескольких источников. Здесь вы не найдете примеры заданий, как в серии "Advanced Software Testing" Рекса Блэка, но книга Бэт и Маккей проще для восприятия, при этом оба автора входят в число составителей силлабуса ISTQB, так что формулировки и используемые определения очень близки к силлабусу.

О структуре книги. Как обычно, первая глава - введение, о чем и зачем эта книга, вторая глава - описание тестового проекта, на примере которого и будут рассмотрены две большие части этой книги:

Первая часть - функциональное тестирование, техники. В нее входят главы про

техники тестирования черного ящика (Specification-Based Testing Techniques)
техники тестирования белого ящика (Structure-Based Testing Techniques)
техники тестирования, основанные на дефектах (Defect Based Testing Techniques)
техники тестирования, основанные на опыте (Experience Based Testing Techniques)
аналитические техники - статический и динамический анализ (Analysis Techniques)

Вторая часть - атрибуты качества функционального и нефункционального тестирования

Для функционального тестирования - аккуратность (Accuracy), пригодность (Suitability), взаимодействие (Interoperability), функциональная безопасность (Functional security)
Для нефункционального тестирования - удобство использования (Usability), доступность (Accessibility), эффективность (Efficiency, включает в себя производительность , масштабируемость и использование ресурсов), безопасность (Security), надежность (Reliability), сопроводимость (Maintainability), портативность (Portability).

И последние главы: про ревью, концепцию использования инструментов и коммуникационные навыки.

На мой взгляд, первая часть описана довольно хорошо. Про техники черного ящика, если вы читали книги Коупленда, Майерса или Канера, вы вряд ли найдете много нового, но "козырная карта" данной книги Бэт и МакКей - техники белого ящика: примеры, описания покрытий кода даны просто отлично, и при этом достаточно понятно. Дается разбор не только покрытия состояний (statement coverage) и покрытия ветвей/решений (branch/decision coverage) - вопросы уровня ISTQB Foundation Level - но и покрытия условий (condition coverage), множественного покрытия ветвей (multiple condition coverage), тестирования циклов (loop testing, LCSAJ). Также в книге описывается различие и сравнение данных покрытий.

Вторая часть менее техническая и больше "философская", читается сложнее, но примеры достаточно интересны. Если про удобство использования, эффективность (включающую тестирование производительности) еще можно почитать в других книгах, то с другими характеристиками (например, надежность, сопроводимость) я в проектах не встречался и в книгах не читал.

Последние 3 главы написаны достаточно кратко и обзорно. Если вы готовитесь к экзаменам ISTQB Advanced Level, то рекомендую почитать про ревью дополнительно, например, в упомянутой серии книг Рекса Блэка, так как вопросы на эту тему достаточно сложные. А про коммуникативные навыки более подробно можно ознакомиться как в силлабусе для тест-менеджера, так и в других книгах по управлению. В экзамене на тест-аналитика всего один вопрос по коммуникациям, а на технического тест-аналитика - ни одного.

Общий вывод: хорошая, полезная книга в оригинале на английском, если вы готовитесь к экзамену ISTQB AL TA или TTA, то читать обязательно. Для остальных тоже достаточно полезна в качестве чтения либо целиком, либо отдельных глав по интересующим вопросам. Достаточно полно и доступно освещена тема техник тестирования белого ящика, а также будет интересно почитать про атрибуты качества для расширения общего кругозора.

четверг, 15 мая 2014 г.

Посчитаем баллы. ISTQB Advanced Level Technical Test Analyst экзамен.

Завершим трилогию про ISTQB Advanced Level уровни рассказом про экзамен на технического тест-аналитика - ISTQB Advanced Level Technical Test Analyst.

Мои предыдущие обзоры:

Advanced Level - общая информация - http://qastugama.blogspot.com/2013/11/istqb-advanced-level-general-info.html
Advanced Level Test Analyst - http://qastugama.blogspot.com/2013/11/istqb-al-ta-points.html
Advanced Level Test Manager - http://qastugama.blogspot.com/2013/11/istqb-al-tm-points.html

Первое отличие экзамена Technical Test Analyst - в регламенте. На экзамен выделяется 2 часа для native-speaker'ов, плюс time bonus 30 минут, если в вашей стране английский не является официальным языком. Итого 2 часа 30 минут, против 3 часов 45 минут на тест-аналитика или тест-менеджера.

Соответственно, количество вопросов уменьшается: 45 вопросов вместо 65 на аналитика и менеджера. Максимальное количество баллов, которые можно получить, равно 80, проходной балл - 65 процентов от максимума, или 52 балла.

Вопросы оцениваются по-разному: вопросы уровня К2 (понимать) - 1 или 2 балла, уровня K3 (применять) - 2 балла, K4 (анализировать) - 2 или 3 балла. В вопросах, которых правильных ответов не один, а несколько (multiple choice answers), как и для всех экзаменов уровня Advanced, указано, сколько вариантов ответа являются правильными (по умолчанию, если не указано иное - только один). В multiple choice answers обычно не 4 варианта ответа, а 5, поэтому надо выбрать 2 или 3 (как указано в вопросе) из 5.

Для подготовки к экзамену на технического тест-аналитика силлабус - необходимое, но явно не достаточное условие: как и в случае с экзаменом на тест-аналитика (Test Analyst), вам понадобится дополнительная литература, и в первую очередь - по вопросам с тестированием белого ящика. Рекомендую следующие книги:

Rex Black, Jamie Mitchell "Advanced Software Testing Vol.3. Guide to the ISTQB Advanced Certification as an Advanced Technical Test Analyst", 2011 год - книга написана по разделам старого силлабуса Advanced Level за 2008 год. Можно читать по необходимым разделам, которые вам нужны из нового силлабуса. От начала и до конца читается тяжело: книга составлена по старому , общему для всех трех уровней Advanced, силлабусу 2007 года. Из-за этого некоторые главы и даже части глав относятся к тест-менеджеру, другие - к тест-аналитику и/или техническому тест-аналитику - поэтому книга напоминает сборник глав для прочтения без взаимосвязи и с размытой общей картиной по всему силлабусу для всех уровней.
Graham Bath, Judy McKay "The software test engineer's handbook.
A Study Guide for the ISTQB Test Analyst and
Technical Test Analyst Advanced Level Certificates

А теперь давайте посмотрим на составные части силлабуса для технического тест-аналитика. Сначала посчитаем время, необходимое на подготовку к экзамену, и "вес" каждого раздела (последний силлабус тот же, за октябрь 2012 года, который можно скачать здесь) :

Часть 1. Задача технического тест-аналитика в тестировании, основанном на рисках - 30 минут, или 2,35%
Часть 2. Структурное тестирование - 225 минут, или 17,65%
Часть 3. Аналитические техники - 255 минут, или 20%
Часть 4. Качественные характеристики для технического тестирования - 405 минут, или 31,76%
Часть 5. Ревью - 165 минут, или 12,95%
Часть 6. Инструменты для тестирования, автоматизация - 195 минут, или 15,29%
Общее рекомендуемое время для подготовки к экзамену = 1275 минут, или 100%

Рис 1. Рекомендуемое количество времени для подготовки по каждому разделу

В отличие от экзаменов Test Analyst и Test Manager, явного раздела-фаворита не наблюдается. Нужно одинаково хорошо отвечать на вопросы по всем главам, поэтому советую обратить внимание на следующее.

Для ответа на вопросы 2 и 3 части (про структурное тестирование и аналитические техники) вам дополнительно понадобятся базовые знания языка программирования - примеры кода в вопросах написаны на С++. Часть 4 - качественные характеристики - достаточно объемная, но вопросы не очень трудные. Довольно специфичная часть 5 - Ревью: на трех страницах силлабуса информации явно недостаточно, поэтому обязательно посмотрите главу Reviews в книгах, указанных выше. Для меня этот раздел оказался самым сложным: у меня не так много опыта именно в технических ревью. А вот шестая часть по автоматизации, на мой взгляд, несложная: достаточно базовых знаний и понимания того, как организовывать этот процесс, какие грабли нужно обходить стороной.

Теперь приведу статистику по количеству вопросов в каждом разделе.

Часть 1. Задача технического тест-аналитика в тестировании, основанном на рисках - 2 вопроса, или 4,44%
Часть 2. Структурное тестирование - 9 вопросов, или 20,00%
Часть 3. Аналитические техники - 7 вопросов, или 15,56%
Часть 4. Качественные характеристики для технического тестирования - 12 вопросов, или 26,67%
Часть 5. Ревью - 5 вопросов, или 11,11%
Часть 6. Инструменты для тестирования, автоматизация - 10 вопросов, или 22,22%
Всего 45 вопросов, или 100%

Рис 2. Количество вопросов по каждому разделу

И, наконец, статистика по количеству баллов для технического тест-аналитика.

Часть 1. Задача технического тест-аналитика в тестировании, основанном на рисках - 2 балла, или 2,50%
Часть 2. Структурное тестирование -17 баллов, или 21,25%
Часть 3. Аналитические техники - 13 баллов, или 16,25%
Часть 4. Качественные характеристики для технического тестирования - 24 балла, или 30,00%
Часть 5. Ревью - 13 баллов, или 16,25%
Часть 6. Инструменты для тестирования, автоматизация - 11 баллов, или 13,75%
Общее количество = 80 баллов, или 100%

Рис 3. Количество баллов по каждому разделу

На этом я завершаю обзор, если есть вопросы по экзаменам ISTQB Advanced Level - спрашивайте в форуме или пишите мне. Можете спрашивать как про сам экзамен, так и про разделы силлабуса. В Advanced Level очень много интересных вещей, к которым можно обращаться на своей практике, делиться в статьях и на конференции. Вполне возможно, что продолжение и по мотивам наиболее интересующих вас вопросов следует. Спасибо за внимание, оставайтесь с Qastugama!

четверг, 1 мая 2014 г.

Рубрика "ПочитайQA". Полезные ссылки за апрель-2014

Всем привет! Как обычно, первого числа каждого месяца - рубрика "ПочитайQA", или список ссылок, на этот раз все самое интересное за апрель.

Апрель, как и прошедший март, для меня тоже был очень интенсивным, плотно упакованным на события:

внутренний тренинг в компании с игровыми элементами, тут пригодились и мои знания по геймификации. Пилотный запуск оказался успешным, продолжение следует.
Участие и выступление в конференции SQA Days-15, обзор уже писал: первый день и второй день
Участие в тренинге Майкла Болтона "Критическое мышление для тестировщиков". Обзор и конспект можно почитать здесь - http://qastugama.blogspot.com/2014/04/training-michael-bolton-critical-thinking.html
С 21 апреля прохожу курс BBST:Foundations, нагрузка получается 10-12 часов в неделю, много практических заданий, самостоятельного чтения, работы в группах, и все это в условиях довольно жестких сроков для каждого задания.

Так как сейчас практически все "свободное" время у меня уходит на обучение BBST, то в конце мая планирую написать о курсе и впечатлениях, а пока, если будет время - продолжу серию про экзамены ISTQB и пополню коллекцию - Книжную Полку (прочитанные книги есть, дело за обзорами).

Теперь к ссылкам. Разбиение на группы остается прежним-традиционным: