В итоге, если в ответе было хотя бы 2 хороших ответа из 4 — я разговаривал устно с человеком. Если был 1 крутой ответ — тоже, пусть даже 3 других были отвечены плохо. Если был хотя бы 1 хороший ответ — просил попробовать еще раз и переделать задание.
И это отлично сработало для меня. За год из ~350 откликов, 145 сделали задание хоть как-то. Я поговорил устно где-то с 70-80 людьми. Наняли 5.
Конечно тестовое задание не 100% точный маркер. Я был готов к увеличенному количеству false negatives: когда я откажу кому-то, кто мог бы отлично подойти. Это было осознанное решение. Часть ребят, которым я отказал по результатам тестового — наверное отлично бы справились.
Конечно тестовое задание не может быть единственным способом поиска и отбора. Оно помогает найти тех, с кем стоит поговорить. После этого надо разговаривать и задавать нужные вопросы (например у нас после этого проходит 3 разных интервью: со мной, с другим продакт-менеджером и руководительницей саппорта).
Конечно такой подход и опыт подойдет не всем. У разных компаний разные требования и ожидания. Вещи важные нам, могут быть не важны для других — это нормально. И в вопросах выше есть недостатки. Наверное кто-то скажет, что это вообще неправильно. Это тоже ожидаемо.
Но надеюсь этот опыт будет интересен и тем, кто ищет себе в команду ребят и тем, кто ищет себе работу. Последним же немного очевидных советов.
- Тестовое задание может выглядеть так, что его можно сделать за 10 минут. И возможно его можно сделать за 10 минут. Но если вы его сделаете за 30 минут (или даже 60) это будет иметь драматическое влияние на качество вашего ответа. - Читайте внимательно вопрос. Попытайтесь понять, что там спрашивают. Почему спрашивают. - Если вернуться к ответу на следующий день, подумать и поредактировать — ответ точно станет лучше. - Если в резюме мало нужного опыта (или нет опыта вообще) отличный тщательный ответ на тестовое задание — выделит вас из основной массы.