У нас тут есть вакансия на PM. Первый этап — тестовое задание, ответ на 13 открытых вопросов кейса (в гугл форме).

Сейчас у меня 160 ответов от кандидатов. Это 160 * 13 = 2080 ответов на вопросы. Чтобы это все прочитать и оценить мне нужно 35 часов работы, если считать по 1 минуте на оценку одного ответа на вопрос.

Думал посадить бизнес-ассистента разгребать это все.

Но в итоге подключил LLM для этого дела :)

С помощью ChatGPT разработал критерии оценки для каждого вопроса (Хорошо, Нормально, Плохо). Дополировал их вручную.

С помощью Claude for Sheets подключил к гугл-табличке с ответами Antropic Claude. Ее задача оценивать каждый из ответов на вопрос отдельно по заранее заданным критериям и выносить свой вердикт.

Использую для приоретизации — какого кандидата рассматривать в первую очередь, кого отдавать ассистенту для перепроверки и отказа кандидату. А также для фокусирования внимания на слабых местах кандидата