ага ага, небось для отвода глаз :)

а на самом деле?

Как у нас проходит тестирование на eburg.en.cx, говорю в основном за себя, но до недавнего времени только я и тестировал.
Изначально стоит разделить 2 типа теста.
1. Виртуальный
2. Реальный.

1. Виртуальный тест.
Идея теста состоит в тестировании загадок.
Автор игры скидывает мне задания списком в вордовском файле, без подсказок и без ответов.
Я разгадываю задания, как правило в течении суток.
На следующий день автор скидывает мне полный сюжет с подсказками и ответами. Я сравниваю свои варианты ответов, смотрю что я учел и не учел.
Затем даю автору рекомендации по доработке некоторых заданий.
Автор дорабатывает, забивает все в движок, я проверяю сюжет в движке, на этом тестирование заканчивается.
Так проходит 70% тестов на нашем домене, т.к. ездить и проводить реальный тест нет времени.

2. Реальный тест.
Автор распечатывает на бумажках задания.
Мы садимся в машину, пытаемся максимально иммитировать полевые условия (ноут, мобильный интеренет, 1-2 человека на тесте).
Автор выдает нам задания по порядку, мы разгадываем, подсказки не по времени, а когда мы говорим, что пора дать подсказку. Подсказки лучше тоже распечатать на бумаге, а не слышать их от автора.
Разгадав едем на место, смортим где можно разместить код, что интересного можно сделать на локации и т.д.
Советы по загадкам даем по ходу раздува.
Этот вариант более правильный, но более затратный по времени и ресурсам.

При проведении теста основные параметры на которые стоит обращать внимание это:
1. Сложность заданий и соответсвенно общая сложность игры. Как правило примерно можно оценить сложность заданий. По факту частополучается, что задания, которые казались тебе сложными беруться за 10 минут, а на легких тупят до слива. Но это приходит с опытом. Из этого параметра можно проанализировать продолжительность игры. В пятницу лучше не проводить игры на 5-6 часов, лучше на 2-4, а в субботу наоборот.
2. Однозначность заданий. В каждом задании надо пытаться подвязать другой ответ, найти такой же номер дома, предприятие с таким же названием и т.д. если не получилось, значит загадка более-менее одназначна, не стоит расстраиваться, когда игроки найдут еще один вариант, а они обязательно его найдут.
3. Стоит проанализировать пролеты между локациями и дать авторы рекомендации по перестановке заданий, если это приведет в меньшему пробегу игры. Всегда нужно помнить, что бензин дорогой.
4. Часто авторы хотят сделать какой то антураж, если автор молодой, то стоит дать ему пояснения, что часто на таких уровнях возникают очереди, и нужно как то этого избегать или фиксировать время прибытия команд.
5. На местах стоит обратить внимание на охранников близлежащих предприятий, расположения на месте социальных объектов, которым шум от игроков может помешать, если все это присутствует лучше дать совет увести игроков куда то в сторону от загаданного места.

Вот то что я вспомнил сразу, я считаю, что игры тестируются подобным образом на большинстве доменов, а на каких то доменах о тестировании и не слышали) может быть им это будет полезно.

ps На тест конечно нужны опытные игроки и опытные авторы. Т.е. человек должен был поиграть и организовать.
Желательно отбирать людей из своих друзей(команды), или из администрации домена, проще говоря тех в ком ты уверен. Т.к. желание слить игру есть всегда :)

Хочу еще добавить
1. Стоит обратить внимание на разноплановость заданий.
Например в играх молодых атовров часто встечабтся задания про цифры, цвета, месяцы, даты и т.д.
"12 04 57 1445 22 21 775 - пойтиме что это и проследуйте на место"
"Восемь дувяти ярдовых одиночек..." и т.д.
стоит помнить, что болшинству игроков обилие таких заданий в игре покажется скучным.
2. Слудет избегать заданий ориентированных на поисковые ситстемы, желательно включать в игру задания, которые можно отгадать средне образованный человек. Например "Катя Обухова имела 8 степеней, приедте к лыжнику" Загадан санаторий Обуховский в поселке Катенском, у вокруг него есть 8 лыжных трасс, на одной из них установленна статуя лыжника, котую называют Император.
Ясно, что никто из игрокв этого не знает, придется пользоваться поисковиком, а это не очень хорошо.

что-то у тестера задач побольше, чем у овнера..

приведи несколько примеров )
по моему исключительную фантазию игроков не протестировать нельзя.

а остальное решается внимательностью, здравым смыслом и способностью оценить вещи со стороны.

Нашел тест! Но на самом деле то о чем ты спросил, похоже на как бы если ты спросил тест о талантливости художника или поэта. Все познается в сравнении ;)

А кто сказал, что все авторы руководствуются здравым смыслом?))) Я иногда просто поражаюсь когда авторы наступают на одни и те же грабли постоянно. Да и сам грешен, что скрывать. Только что мои косяки тьфу тьфу не несли ни разу феерического писдеца в себе.

А за примером далеко ходить не надо. Может слышали про пирамидки?

МММ? Леня Голубков?

В начале года авторами игры в Борисове был придуман уровень - надо было построить пирамидку из снега высотой 1 метр. За это давали код. За высоту выше давали бонусы. 1 см - 5 минут. Нашлись команды, которые набрали 600-675 минут бонуса. И нашлись команды, которые построили только по метру. Так вот - задание выдавалось агентом на словах. Уровень был снят из-за того, что пару команд показали в послеигровом сраче, что им задание выдалось неполностью и про такой бонус они не слышали. Вот тебе пример - феерическое задание и феерическая реализация. Одна команда снялась со словами - мы могли бы найти экскаватор и построить 5-ти метровую пирамиду к утру, получив больше суток бонуса, но в такой фигне мы участвовать не будем.

А это был всего лишь второй уровень. И как ты думаешь играли потом команды зная про такие разрывы?

Хмм... А каким образом тестер смог бы предотвратить вброс пирамидок на вентилятор-то?
Стоять за агентом и орать ему в ухо: "Расскажи про бонусы, сука!!!"? (:

ИМХО выполнение бонусного задания не должно влиять на результат игры. Делать такие бонусы большая ошибка. Какой настрой команды будет после того как они шли всю игру в лидерах, но не сделали лишь бонусное задание и скатились на место куда более низкое? А другая команда которая тупила всю игру, но сделала бонусное в лидерах. Конечно по правлам не придраться, но учитывая моральные стороны, срач гарантирован. За всю игру бонусов минут на 15 - 20 достаточно. И они должны быть реально такими, что хочешь делай - хочешь не делай.

Ну, про бонусы это ты решительно зря так.
Вопрос в другом - как в принципе можно до игры оттестить поведение агента на флэшмобе и/или задании на местности?
Тут выход строго один - не набирать в качестве агентов оленей (несмотря даже на новогоднюю тематику).

У нас реалки обычно полностью тестируются. НАбирается команда тестеров со штабом (а если игра серьзная, то даже 2-3 полноценные команды) им дается денег на бензин (если позволяет бюджет еще и на еду) Игра забивается на демо и погнали. Не тестятся только уровни, на которых нужно присутствие большого колличества команд, или очень сложные в организации (например, на одном из уровней по дому должны были висеть зеркала, после теста их нужно было бы снимать, потом снова вешать на игру) В таких случаях тестеры доезжают до объекта, там им рассказывается суть задания и выдается код.

Понятно, что всего тест учесть не может. Агентами обычно выступают либо сами авторы, либо бывшие тестеры (те люди проинструктированные и хорошо знакомые с заданием) Так же тестеров потом можно использовать в качестве наблюдателей.

Ясно дело, такие тесты штука весьма затратная, но они позволяют избежать хоть и не всех, но многих косяков. Чем опытнее тестеры, тем удачнее тест. И ошибки в сценарии исправят, и неудачные коды отсекут.

А как минимум рекомендовать распечатать инструкции для агента предложить уменьшить бонусы хотя бы 1 см - 1 минута и ограничить временем или высотой. Короче нарисовать картину маслом.

Так вот тут и снова появляется вопрос - как тестеру предусмотреть такие вещи? Любая деятельность подразумевает алгоритм действий и должностную инструкцию. Для тестера они тоже нужны.

Лёш, я просто не думаю, что инструктаж агентов - это забота тестера. Вот и всё.
Такие вещи, как проведение агентских заданий (тем более таких, за которые в итоге начисляются не фиксированные бонусы, а кратные чему бы то ни было), ни в коем случае нельзя оставлять без контроля со стороны авторского коллектива. В идеале - присутствовать самому. В самом крайнем случае - предельно чётко дать установки агентам.

то ogneff: про пирамидки. тут либо пример не совсем удачный ) или если все остальные случаи неразберихи в том же ключе. то как и сказали выше никакие тестеры тут не помогут ) хотя при тесте они могли сказать мол нах такой бонус или надо уменьшить количество минут бонусных. исходя из этого примера надо писать мануал для авторов и инквизов. что такое хорошо а что такое плохо и как следует делать. )

по делу. надо наверно просто на домене найти людей которые могут оценивать ситуацию со стороны и делать какие нить выводы и прогнозировать ситуацию и советоватся с ними.

по моему тестеры отлавливают орфографические ошибки (влияющие на прохождение), грибные задания и неберучки всякие, ну и развесовку по времени задание-подсказка-слив.

Если не изменяет память, ни одна игра из моего авторства не была протестирована :)