Тема: Utest

Всем привет
Вот хотел спросить у опытных тестеров кто имел дело с тестами в большом объеме.
Раньше было как то все простенько и понятно. Приходило приглашение ты на него откликался и начинал работать по инструкции которая прилагалась к тест кейсу...

Сейчас приходят приглашения я откликаюсь на них.... и никаких инструкция не появляется... но написанно что гарантированная оплата за тест кейс = 10 $
Захоже в тест кейс нажимаю claim и раньше было что 1 шаг сделайте то то то 2 шаг сделайте скрин того того того... и т.д.... потом прилогаешь конечный результат и все.... а сейчас шаг 1 и Please use and follow the regression test cases template
Expected Result
Please update the test results in the regression test cases sheet


пишу где взять изначальные шаги ТТЛ молчит


подскажите может я не на то внимание обращаю ?

или надо просто протестить все приложение от и до .... то какие скрины им нужны ? или доказательства что я делал тестирование ? ( если ошибок не выявленно) ?

Нужно овервью прочитать, там все есть в 99%, еще 1%-инструкция прилагается в чате.

Сообщение от roflmaosoul

Я направил свой взор на Ipad mini 2 wifi. Как Вы думаете это хороший выбор дле тестирования?

думаю, телефон лучше

Сообщение от Cinncinn

думаю, телефон лучше

Лучше Iphone чем Ipad?

Я хотел иметь телефон на андроиде (Galaxy S6), Ipad, и декстоп на Windows 10. Такой вот набор для тестов(и для себя). Как думаете с инвайтами будет норма с таким набором?

Сообщение от foma24

Немного не про utest.

Решил я тут пока было время на каникулах опробовать https://test.io о котором писали парой страниц выше. Привожу свое субъективное мнение, на основе имеющегося опыта на ютесте.

1. Регистрация и добавление устройств
Регистрация быстрее проходит, как таковой песочницы нет. Первый проект пришел через 6 часов после регистрации. Добавление устройств простое, по мне так проще чем на ютесте. Но явно за устройствами обновлениями ОС следят плохо, например для iOS нет 8.4.1, но есть 8.4. Еще не понравилось что у них отдельно ОС и устройства, т.е. например если выбрать iPhone 6 для него можно поставить iOS 6, чего быть не может

2. Дашборд и окно цикла
По быстродействию он мне понравился, шустрее чем у ютеста, а вот в плане дизайна и размещения информации тут есть неудобства. Активные тесты располагаются в меню с остальными пунктами такими как например billing и ссылка на их academy.
Вывод денег модно осуществлять на Пэйпал, Скрил и в европейские банки напрямую (только европейские). Деньги начисляют в евро. Вывод денег осуществляется раз в месяц 20го числа. Академия - для обучения работы в системе - сделана почему то как сайт внутри сайта, причем работает не очень, долго открывается, навигация не совсем понятна.
В цикле нет разделения на функциональный, локализацию и прочее... все в куче. Т.е. на проекте могут репортить и функциональные баги и локалитзацию, тут же репортят и performance. Так же как и на ютесте есть инструкция с in scope и out of scope, плюс всякие ссылки на вспомагательные материалы (есть и неработающие ссылки но о них позже). Есть непонятные дизайнерские ходы, например о Overview показано количество зарепорченных багов жирным шрифтом но перейти на страницу багов модно только через вкладку в другой части экрана. В окне багов модно смотреть на зарепорченные баги но чтобы самому зарепортить надо возвращаться обратно в overview. На странице багов отображается только 10 багов, т.е. чтобы посмотреть скажем 30 баго нужно листать 3 страницы. Функциональные баги разделены на Low, High, Critical. Чатов как таковых нет, есть вкладка Communication, где общение больше по принципу форума, в приват никто ничего написать не может. Есть QR коды, но в моем цикле они не работали.
И еще в конце проекта тестеру предлагают оценить цикл, за это платят 1 евро.

Оплата за баги на цикле такие

Spelling 0,50 €
Low 4,00 €
High 8,00 €
Critical 15,00 €

3. Рэйтинг
Вот тут мне понравилось то что система открыта и расписана. За действия вы получаете баллы привожу их ниже

Invitation Accepted 5
Invitation Rejected 1
Invitation Expired -1

Accepted Bug - Low 10
Accepted Bug - High 15
Accepted Bug - Critical 25
Accepted Bug - Spelling 10
Accepted Bug - Usability 10
Accepted Bug - Test Case 10
Rejected Bug -2

Нет бэйджей и процентовки как на ютесте, есть рейтинг всех тестеров, чем больше у тестера баллов, тем он выше в рейтинге. Все просто.

4. Работа на цикле.
Вот тут я столкнулся с непонятными вещами. Песочницы нет, но похоже что первый проект пробный так как заключается цикл в следующем - есть список игрушек из AppStore, тестер должен найти и зарепортить не более 10 багов, максимум в 3х разных игрушках. Out of Scope - Payment process, Usability, Download & Installation issues

Зарепортил пока 6 багов в 3 играх. Приведу что дальше произошло в виде списка
1. Локализация - Предложение не с большой буквы - Rejected - please report only grammar and translation issues for the english language.
2. Графический - Если приложение на русском обрезается в одном месте текст - Rejected - this area is not in the scope of the test. Please test only in-app functionality, this area is part of the app store and the game developer has no influence on it.
3. Локализация - Кусок приложения не переведен - Rejected - this would be a Low bug and not spelling. Please reach it in as Low bug. (т.е. попросили перевести в функциональный баг)
4. Функциональный - Есть три вкладки, работает только одна - Написали что зарепорчен на poor English , попросили исправить, хотя ниже будет баг на таком де английском и все нормально прошло.
5. Краш - приложение крашится когда открываешь страницу одну - ничего не комментировали, пока висит
6. Локализация - Как и баг 3, не переведены кнопки - Rejected - please report only grammar and translation issues for the english language., то есть баг 3 попросили перевести в функционал, а этот реджектнули сразу. Непонятно.

ТТЛ индус судя по имени, диспутов нет тут, поспорить, что ты не олень и не знал что локализация только для английского языка не прокатит. Хотя комментарии можно писать, может так и спорят насчет багов. Кстати немец зарепортил локазизацию на немецком - ему не отменили баг. В overview есть предложение, что если вы считаете что ТТЛ или ТМ реджектнул нормальный баг то пишите по этой ссылке, но ссылка ведет на главную страницу из академии.

Посмотрим, что дальше будет. Но пока что на ютесте лучше.

Согласен приглашения приходят практически сразу. Utest тут явно проигрывает.
У меня уже бы 1 TC и циклы по 3 проектам. Последний проект бестолковый.

За TC и ошибки первого проекта заплатили. Правда долго проверяли.
По игрушкам с ограничениям багов в 10 штук, зарегал 4 бага ( 2 High и 2 critical). По всем четырем пришли доп вопросы по которым я подправил баги. Один High понизили до Low, а остальные ТТЛ подтвердил.
Жду финального подтверждения и зачисления денег на мой внутренний счет

Тоже понравилась прозрачность ранжировании.

На Utest приглашения не приходят. Прилетают только информационные рассылки.
Попал только на один проект с открытого борда. В общем подаюсь только там.

Сообщение от roflmaosoul

Лучше Iphone чем Ipad?

Я хотел иметь телефон на андроиде (Galaxy S6), Ipad, и декстоп на Windows 10. Такой вот набор для тестов(и для себя). Как думаете с инвайтами будет норма с таким набором?

если вам нужен таблет для себя, то думаю это нормальный набор. Но если вместо айпада возьмете айфон, инвайтов должно быть больше. Сейчас навскидку глянула у себя - из 4х циклов для иос, 2 включают в себя айпады

о, а на тест.ио можно работать с неамериканского IP?