Толока sandbox что это

11.06.202313.06.2023 admin 0 Comments

Яндекс Толока: что это такое и как заработать от 250$

Огромные корпорации, интернет-монстры с миллиардными оборотами – кто это? На ум сразу приходят Google и Яндекс. Попасть туда на работу – мечта! Кажется, что там трудятся крутые программисты, у которых компьютеры встроены в мозг. Но с недавних пор поработать в интернет-гигантах может каждый. Не верите? Сервис Яндекс Толока вам в помощь! В этой статье я подробно расскажу, что представляет собой относительно новый «продукт». В частности, остановлюсь на том, как с его помощью зарабатывать не менее 200 долларов в месяц. А при желании – и значительно больше.

Яндекс Толока: особенности площадки и как функционирует

Суть разработки специалистов известной компании – создать платформу, на которой сможет зарабатывать каждый желающий. Просто выполняя задания различного уровня сложности.

Интересно! Для работы не нужны дипломы, сертификаты и прочие документы, подтверждающие уровень образования. Да и каких-то специфических навыков в узкой тематике также не нужно.

Но не думайте, что вас ждет очередной сервис со скучными и бездумными занятиями по принципу «Поставить лайк», «Поделиться постом», «Подписаться на группу» и т.д. Тут представлены только реальные серьезные задания. Например, среди таковых:

Звучит круто, не правда ли? Сразу представляешь себя супер-специалистом, но одновременно приходит осознание: «А справлюсь ли я с заданиями?». Не стоит пугаться – все намного проще, чем кажется. Давайте разбираться!

Работа с поисковыми запросами

По статистике поисковые машины компании ежедневно обрабатывают свыше 200 миллионов запросов пользователей. Даже, казалось бы, совершенные алгоритмы не всегда способны справиться с огромной нагрузкой. Что приведет к неправильным результатам выдачи.

Например! Вы ищите «футбол результаты матчей», а получаете данные о хоккее. Вероятно, что где-то произошла ошибка. Исправлением подобных недочетов как раз и занимаются люди, решившие принять участие в Толоке.

Или, к примеру, поисковая система сразу же исправляет ошибки в запросе, введенном пользователем. Бывает, что люди либо допускают опечатки, либо просто неграмотны. И пишут название салата «рИцепт олЕвье», но система, благодаря исправлениям людей, знает, что на самом деле они ищут «рЕцепт олИвье».

То есть, Толока заработок приносит тем, кто работает над совершенствованием, оптимизацией функционирования поисковой системы. Суть исправлений может быть самой разной:

Согласитесь, все это престижно и круто, позволяет почувствовать себя полноценным разработчиком, программистом. Да еще и несущим людям «разумное, доброе, вечное» — исправляя ошибки и избавляя их от «мусорных» сайтов.

Кому по силам работать? Кому угодно, независимо от образования, знаний и опыта. Яндекс Толока заработок приносит абсолютно всем и не смотрит на социальный статус, возраст и прочие особенности.

Что нужно, дабы стать «сотрудником» Яндекс

Чтобы влиться в команду, вам необходимо следующее:

Если вас заинтересовало такое направление, как Толока заработок в интернете – переходите к следующему разделу моего повествования.

Яндекс Толока сколько можно заработать: начинаем работу

1. Если нет аккаунта на Я., заведите его, регистрируясь по ссылке https://passport.yandex.ru/.

2. Указывайте свои реальные данные, номер мобильного телефона. Запишите логин и пароль, чтобы не забыть их.

3. Обязательно поставьте отметку, что вы согласны с условиями Пользовательского соглашения и принимаете их, соглашаетесь с обработкой ваших данных.

4. Вероятно, потребуется ввести капчу. Не помню уже точно – остался этот шаг сейчас или нет. В любом случае – это не сложно.

5. После завершения процесса регистрации у вас тут же «генерируется» личный почтовый ящик и кошелек в Яндекс.Деньги.

6. Теперь можете регистрироваться непосредственно в самом проекте. Перейдите по ссылке https://toloka.yandex.ru. Ничего сложного – заполните все строки.

Обратите внимание! Обязательна галочка о том, что вы принимаете Условия. Дополнительно проставляются галочки (по вашему желанию), если вы готовы выполнять задания для взрослых, хотите получать уведомления и дополнительно получать сообщения по электронной почте. Рекомендую поставить все отметки, дабы не пропустить важной информации.

Задания для взрослых

Решать только вам – если высокие моральные принципы, граничащие с ханжеством, отказывайтесь от подобной работы. Однако помните, что выполняя ее, вы, наоборот, делаете интернет более «чистым», помогая поисковым машинам определять материалы 18+ и скрывать их от детей.

Краткий гайд по сайту

Рассказывая о том, что такое Яндекс Толока сколько можно заработать на ней, нельзя не обойтись без лаконичного описания самого проекта. Для новичков такое руководство будет полезным – ускорит процесс погружения в работу.

Открывает доступ к разным разделам:

Доска заданий

В разделе представлены:

Позволяет увидеть, сколько денег вы заработали. Сумма разделена на две части:

Фильтр

Позволяет фильтровать активные задания по разным параметрам. Так вы сможете видеть только ту работу, какую хотите.

Обратите внимание! «Покопошитесь» в разделах, ничего сложного в них нет.

Мой профиль

Здесь отображается вся необходимая информация. В частности, представлены:

Это не все разделы, но о некоторых из них поговорим чуть ниже.

Толока заработок в интернете: задания

Продолжая свой рассказ, что такое Яндекс Толока сколько она позволяет получить денег, переходу к описанию заданий. Их много и они разнообразны. Скучать не придется. Вот, для примера, перечень нескольких из них:

Обратите внимание! Увидели, что стоимость работы оценивается в 0 долларов или в 1 цент? Не расстраивайтесь, не разочаровывайтесь, и не покидайте страницу. Цена указывается за обучение. Как только его пройдете, стоимость выполненного задания будет заметно выше. Обучение нужно проходить перед каждым новым заданием.

Карточка задания

Заглавие информирует о том, в чем суть работы. Потом указывается:

Кстати! Есть такое понятие, как «Экзамен». Не стоит его бояться. Вы не в школе, не в институте. Сначала вам подробно расскажут, что именно нужно делать, дадут потренироваться. Доступ к работе вы получите, пройдя экзаменационную работу.

Некоторые заказчики устанавливают определенные ограничения для исполнителей:

Яндекс Толока: типы заданий

Существуют задания двух типов – требующие от вас выхода на улицу и позволяющие работать дома.

Деятельность на улице

В этом случае для выполнения задачи вам нужно покинуть дом и пройтись по улице. Среди таковых:

Для их выполнения вам понадобится смартфон с установленным приложением. Именно через него будет проверяться выполнение задания.

Обратите внимание! Правильно соотносите стоимость задания и время, необходимое на выполнение. К примеру, чтобы посчитать входы в здание, вам придется проехать полгорода. А получаете только 10-ть центов. Согласитесь, задание того не стоит.

Дистанционная работа

1. Изображения

Суть деятельности подразумевает любую работку с картинками, фотографиями:

2. Видеоролики

В данном случае речь идет о:

3. Звук

Тут нужно просто писать о том, что вы услышите в аудио-дорожке.

4. Поисковые запросы

Необходимо оценивать релевантность поисковой выдачи поисковому запросу.

5. Текстовые задачи

Необходимо анализировать статьи, проверять информацию, исправлять опечатки и многое другое, что связано непосредственно с текстом.

6. Прочее

Тут может быть практически все, что угодно.

Естественно, я описал далеко не все встречающиеся задания. Они бывают и другими. Однако основная часть связана с перечисленными выше направлениями.

Обратите внимание! Пользоваться сервисом нужно не только исполнителям, но и работодателям. Например, владельцам сайтов. Здесь они смогут давать задания на выполнение монотонных, но важных заданий. Особенно ценным сервис окажется для тех, кто только начал свою деятельность в интернете, создав собственный сайт. Кстати, о том, как сделать сайт всего за 4-е дня, я рассказываю на авторском онлайн тренинге. Он полностью бесплатный. Спустя 4 дня у вас будет личный сайт, сделанный своими руками. И вы не затратите на его разработку ни копейки.

Яндекс толока заработок, особенности прохождения обучения и выполнения заданий

Поисковый запрос «Толока заработок» не зря привел вас на мой сайт. Ведь я подробно рассказываю обо всех особенностях деятельности сервиса.

Заданий – огромное количество. Так и хочется взяться за все одновременно. Но не получится! Предварительно нужно будет пройти обучение. Ведь мало кто хочет платить деньги, человеку без опыта и навыков.

Как проходит обучение

1. Кликните по соответствующей кнопке.

2. Перейдете в новое окно.

3. Там будет инструкция.

4. Тщательно изучите её, даже если она слишком большая.

5. Приступайте к выполнению – тут, как в обычном тесте, нужно лишь выбрать нужный вариант.

6. Сделав все по инструкции, вам нужно будет нажать кнопку «Далее».

7. Если все правильно – вам открывается экзаменационное задание.

Обратите внимание! Не бойтесь во время прохождения обучения и экзамена допустить ошибки. Система укажет на них и позволит исправить.

После прохождения обучения вам пришлют сообщение, указывающее на сколько % вы выполнили задание. Чем больше %, тем выше оплата.

После прохождения экзамена вместо кнопки «Обучения» появляется надпись «Приступить». Конечный уровень вашего навыка будет определен только после прохождения первого оплачиваемого задания. Уведомление об этом придет на электронный адрес. Навык будет указан и в вашем личном профиле исполнителя. Именно от этого будет зависеть стоимость заданий.

Обратите внимание! В подавляющем большинстве случаев выполненные задания оплачиваются автоматически. Поэтому, даже если вы выполните все неправильно, заработок будет начислен на ваш счет. Однако делать так постоянно не нужно – администраторы вас заблокируют.

Особенности начисления рейтинга

Толока заработок в интернете определяет в соответствии с вашим рейтингом. Он подсчитывается системой автоматически, в зависимости от следующих факторов:

Кстати! Если длительное время не выполнять задания по своему навыку, он будет утерян. Для возобновления навыка нужно пройти экзамен повторно. Снижение рейтинга происходит сразу после пары дней бездействия.

Яндекс Толока: советы по работе и некоторые хитрости, о которых должны знать все новички

Теперь поговорим о некоторых хитростях, которые следует знать всем новеньким. Руководствуясь моими рекомендациями, вы сможете существенно повысить свой заработок и получать доступ к большему количеству заданий.

1. Не хватайте

Не нужно набирать на выполнение сразу несколько заданий. Делайте все постепенно. Тем более что прохождение обучения требует, зачастую, много времени. Поэтому отберите пару заданий и занимайтесь ими. Тем самым, повышая свой навык и получая высокую оплату, не тратя время на обучение.

2. Дорогостоящие задания – не всегда оправданы

К примеру, такая задача, как «Оценка сайтов» оплачивается в 5 центов. Однако изучение инструкции потребует от вас много-много времени.

Стоимость сравнения картинок – 2 цента. Но там все намного проще и быстрее. К примеру, за то время, которое необходимо на оценку сайтов, вы сможете выполнить 5-6 задач по сравнению картинок. Вот и получается, что в итоге вы заработаете за то же время 10-12 центов!

3. Яндекс толока: старайтесь находить однотипные задания

Например, речь идет о такой задаче, как оценивание схожих картинок. У него даже подпункты одинаковы и могут идти в одной и той же последовательности. Поэтому их выполнение не отнимет у вас много времени. А если набьёте руку, то все сделаете моментально.

4. Находите возможность работать в будни

В выходные дни сервис посещает много исполнителей. Выхватить задание – проблематично.

5. Яндекс толока: освойте горячие клавиши

Они ускорят процесс выполнения заданий. Нажав на Enter, вы переходите к следующему заданию. Это быстрее, чем водить мышкой. Цифры на клавиатуре соответствуют позиции ответа. Если правильный ответ первый, нажмите 1 и т.д.

6. Будьте дотошны

Старайтесь выполнять задания максимально качественно. Оказывается, система начисляет бонусы лучшим работникам. Для получения бонуса (его размер составляет от 10 до 100 долларов) необходимо выполнить не менее 25-ти заданий подряд с рейтингом не ниже 90%.

Яндекс толока «Путеводитель» по заданиям

Яндекс Толока заработок приносит довольно неплохой, но при условии хорошей работоспособности и правильного выбора заданий.

Так, попадаются задачи, на выполнение которых уходит до 2-3 минут. Как результат – за 20 минут работы удается получить около 1 доллара. Однако попадаются и те, что требуют от исполнителя много времени, усилий. В итоге – много заработать не получается, а затраченное время оказывается не оправданным.

Я внимательно изучил различные варианты работы на сервисе. Отобрал наиболее эффективные, позволяющие получать заработок с минимальными временными затратами. Они – идеально подходят новичкам.

1. Релевантность роликов. От 1 до 3 центов

Всё очень просто – нужно проверить релевантность видео поисковому запросу. Если ролик не соответствует запросу, нужно поставить отметку, что он нерелевантен. На одной странице обычно доступно до 20-ти заданий. При улучшении навыка стоимость работы вырастет с 1 до 3 центов.

2. Качество связанных запросов. 1 цент

Существует основной поисковый запрос, а также второстепенный. Второй, по сути, дублирует первый. Или уточняет его. Нужно определять, действительно ли связаны основной и второстепенный запросы. На выполнение одной задачи уходит до 2-х минут.

3. Опечатки. 2 цент

Необходимо исправлять опечатки поисковых запросов. Или даже выполнять их своеобразный перевод. Например, если пользователь вводит «ajnjfggfhfn» — нужно исправить на «фотоаппарат».

Кликнув по клавише Яндекс или Гугл, вы увидите подсказки. Нужно выбрать правильный вариант.

4. Качество изображений. От 1 до 3 центов

Вам нужно будет определять качество изображений/фотографий. Проверяются такие «параметры», как:

Есть всего две оценки. Удовлетворительно и неудовлетворительно. Думаю, какую оценку в каком случае поставить, понятно.

5. Естественность диалогов. От 5 до 8 центов

Пожалуй, одно из наиболее интересных заданий для новичков. Суть его состоит в том, чтобы вносить изменения в общения голосового помощника Алису. Для этого нужно будет анализировать ответы, устанавливая отметки напротив трех вариантов:

В первое время могут возникнуть определенные трудности в работе, но вы быстро освоитесь, разберетесь. На задание уходит не так много времени. Оплата – довольно высокая. К тому же, хорошее настроение вам гарантированно.

Яндекс толока приложение для смартфонов: в чем его особенность

Продолжаем изучать тему: «Яндекс Толока сколько можно заработать». Теперь хочу поведать вам о приложении, созданном специально для данного сервиса. Оно есть для Android и для iOs.

1. Скачайте приложение под свой телефон.

3. Выполните вход в приложение, используя логин и пароль, выбранный при регистрации.

4. Далее – все также, как и при работе на компьютере.

Интересное наблюдение. В Google Play не самые хорошие отзывы и оценки о работе приложения. Количество 1 превышает количество выставленных 5. Основные жалобы пользователей связаны с техническими проблемами и низкой стоимостью заданий. Возможно, за время подготовки статьи оценки поменялись.

Однако в смартфонах основные задания для выполнения требуют от вас покидать дом, работая на улице.

Яндекс толока: как выводить заработанные деньги

Еще один важный момент: как получить заработанные деньги. Минимальная сумма для вывода – всего 20 центов. Заработать такую сумму реально за 20-ть минут!

Теперь подробный алгоритм, как вывести деньги со счета внутри системы на карточный или электронный счет:

Для вывода доступно не так много систем, как того хотелось. Например, нет таких популярных электронных кошельков, как WebMoney и Qiwi. Доступен вывод на счета:

Обратите внимание! Логично, что при работе на Я.Т. лучше всего выводить деньги на кошелек Я.Д.

Чтобы в дальнейшем упростить процедуру вывода рекомендуется привязать к профилю счет из систем, указанных выше. Для этого нужно кликнуть по кнопке «Добавить». Следуйте подсказкам, заполняя все поля. Когда кошелек привязан, отправьте администрации заявку на вывод денег.

Первый вывод требует относительно много времени. Деньги будут идти около суток. Это связано с тем, что проверяются корректность введенных данных. Все последующие выводы осуществляются намного быстрее. Буквально за 2-5 минут.

Обратите внимание! Хотите выводить заработанные средства на кошелек в Я.Д.? При регистрации в Яндексе, вам автоматически создается кошелек. Однако чтобы пользоваться им, следует пройти процедуру идентификации. Если она не будет выполнена, в выводе денег будет отказано. Как идентифицироваться, рассказывается на страницах платежной системы.

Яндекс.Толока: сколько реально заработать

Информация встречается разная, противоречивая. Порой – даже неправдоподобная. Например, в комментариях мне довелось прочитать о том, что за неделю получается только около 2 долларов.

Столь низкая сумма может быть обусловлена двумя причинами:

Возможно, повторюсь, но настаиваю на следующем – нужно работать по определенной «специализации», выбирая направление, которое вам действительно по душе.

К примеру, если выбрать задания по оценке качества картинок, на заработок 2 центов будет уходить пару минут. Конечно, вначале – больше, но как только набьете руку, всё пойдет намного быстрее.

А если еще будет и высокий уровень, рейтинг, то и размер оплаты будет выше. Новичку по силам зарабатывать 2 доллара в день. Опытный исполнитель достигает отметки в 10 долларов в день.

Используя сервис только в качестве подработки, уделяя работе до полутора часов в день, ежемесячно можно получать до 50 долларов. И это без особого напряга. Если основной работы нет, есть много свободного времени, реально превзойти планку даже в 250 долларов.

Яндекс толока: личный совет

Теперь вы знаете, что такое Яндекс Толока сколько она позволяет зарабатывать. Сервис простой в понимании. Задания – не такие уж и сложные. Сам процесс подобной занятости дает возможность почувствовать себя причастным к крупной интернет-компании. Что благотворно отразится на вашей самооценке.

По моему мнению – площадка в целом хороша. Хотя для больших свершений она, конечно же, не подходит. Если вы хотите заниматься реальным делом, стать успешным интернет-предпринимателем, рекомендую искать другие пути собственного развития.

Один из лучших способов изменить свою жизнь и получать солидный доход – создание собственного сайта, наполнение его информацией, развитие и … получение фактически неограниченного дохода.

Как этого добиться? Не так сложно, как может казаться. Первый и главный шаг – записаться на мой онлайн-тренинг, на котором я рассказываю, как за 4 дня самостоятельно сделать сайт. Занятия – бесплатные. Всё построено на практике.

Вы просто повторяете за мной, а через 4 дня у вас будет свой сайт, с первыми статьями и первыми посетителями. Я вам расскажу, как правильно монетизировать сайт и зарабатывать на нем!

Хотите зарабатывать, жить свободной жизнью и путешествовать? Регистрируйтесь на тренинг прямо сейчас!

Источник

Яндекс.Толока. Как люди помогают обучать машинный интеллект

Вот уже полтора года в Яндексе для совершенствования поисковых алгоритмов и технологий машинного интеллекта применяется платформа Толока. Может показаться удивительным, но все современные технологии машинного обучения в той или иной степени нуждаются в человеческих оценках.

Люди оценивают релевантность эталонных документов поисковым запросам, чтобы на них ориентировались формулы ранжирования в поиске; люди переписывают аудиозаписи в текст, чтобы на этих данных настроился алгоритм голосового распознавания; люди размечают изображения по категориям, чтобы, натренировавшись на этих примерах, нейронная сеть дальше делала это без людей и лучше людей.

Все это можно делать в Толоке, которая является краудсорсинговой платформой и помогает найти тех, кто решит вашу задачу. Сегодня она переходит в статус беты и отныне открыта для всех внешних заказчиков. Так что пришло время рассказать вам подробно о самой платформе и о том, с какими неожиданными сложностями мы сталкивались в процессе работы над ней, поделимся своими наблюдениями и объясним, как Толока может помочь именно вам.

Задачи, о которых мы говорили выше, в Яндексе традиционно решаются с помощью обученных специалистов — асессоров. Асессоры смотрят, насколько результаты поиска соответствуют запросу, находят среди найденных веб-страниц спам, классифицируют его, решают схожие задачи и в других сервисах.

Ирония заключается в том, что чем больше новых технологий мы запускаем, тем сильнее растет потребность в человеческих оценках. Недостаточно просто определить релевантность страницы поисковому запросу. Важно понимать, не замусорена ли страница вредоносной рекламой? Не содержит ли страница контент для взрослых? А если содержит, то подразумевает ли запрос пользователя, что он искал именно такой контент? Для того чтобы автоматически учитывать все эти факторы, нужно собрать достаточное количество примеров для обучения поисковой машины. А так как все в интернете постоянно меняется, то и обучающие наборы нужно постоянно обновлять и поддерживать в актуальном состоянии. В общем, только для задач поиска потребность в человеческих оценках измерялась миллионами в месяц, и с каждым годом это число только растет.

Привлекать все больше и больше асессоров в каждой из стран присутствия Яндекса организационно непросто. При этом далеко не все новые задачи требуют специального обучения. Со многими заданиями может справиться практически любой человек, а часто даже более полезно собрать мнения обычных пользователей, не натренированных профессионально оценивать ранжирование. Подобное разделение задач привело нас к выводу, что в дополнение к асессорам нам нужен еще один более гибкий и масштабируемый источник получения человеческих оценок.

Краудсорсинг

В дополнение к сложным задачам, выполняемым асессорами, нам нужно было научиться собирать миллионы простых оценок в любой интересующей нас стране. Большинство заданий, о которых мы говорим, довольно простые и мелкие: на их выполнение не требуется больше 30 секунд. Зато количество этих заданий очень большое. Обычные фриланс-биржи, на которых можно связаться напрямую с несколькими исполнителями и объяснить им суть задания лично, для нас не подходили. Для промышленных масштабов нам нужно было привлекать тысячи исполнителей, оплачивать их работу без бумажной волокиты и контролировать результат.

Ближайшим аналогом того, что нам на самом деле было нужно, были краудсорсинговые платформы Amazon Mechanical Turk, Clickworker и CrowdFlower. Именно с помощью них, как правило, собирают простые человеческие оценки академические исследователи в области Machine Learning и крупные поисковые компании, например, Bing.

Вот только все эти платформы не работали в интересующих нас странах. К тому же мы уже успели накопить определенный опыт для того, чтобы решить задачу собственными силами.

Толока

В принципиальной логике работы любой краудсорсинговой платформы и, в частности, Толоки нет ничего сложного. С одной стороны, мы работаем с исполнителями, распределяем задания, производим оплату, а с другой – помогаем заказчикам получить результат с минимальными трудозатратами.

Кстати, что это за слово такое «Толока»? Над названием думали довольно долго, искали международные варианты, но в итоге вышло совсем наоборот. Идея назвать сервис «Толокой» родилась в нашем минском офисе, в котором, кстати, и сосредоточено ядро разработки платформы. Это слово (по-белорусски «талака») распространено в Беларуси примерно в 30 раз сильнее, чем в России, и означает совместную полезную работу на общий результат, а это отлично сочетается с краудсорсингом. Хотя выбор названия – это далеко не самый сложный вопрос, с которым мы столкнулись при разработке сервиса.

Какими могут быть задания? Потенциально они могут быть любыми по исходным данным, интерфейсу, ожидаемым ответам. Одному нужно загрузить картинки и попросить их классифицировать, другому — отобразить аудио-плеер и попросить написать, что слышно на записи, третьему — показать карту с расположением пользователя.

Поэтому был выбран путь максимальной гибкости: используя json для входных и выходных параметров и html/css/js — для интерфейса, заказчик может создать практически любое задание. А для тех задач, которые требуют работу «в поле» (например, пойти по адресу и проверить актуальность информации об организации), мы подготовили мобильную версию Толоки для Android.

У гибкости в настройках есть и обратная сторона – высокий порог вхождения. Далеко не каждый человек умеет верстать интерфейс. Эту проблему мы решаем с помощью готовых шаблонов, общее количество которых планируем увеличить.

Как платить толокерам? Успешный вывод кровно заработанных — один из главных мотиваторов для человека возвращаться и продолжать выполнять задания. Сложная и долгая процедура вывода может похоронить платформу. Поэтому мы выстроили систему, в которой достаточно добавить свой кошелек в PayPal или Яндекс.Деньгах. На этапе отладки процессов со стороны Толоки вывод денег мог занимать до 30 дней, сейчас — пару дней, а то и минут. При этом и толокеры, и заказчики освобождаются от бумажной волокиты.

Как обеспечить качество выполнения? Этот вопрос — главная головная боль любой краудсорсинговой платформы. В Толоке, как и любом социуме, есть люди прилежные и внимательные, а есть — ленивые, недобросовестные и при этом умеющие писать скрипты. Основная задача: удержать в сервисе первых и как можно раньше найти и ограничить вторых. Для этого мы научили Толоку анализировать поведение исполнителей. У заказчиков появилась возможность автоматически выявлять и ограничивать тех толокеров, кто, например, отвечает слишком быстро, или чьи ответы не согласовываются с ответами других. Мы также добавили возможность использовать контрольные задания («ханипоты») и обязательную приемку перед оплатой. Причем приемку тоже можно упростить. Отдать задания одним пользователям, а оценку их результатов – другим.

Кстати, а что мы знаем о самих толокерах?

Толокеры

В Толоке регистрируются и выполняют задания самые разные люди. Больше всего исполнителей (как и заданий) у нас в России, Украине и Турции. Большинство толокеров — это молодые люди до 35 лет (как правило, студенты технических ВУЗов или мамы в декрете). В основном исполнители рассматривают Толоку в качестве дополнительного источника денег, хотя многие отмечают, что им нравится выполнять полезную работу, делать интернет чище. Вот, например, что они сами пишут о себе, обсуждая Толоку в интернете:

Мне на кошелек уже упало 790,41 рублей. Если что, то в регионе, где я живу, зарплата, к примеру, учителя-молодого специалиста, составляет 2800 рублей. Обратите внимание, что это все набито между делом, в свободное время, в перерывах между выполнением основной работы, когда хотелось отдохнуть и немного переключиться.

И вообще не чувствуешь себя тупым кликающим роботом. Есть какое-то ощущение полезности своей работы.

Толока в Яндексе

Толока сейчас — это почти 270 тысяч исполнителей из пяти стран мира, 80 тысяч выполняемых заданий в день, 400 уже опробованных разных типов заданий, 1 миллиард собранных оценок.

В момент открытия мы стартовали с тремя основными типами заданий, и интересно, что именно они по-прежнему остаются самыми любимыми заданиями для большинства толокеров: оценка качества поиска картинок, разметка контента для взрослых и попарное сравнение объектов (например, страниц в разном дизайне).

Использование краудсорсинга для сбора оценок в этих проектах позволило командам существенно сократить время ожидания оценок для построения метрик. Где асессорам требуется несколько дней на оценку набора объектов, толокеры справляются за пару часов. За счет снижения стоимости оценки удалось заметно увеличить размеры обучающих наборов и повысить качество алгоритмов классификации. К примеру, после перехода на Толоку качество определения контента для взрослых выросло на 30%.

Заказчиками оценок в Толоке выступают десятки разных команд Яндекса. С помощью этого сервиса собираются данные для технологий компьютерного зрения и распознавания речи, совершенствуются рекомендательные технологии, пополняется база справочника организаций, решаются многие другие внутренние задачи. Но их все равно недостаточно для того, чтобы обеспечить всех толокеров заданиями. Нужно двигаться дальше.

Первые внешние заказчики

Договорившись с несколькими внешними партнерами, мы организовали закрытое альфа-тестирование, чтобы проверить соответствие платформы потребностям извне. Внешние заказчики пришли как со знакомыми для нас типами задач, так и с новыми, специфичным для их бизнеса. За время тестирования были запущены задания по расшифровке ценников товаров с фото, аудиту торговых точек, категоризации товаров, поиску характеристик.

Сайт Рейтинг Букмекеров предложил толокерам задания по обновлению базы букмекерских отделений по всей стране (около 4000 объектов). Нужно было проверить, существует ли объект по указанному адресу, сделать фотографию и составить его описание. По данным заказчика, проверить актуальность базы объектов по России с помощью краудсорнинга оказалось выгоднее и оперативнее, чем командировать сотрудника или искать подрядчиков. Немного конкретики. Выполнение задачи по Санкт-Петербургу, где нашлось 157 адресов для проверки, с использованием Толоки обошлось заказчику чуть более чем в 4100 рублей. Это более чем в 10 раз дешевле, чем проектная семидневная командировка одного собственного сотрудника компании из Москвы в Санкт-Петербург, и в 3-6 раз дешевле, чем наем подрядчика на месте.

Толока оказалась полезна не только бизнесу, но и в научной работе. Дмитрий dustalov Усталов из Института математики и механики им.Н.Н.Красовского (ИММ УрО РАН) использует сервис для сбора оценок о смысловых связях русских слов, чтобы повысить качество электронных словарей, используемых в рамках проекта NLPub. По словам Дмитрия, он может быстро и недорого проводить эксперименты, проверяя большое количество гипотез в сжатые сроки. Для одного из заданий, например, ему удалось собрать 13 тысяч оценок всего за час.

И еще один пример. Рамблер использует Толоку для уточнения асессорских оценок поисковой выдачи. Результаты толокеров чуть менее точны, поскольку они не имеют специальной подготовки, но зато они могут выполнить задания больших объемов в короткие сроки и со стабильным качеством. Так что этот канал получения оценок особенно полезен в периоды пиковых нагрузок.

Закрытое альфа-тестирование помогло нам определиться с дальнейшим вектором доработок и в целом подтвердило гипотезу, что Толока может быть полезна внешним заказчикам и должна быть открыта для всех. Ровно это мы и сделали. Начиная с этой недели, Толока переходит в статус беты, и ее краудсорсинговые возможности доступны для всех желающих.

Как добавить свое задание?

Процесс отправки задания по-прежнему предполагает определенные знания со стороны заказчика, но мы уже работаем над тем, чтобы упростить этот процесс в ближайшем будущем. А пока для заказчиков доступна документация по адресу yandex.ru/support/toloka-requester.

Мы рекомендуем начать с песочницы. Эта тестовая среда позволит вам не только разобраться в процессе создания задач, но и испытать их, не рискуя потратить деньги впустую. После регистрации можете сразу приступить к созданию своего проекта, причем сервис предложит вам уже готовые шаблоны на выбор.

При постановке задачи вы сможете ограничить исполнителей по определенным критериям (например, страна, язык или юзер-агент браузера), включить предварительную проверку результата и контроль качества, настроить спецификации входных и выходных данных.

В заключение хотелось бы рассказать об основных рекомендациях, которые мы сформулировали на основе собственного опыта работы с толокерами.