что дает рейтинг в достависта
Построение рейтинга исполнителей — на примере Uber, «Яндекс.Такси», Profi.ru и курьерского сервиса Dostavista
Основатель сервиса Dostavista Михаил Александровский написал для vc.ru колонку о роли правильно спроектированных рейтингов для сервисов, которые соединяют заказчика с исполнителем.
«Достависта» — сервис срочной курьерской доставки, который работает по модели Uber. Мы получаем заказы через сайт, курьеры работают через мобильное приложение. Запустились в августе 2012 года, и, когда через пять месяцев вышли на 60 доставок в день, появилась потребность ранжировать курьеров.
Отсеивать неадекватных исполнителей — главная задача рейтинга, и старая версия с ней справлялась. Операторы регулярно получали жалобы недовольных рейтингом курьеров. Сначала это не было критично, но с ростом проекта росло и число жалоб. Дошло до того, что операторы потребовали запретить вопросы о рейтинге курьеров. Так обозначилась первая проблема.
Рейтинг учитывает, прибыл ли курьер в указанный клиентом интервал времени. Для этого в приложении используются отметки о прибытии — чекины. Некоторые курьеры поддавались соблазну зачекиниться до передачи посылки. Получалось, что мы обманываем клиентов и получаем неверные данные по маршруту курьера. Эта проблема приводила к ошибкам в планировании.
Приходилось мириться с ещё одной проблемой, решать которую в малых масштабах мы тоже смысла не видели: мы ошибочно блокируем много курьеров.
В августе на рынке «Садовод» в Жулебине курьер Владимир забрал у клиента набор одежды, чтобы доставить на «Преображенскую площадь». Пока Владимир ехал на Преображенку, к клиенту приехал курьер из другой службы.
От другого курьера пахло перегаром. Клиент отказался передавать груз и в негодовании перепутал курьерские службы, ошибочно оставив негативный отзыв о Владимире. Оператор снял Владимира с заказа и заблокировал его аккаунт в приложении, лишив доступа к новым заказам.
Через час Владимир подъехал к «Преображенской площади», открыл приложение и, мягко говоря, удивился. Несправедливость и материальные ценности на руках заставили Владимира связаться с менеджером «Достависты» и добиться решения проблемы. В итоге аккаунт курьера мы разбанили, рейтинг вернули, доставку выполнили в срок.
Таким образом выяснилось, что рейтинг ухудшает условия работы исполнителей сразу по трём направлениям:
Каждую осень курьеров не хватает. Поэтому в августе мы решили заняться проблемой оттока сотрудников.
Как работал старый рейтинг
Оценка в старом рейтинге учитывала три показателя, каждому из которых был присвоен вес:
Так выглядит статистика оценок за август 2015.
Оценка | Количество оценок | Количество комментариев к оценке |
1 | 361 | 207 |
2 | 135 | 68 |
3 | 404 | 144 |
4 | 1148 | 182 |
5 | 34080 | 7876 |
34 тысячи «пятёрок», 1150 «четвёрок» и меньше тысячи прочих оценок. При этом семь тысяч «пятёрок» с комментариями — такого большого числа комментариев к «пятеркам» мы не ожидали.
Чтобы лучше понять, как клиенты воспринимают рейтинг курьеров, для каждой оценки мы сформировали облака слов из комментариев.
Оценка | Топ часто встречающихся слов |
5 | Спасибо, отлично, быстро! Перед тем как что-то менять, мы посмотрели, как устроены рейтинги у других операторов, которые работают по аналогичной бизнес-модели. Рисёрч: Uber, «Яндекс.Такси», Profi.ruВ Uber два рейтинга: водительский и пассажирский. Интерфейс устроен так, что клиент может оставить водителя без оценки, но водитель клиента — нет. По словам оператора, водителей Uber в России блокируют при рейтинге ниже 4,3 баллов. Однако низкие оценки и тут гораздо реже, чем требует действительность, потому что пассажиры опасаются мести водителей. О пассажирском рейтинге Uber данных мало, однако есть один негативный отзыв о его адекватности. Если водитель поставил пассажиру оценку ниже «четвёрки», операторы сервиса обязательно свяжутся с водителем для выяснения подробностей. Все четверо опрошенных единогласно заявили, что в основном ставят 4 и 5: лень общаться с операторами. Рейтинг водителя «Яндекс.Такси» рассчитывается за 45 дней, имеет пятибалльную шкалу оценки, новички начинают с 3,3 балла. Рейтинг снижается, если какое-то время не брать заказы. Рейтинга пассажиров нет. В приложении и на сайте Profi.ru трудно найти исполнителя с рейтингом ниже «четвёрки». По каждому заказу Profi.ru берёт отзыв клиента по телефону. На основании внутренней инструкции оператор переводит отзыв в шкалу, в которой есть оценки 3, 4, 5, 5+ и 5++. Всё ещё сложнее: заказ назначают на основе репутации исполнителя, в которой, помимо рейтинга, учитывается опыт работы. Исполнители не знают, как именно рассчитывается их рейтинг. Новый рейтинг «Достависты»: помилования, прозрачность, оценка клиентовС сентября отдельный диспетчер обзванивает недовольных клиентов и выясняет, почему отзыв был негативным. Каждый день снимаем в среднем 3–4 бана из 10. Чтобы было понятно, почему мы разбанили курьера, уточнили классификацию проблем. Вместо чекинов и средней оценки по 20 последним поездкам новый рейтинг учитывает только среднее арифметическое по последним пяти оценкам. Чекины работают, но на рейтинг не влияют. Каждая оценка ниже 4 встаёт в очередь на звонок. После звонка с курьером либо расстаёмся, либо ставим оценку 4. Курьерам без плохих оценок будут доступны отзывы клиентов и алгоритм подсчёта рейтинга. За любой негативный вопрос клиенту относительно рейтинга или отзыва — пожизненный бан. Рейтинг Uber глазами водителя: если у тебя «пятёрка», ты просто нормальный водитель, если ниже — что-то недостаточно хорошо. То есть всем водителям приходится постоянно мириться с фактом, что они всё же что-то делают недостаточно хорошо. Так как «пятёрок» с комментариями в семь раз больше, чем всех остальных оценок вместе, то, если увеличить разброс (дисперсию) оценок, то рейтинг выделит сегмент курьеров-гуру. Курьерская работа — серьёзный труд со множеством логистических задач. Порой от исполнителя требуются невероятные усилия, чтобы не сорвать выполнение заказа. Выполнил заказ вовремя и без ошибок — это пять. Идеально выполнил особо трудный заказ — это выше пяти. Поэтому оценке 5 с комментарием новый рейтинг присваивает значение 6. По нашей гипотезе, это должно сильнее мотивировать курьеров, которым достались трудные заказы, так как люди будут понимать, что дополнительные усилия учитываются в оценке. В ближайших планах — ввести рейтинг заказчиков и сделать шкалу рейтинга курьеров 3-балльной: плохо, нормально и отлично. В каждом варианте будет возможность оставить комментарий. В целом из истории с рейтингом мы сделали следующие выводы: Есть широкий класс сервисов, в которых оплата услуг происходит позадачно. В таких сервисах система лояльности выстраивается практически одинаково. Поэтому мы продолжим изучать механику рейтингов на местных и зарубежных примерах: Kidsout, YouDo, Airbnb, BlaBlaCar, Lyft. На какие сервисы посоветуют обратить внимание читатели? Развод от «Достависты»Всем привет. Пытался решить все мирно, спокойно, но получилось как получилось. В августе у меня было свободное время и я решил подработать в Достависте. По самой работе ничего плохого сказать не могу, за 3 недельки заработал 14 тысяч, тратя по пару часов в день (причем выполнял не каждый день). Итак, заканчивается август, времени свободного больше нет и вот под конец сентября (а именно 21 сентября) я получаю смс, что с моей карты списано 1650 рублей и чек на почту, который Вы можете видеть ниже: Я начинаю писать в приложении мол что за дела, оттуда меня перенаправляю на почту, начинаю общаться по почте. По почте диалог в 4-5 сообщения длился около недели из-за длительных ожиданий ответа. Я получил в итоге ответ, что мол в в одну из недель (забыл уточнить, зарплата за заказы по безналу выплачивают раз в неделю, по понедельникам) мне переплатили, ошиблись, не ту сумму перевели и привели какие то цифры. Я сел за блокнот, начал все заказы выписывать, вычитать комиссию и все сверять с чеками от сбербанка. На выходе я получил действительно, что мне переплатили на сумму похожую на 1650 рублей. Ну я успокоился, поблагодарил за ответ и забыл. Через неделю как то сидим с девушкой, она заинтересовалась Доставистой, я ей показывал приложение и свои выполненные заказы. И тут мой взгляд бросается на 1 заказ: Я очень отчётливо помню этот заказ, так как это был мой самый длинный и самый оплачиваемый заказ. Я ездил тогда из Москвы в Серпухов и обратно (250км) и заплатили мне за него тогда 3795 рублей. Но что я вижу сейчас: тут отображается совсем другое число, как раз на 1650 рублей меньше истины. Я помню, что в тот день увидев такой большой заказ я делал скриншот и скидывал другу, мол «ничего себе, посмотри какие бывают заказы». Захожу в переписку и действительно, крыша у меня не поехала и сумма была совсем другая: Я начинаю писать в суппорт, мол что за дела, получается, спустя месяц, после выполнения заказа вы уменьшили его стоимость почти в 2 раза, списали с меня эти деньги и обманули мол какой-то переплатой. В итоге данная жалоба была направлена 4 октября, на дворе сейчас 25 октября, а ответа я так и не получил. Писал в ВК, в обсуждениях в официальной группе, там мне отвечали, мол пишите на почту, разберемся. Но ответа я так и не получил. Ну как вернули бабло?я там тоже подрабатываю Автор, расскажи про прикол достависты. Вот я зарегился, поставил пешком и на авто. И мне вылетают заказы, где я должен выкупить какой то товар за 7000 в определённом месте(причём фильтра по району и моей локации нет), отвезти его за 19 км от места выкупа, там у меня должны уже выкупить его, потом я должен перевести деньги изначальному заказчику. И за всю эту котовассию я получу 422 рубля. Может я что то не так настроил?или кто за это берётся? Величину заказа уменьшили, значит переплатили, сняли деньги. Всё логично? Или я что то упустил? К примеру что деньги уже сняли те которые тебе ещё должны были прийти? Хитрый курьерЗаказала пиццу. Домофон не работает, телефон с просьбой позвонить указала в заказе, но на всякий случай, вышла на улицу, разговариваю по телефону перед подъездом и жду курьера. Стою минут 30. К подъезду кроме соседей, которые заходили домой, никто не подходил. В приложении подошло время доставки, звонит курьер и говорит, что он приезжал 10 минут назад, долго звонил в домофон и уехал. Я ответила, что не знаю куда он звонил, потому что я стою перед домофоном и чтобы позвонить меня нужно было попросить отойти. Он замялся и сказал, что за 100 рублей мог бы вернуться. Согласилась только потому что пиццу ждал ребёнок. Через минуту(вот прямо очень быстро) подъехал курьер взял деньги, отдал пиццу и уехал. Вот теперь думаю, случайность или так было задумано. Кто и где главный, или еще одна история курьераДоставка мышки-злодейки, или еще одна история из жизни курьераОднажды я нес из зоомагазина мышь на съедение змее. Кто не знает, владельцы змей кормят своих питомцев мышами. Так вот, дверь мне открыла молодая красивая женщина похожая на эфиопку. Она приветливо улыбнулась, забрала коробочку с мышью и сказала «спасибо». Что делать, такова жизнь, грустить некогда. Но не успел я пройти сто шагов от дома как раздался звонок. «Немедленно возвращайтесь и заберите обратно свою злодейку! Она покусала мою змею и не даёт приблизиться к себе!» Пришлось тащить мышь-героиню обратно в магазин. Восторг и овации, которыми ее встретили мыши в клетке, мне не забыть до конца жизни. Доставка для котиков, или еще одна история курьераДелал как-то доставку зоотоваров. Выкупил в магазине, поехал на адрес. Встречают меня клиентка лет 35 и 5 ее котов. Каждую баночку вместе проверили, а потом она своему любимцу говорит: — Рыжик, неси карту, расплачивайся. Мы с котом на нее удивленно уставились. Минута гляделок, и она выпаливает: — Рыжик не хочет платить, уходите. Сказать, что я офигел, — ничего не сказать, но, естественно, она оплатила товар. Еще бы она позволила, чтобы голодали ее котики. Отзыв о сервисе ДоставистаРанее слышал про то, как курьеры «желтой буквы» не довозят документы до адресата. Как говорится услышал и забыл. В «желтую букву» не захотелось обращаться. Решил попробовать Достависту. Заполнил значит на сайте заявку. Точка А, точка Б, указал номер заказа, телефоны, по максимуму упрощая жизнь курьеру. Оформил. Долгий поиск курьера и вот он! Достопочтенный Джонибек уже мчится на своих двоих в сторону точки А. Стрелки часов подходят к часу ИКС, который нам обозначила Достависта как время прибытия курьера. Никто не звонит, не пишет. Ну думаю не удобно человеку. Готовлюсь на выход, встречать, озаботился о наличке чтобы расплатиться. Наступило 1 сентября. Телефон курьера появился в сети. Появился и топчется на одном месте в геолокации. Гудки есть, но на звонки не отвечают. Тут начинается. То техподдержка в чате пишет что курьер вышел на связь, то что он сам позвонит, то что теперь они сами не могут с ним связаться. Куча упоминаний всяких своих «отделов безопасности» и «отделов компенсаций». НО НИКАКИХ ЗВОНКОВ ИЛИ НЕ_ШАБЛОННЫХ ОТВЕТОВ! У меня просто слов нет. Тупо контора, которая не несет никакой ответственности и говорит «решайте это с курьером, который не отвечает на телефон». Вопрос пока еще не решен. Спасибо всем кто дочитал. Помните о таких моментах, когда потребуется «всего лишь забрать заказ и доставить» ведь «так же будет быстрее». Апдейт от 01.09 19:00 Представители наконец-то вышли на связь. Позвонили, пообщались, предложили промокод на покрытие стоимости следующей доставки. Хотя ранее в чате заявляли, что «никаких компенсаций со стороны компании не предусмотрено», типа разбирайтесь с курьером сами. Учитывая что стоимость заказа и приобретения запчасти повысилась сегодняшним днем, отказался от предложенного промокода ибо толку от промокода уже нет. Ждем информации относительно того, куда делся курьер, сдал ли он заказ в магазин или что вообще происходит. Доставка цветов, или еще одна история курьераРабота курьером в Яндекс доставкаСобственно для тех кто решил поработать курьером в Яндексе (Москва) на своей машине, хочу показать несколько скринов о заработке и собственно времени поездки. Не буду комментировать, комментарии тут излишние. Собственно 394 рубля за два с половиной часа дороги и посещением двух адресов. На бензин думаю ушло около 250 рублей. Итого чистыми 144 рубля. Клиент с чувством юмора, или еще одна история курьераБыло это месяц назад, перед выходными взял заказ на понедельник. На выходных отмечали день рождение друга. Два друга что-то не поделили в споре, переросло все в драку, пришлось разнимать. И мне случайно прилетело 🙂 На утро синяк под глазом. А работать то нужно… В понедельник забрал на первой точке заказ и попал в жуткую пробку, понимаю, что задерживаюсь на второй адрес. Звоню, говорю опоздаю. Слышу недовольство в голосе, согласились. Приехал, поднимаюсь на этаж, открывает мужчина, смотрит на мое лицо и говорит: — О! Вы еще к кому-то опоздали? 🙂 «Здорово, пес!», или еще одна история из жизни курьераПриехал я значит на последнюю точку, передо мной бабулька в подъезд идет, зашел за ней, не звонил в домофон. Поднялся на этаж, звоню в звонок. Открывает девушка с криком “Здорово, пес!”. Я даже опешил, не знал как реагировать. Как оказалось, у нее муж вышел с собакой погулять и она его ожидала увидеть )))) Семейная ссора, или еще одна история из жизни курьераПодъехал на адрес, поднялся на этаж, звоню в дверь, открывает мужчина, отдаю пакет и чеком, говорю оплатить по чеку. Мужчина разворачивается и как закричит: Оля, ты опять какую-то хрень заказала. Выходит женщина и они вступают в перепалку, как будто меня рядом нет. Что только в этой ссоре нет, вспоминают все, что только можно, оскорбляют друг друга. Потом женщина ушла в комнату, мужчина за ней с криками. Я все также в дверях, про меня забыли. В общем, ждал я минут 15, пока они прекратят кричать и вспомнят про меня. Вдруг все смолкло, выходит этот мужик, говорит: «Извини, парень, на удаленке сидим вдвоем в квартире. Поднадоели друг другу. Нашелся повод поругаться, пар хотелось выпустить. Спасибо за терпение». Заплатили за заказ, и чаевые дал 🙂 Доставка ребенка, или еще одна история из жизни курьераОткрываю заказ вижу, что в графе «Что доставить» указано «Другое». А вот что под этим подразумевается было не понятно, вес до 10 кг, ну думаю осилю. Подъезжаю на адрес, поднимаюсь в квартиру, а мне выводят примерно 3-х годовалого ребенка и говорят адрес куда везти. Я в шоке, объясняю: вы, что, ребята, как вы с посторонним человеком ребенка своего отправляете? И они мне объясняют, что мальчишку надо отвезти к бабушке, она уже ждет, родителям надо работать, няня не пришла. Не взял я на себя такую ответственность…. А как бы вы поступили? Рожденный бегать люлей не получит, или одна история из жизни курьеровВо время очередного заказа, я опаздывал на первый адрес к отправителю. Чтобы успеть, мне нужно было срезать через переулок, который находился, как я понял, на частной территории, чтобы быстро перейти с одной улицы на другую, которые находились параллельно друг от друга (сложно, да, но надеюсь картина многим курьерам знакома). Переулок имел два выхода с разных сторон, на которых стояли КПП. Заходя с одной стороны, я не встретил никого из сотрудников охраны и пошёл дальше, где стоял другой пункт охраны. Я практически уже доходил до выхода, как меня останавливает охранник и дальше возникает такое диалог (О-охранник и Я): Я: оттуда (показывая вход, откуда зашёл) Я: туда (показываю на другой выход. До него оставалось метров 5 буквально) О: здесь нельзя находится, разворачивайся и иди обратно. Я: Так осталось же тут пройти совсем ничего, можно я отсюда выйду и все, я опаздываю! О: ничего не знаю, разворачивайся и уходи! В мою голову не пришло ничего лучше, чем спросить у него: «Догонишь?» И резко дал дёру в сторону выхода (слава богу, на руках ничего не было в тот момент) Охранник бежал за мной так ещё квартала два, а мне было только смешно в этот момент, прокручивая всю нелепость ситуации у себя в голове. Он в след кричал: «Стой, с**а. » Услышав меня, охранник резко отстал, а когда я оглянулся, я видел картину, как охранник начал дико смеяться, что не мог остановиться. Как итог: на адрес я не опаздывал, у меня и охранника на весь оставшийся день отличное настроение! Развод через доставистуДоброго времени суток! Хочу поделиться печальным опытом работы в достависте! 15.11.2019 года мой знакомый взял очередной заказ (подрабатывает давно и проблем до этого не было), надо было выкупить товар и отвезти получателю! Заказчик представился работником магазина. Курьер приехал на указанный адрес (Москва, м. вднх) и отзвонился заказчику, тот сказал, что выйдет сам! При курьере распечатал чек, отдал пакет и товарный чек, после курьер перевёл денежную сумму выкупа на карту, отзвонился получателю, договорился о приезде! Через полчаса оба телефона стали «неабонентами». В итоге курьер попал на 4968 руб! Был в этот вечер ещё заказ такой же, только по другим адресам, да и до этого наверняка были тоже! Мы ищем людей-курьеров, пострадавших по этой схеме! Мошенников реально найти и привлечь по ст 159 ч. 2, но нам нужны ещё потерпевшие, чтобы написать заявление и наказать виновных. Знакомый мой, тег моё. Как я искал работуБыстро найти работу в Москве по своей специальности (научные исследования или хотя бы производство в металлургической отрасли) практически невозможно. Поэтому было принято решение срочно во что бы то ни стало найти любую работу, прямо сегодня-завтра, хоть какую, чтобы не загнуться. Зашел на общеизвестные сайты. О, Курьер! То, что нужно. Развозить мелкую бытовую технику. Позвонил, договорился о собеседовании (да, блин, собеседование на мать его курьера, чего только не придумают). Приехал на черкизовскую, 20 минут ходьбы и я в офисе: Небольшой холл, в нем сидят 3-4 девушки на телефонах. Кожаные диваны, плазма на стене. На диванах еще два-три кандидата. Захожу к директору: дорогой дубовый стол, кожаные кресла, костюм, все дела. Его вопросы ко мне были чисто формальными, видимо, просто убедиться, что не олигофрен и не пускаю слюни. Договорились, что с завтрашнего дня выхожу. Приезжаю рано утром, захожу к директору, он говорит: вот тебе наставник. Чего? Курьеру наставник? Я транспортом пользоваться умею. Ну ладно, хрен бы с ним, видимо, покажет, как бумаги заполнять, как брать заказы, сдавать. Чел оказался неразговорчивым. Взял два черных пакета из соседней комнаты, один вручил мне и мы отправились к метро. Заехали в магазин, где он купил себе перекусить и поехали на другой конец города. На выходе из метро наставник повертел своим носом и увидел торговый центр. Затем мы направились к жилому 17-тиэтажному дому. Тут он начинает перебирать подряд номера квартир на домофоне, в одной из них берут трубку и он говорит: «Информационная служба. Откройте дверь». Бабушка сразу погрустнела, молча отдала все вещи и закрыла дверь. Как ни в чем не бывало этот кондом звонит в следующую дверь. Я ему говорю: «дальше без меня». Руку, естественно, не подал. Вот блин. Ты, здоровый лоб, живешь в грязной общаге, покупаешь в пятёрочке продукты «Красная цена». И для этого тебе нужно обманывать пенсионеров? Честного труда за такие же гроши не найти? Так мерзко стало и противно. Живут же паразиты и не чувствуют, что делают что-то плохое. Что дает рейтинг в доставистаРебят, это вообще треш, такое произошло, ужасное, я заснуть не могу, мне так плохо. Это ужас вообще! Нельзя упускать ситуацию! Вы должны все знать, на какие риски вы идёте, на какие страдания нужно будет смотреть, и как нужно переживать! Нужно придать это огласке! До середины дня до меня все это не доходило! Что все это подделка! Все это левый товар! Мне клиенты потом звонили и говорили что это паль, и что они не могут связаться с продавцом, что он недоступен! И на тот момент продавец тоже был недоступен! Всех собак пускали на меня! У меня с собой были левые распечатки с левой печатью JBL! Первый клиент забрал на речном вокзале, но в итоге к вечеру он попросил вернуть деньги и забрать паль! Ещё двое не взяли, и я носился с одной большой, средней и ещё маленькой колонкой по всему городу помимо остальных, которые мне нужно было доставить! Все отказники говорили что товар левый, доказывали и показывали! На самом деле следы пали, левые наклейки, все левретки сплошной обман и игнор! В итоге когда я еду обратно на точку к заказчику, он мне звонит и спрашивает, кто отказался. Я всех перечислил, и в том числе назвал клиента с речного, который уговорил вернуть ему товар! Я вернул! И после этого заказчик начал грубить и ругаться матом в трубку мне! Орать! Говорил что я должен делать так как велел только он, и ничего не делать лишнее. Начал угрожать мне, говорить, что я самовольный! По сути моими руками совершает нарушение 159 статьи уголовного кодекса! И в итоге я отправился в полицию! После такого звонка с ним мне стало страшно видеться вообще с клиентом! Я опасаюсь за свою жизнь и здоровье! Я не знаю что у этого мошенника на уме! И я не позволю разговаривать так со мной в таком ключе! Всю выручку и товары я передаю полиции! Я намерен идти с заявлением и в прокуратуру, мне так грубили и перебивали меня по телефону! Не давали сказать слово! И это кто-то мошенник. На лицо! Клиенты готовы давать показания в полиции, они сами мне предлагали!
|