Италия: когда люди начинают жить по логике алгоритма

У Deliveroo в Италии использовался алгоритм Frank, который ранжировал курьеров и влиял на доступ к наиболее удобным временным слотам.

Одним из элементов была надёжность: система учитывала участие курьера в заранее выбранных сменах. Для платформы это позволяло лучше прогнозировать, сколько людей будет доступно в определённый момент.

Но для курьера показатель постепенно превращался в условие доступа к будущей работе.

Проблема состояла в том, что сам факт отсутствия мог иметь для рейтинга последствия независимо от причины. Болезнь, участие в забастовке или обычный отказ от смены были совершенно разными событиями для человека, но система могла обращаться с ними сходным образом.

В 2020 году суд Болоньи признал такую логику косвенно дискриминационной. К этому моменту Deliveroo уже отказалась от спорной системы. Позже итальянский регулятор по защите данных также потребовал изменить ряд практик алгоритмического управления курьерами.

В корпусе нет данных, позволяющих сказать, сколько именно денег потерял конкретный курьер из-за Frank. Но для ко-адаптации здесь важен другой механизм.

Если доступ к хорошей смене зависит от показателя надёжности, человек постепенно начинает учитывать этот показатель в собственных решениях. Формально он всё ещё может отказаться от работы. Но отказ теперь влияет на то, какие возможности он увидит потом.

Так алгоритм перестаёт просто описывать поведение. Он создаёт условия, в которых люди начинают менять поведение с учётом того, как их оценивает система.

А затем уже действия курьеров, профсоюзов, суда и регулятора меняют саму систему.

Источники

Италия: когда люди начинают жить по логике алгоритма
У Deliveroo в Италии использовался алгоритм Frank, который ранжировал курьеров и влиял на доступ к наиболее удобным временным слотам | Сетка — социальная сеть от hh.ru