Интернет-издание Forbes представило ежегодный рейтинг топ-работодателей России, основанный на оценке компаний по критериям устойчивого развития. В итоговый список вошли 207 организаций, среди которых — ИТ-компания RedLab.
ИИ — это технология, которая преобразует бизнес, улучшает пользовательский опыт и упрощает рутинные задачи. Но что, если ваш продукт на основе ИИ работает не для всех? Представьте, что система понимает одних пользователей лучше, чем других, или вовсе игнорирует определённые группы. Тогда вместо инновации формируются барьеры.
Проблема предвзятости в ИИ становится всё более заметной. По данным Gartner, к 2025 году каждая десятая компания будет регулярно сталкиваться с последствиями алгоритмической предвзятости, которые приведут к потерям клиентов или правовым рискам.
Цифровая доступность и инклюзия — это не только про этику, но и про эффективность. Например, внедрение адаптивных решений цифровой доступности, позволяет компаниям охватить большую аудиторию и улучшить ключевые метрики. Один из таких инструментов — Assistapp, виджет, разработанный в Когнитива.Лаб для адаптации сайтов. Он помогает бизнесу сделать платформы доступными для всех групп пользователей, включая людей с ограниченными возможностями.
На каждом этапе разработки ИИ — от выбора данных до построения интерфейсов — существует риск внесения предвзятости. Расскажем о пяти её типах и о том, как эти ошибки влияют на продукт.
Данные — основа любой модели ИИ. Но, если набор данных ограничен, алгоритм не может учитывать весь спектр реальности. Например, он может не распознавать лица определённых рас или игнорировать потребности меньшинств.
В 2015 году Google Photos ошибочно классифицировал изображения темнокожих людей как «горилл». Это произошло из-за отсутствия разнообразия в данных для обучения модели.
Данные, используемые для обучения, часто собираются из доступных, но неполных источников. Например, когда медицинские ИИ-модели обучаются в большей степени на мужских данных, это приводит к ошибкам в диагностике у женщин.
Проверять источники данных — локальные или однородные наборы повышают риск предвзятости.
Расширять выборку — если определённые группы не представлены, их данные нужно добавить.
Тестировать модель на пользователях, которые не были частью обучающей выборки.
Когда алгоритмы обучаются на данных, в которых уже заложены культурные стереотипы, они начинают их воспроизводить и даже усиливать.
Классическим примером является ситуация, в которой онлайн-переводчик может предполагать гендер профессии: «врач» — мужчина, «медсестра» — женщина.
Алгоритм анализирует текст, но не понимает социальный контекст. Если данные исторически связаны со стереотипами, они переносятся на продукт.
Сначала анализировать данные на предмет дисбаланса. Например, подсчитать соотношение упоминаний профессий в гендерных категориях.
Использовать подходы деконструкции — заменять гендерные или культурные термины на нейтральные аналоги.
Добавлять этапы проверки: перед запуском алгоритмов проводить оценку их поведения на предмет несправедливых выводов.
Иногда алгоритмы ИИ стремятся оптимизировать процессы, не учитывая разнообразие реального мира. Это приводит к автоматическим решениям, которые не соответствуют ожиданиям пользователей.
Популярные косметические фильтры-приложения, часто предлагают отбелить кожу или изменить черты лица, чтобы соответствовать западным стандартам красоты.
Такие системы не только основаны на стереотипах и могут обидеть пользователей, но и подрывают доверие к бренду.
Обучать модели на разнообразных данных, которые учитывают разные культурные стандарты.
Добавлять возможность ручной корректировки результатов, чтобы пользователь чувствовал контроль.
Тестировать продукт на аудитории из разных стран, социальных групп и культур.
ИИ, который учится на взаимодействии с пользователями, может стать отражением их худших черт.
Чат-бот Tay от Microsoft стал расистским всего за сутки, потому что обучался на токсичных данных из Twitter.
Алгоритмы, которые учатся в реальном времени, подвержены манипуляциям.
Ограничивать области для обучения, особенно в реальном времени.
Внедрять фильтры для отслеживания токсичных данных.
Использовать алгоритмы, которые оценивают поведение пользователей и блокируют манипуляции.
Рекомендательные системы склонны предлагать пользователю контент, основанный на его прошлом опыте. Это создаёт эффект «цифрового пузыря», когда человек перестаёт видеть альтернативы.
Многие рекомендательные системы подвергаются критике за алгоритмы, которые усиливают радикальные взгляды, предлагая схожий контент.
Цифровые пузыри не только ограничивают пользователя, но и могут привести к социальной поляризации.
Внедрять элементы случайности, чтобы предлагать неочевидные рекомендации.
Разрабатывать системы, которые показывают противоположные точки зрения.
Добавлять кнопки для исследования нового контента: например, «Попробуйте что-то другое».
Компании, которые делают акцент на цифровой доступности, получают конкурентное преимущество: 57% пользователей готовы платить больше за сервисы, которые учитывают их индивидуальные потребности.Кроме того, устранение предвзятости снижает юридические риски. Например, в 2019 году Apple столкнулась с критикой из-за Apple Card, чьи алгоритмы кредитных лимитов оказались дискриминационными для женщин.
Создание инклюзивного ИИ — это не просто техническая задача. Это способ сделать продукт полезным и доступным для всех. Продукты, которые учитывают потребности разнообразной аудитории, получают больше доверия, больший охват и становятся стандартом качества.
Если хотите узнать больше об инклюзии в ИИ, читайте наш блог или попробуйте Assistapp, чтобы сделать ваш сайт доступным для всех пользователей.
Интернет-издание Forbes представило ежегодный рейтинг топ-работодателей России, основанный на оценке компаний по критериям устойчивого развития. В итоговый список вошли 207 организаций, среди которых — ИТ-компания RedLab.
Если вы хотите повысить видимость сайта и не тратить время на поиск подрядчика, изучите наш рейтинг лучших SEO-компаний России. Собрали агентства, которые показывают стабильные результаты и помогают бизнесу занимать первые позиции в поиске. В материале — подробные описания участников рейтинга, сравнительная таблица, методика оценки и практические рекомендации по выбору партнера.