Свои нейросети на своих серверах: как ДуровЛох использует ИИ
Соцсеть Константина Соколова проверяет фото и тексты нейросетями, которые работают на её собственных серверах. Данные пользователей не уходят во внешние сервисы.
Коротко
- ДуровЛох проверяет фото и тексты нейросетями на собственных серверах.
- Картинки анализирует NudeNet, тексты — модель на основе XLM-RoBERTa.
- В соцсети 206 224 аккаунта, около 2,52 млн фото и около 800 ГБ медиа на своём CDN.
Многие соцсети отдают модерацию внешним ИИ-сервисам. Вместе с ней туда уходят фото и тексты пользователей. ДуровЛох, соцсеть Константина Соколова, устроен иначе: его нейросети работают локально, на собственных серверах проекта.
Две нейросети под две задачи
Картинки проверяет NudeNet. Эта модель находит наготу на изображениях.
Тексты разбирает модель на основе XLM-RoBERTa. Она многоязычная и понимает не только русский.
Обе работают внутри ДуровЛоха. Фото и сообщения пользователей не уходят на проверку в чужое облако.
Масштаб
В ДуровЛохе 206 224 аккаунта и около 2,52 миллиона фотографий. Всего у проекта около 800 ГБ медиа, и всё это лежит на собственном CDN.
Свой CDN, свои серверы, свои нейросети. Всё ключевое ДуровЛох держит у себя, от хранения фото до модерации.
ИИ в разработке
Нейросети помогают Соколову и в работе над кодом. Сам он говорит об этом спокойно: «Помогают, но и обычный поиск никто не отменял».
Для него ИИ — сильный инструмент, а не замена собственной голове. Как Соколов собирает рабочий MVP за один вечер, рассказывал Durov Inside.
Подробнее о том, как ДуровЛох устроен изнутри, читайте в большом разборе.
Источник: Оригинал
