VK Tech запускает универсальную платформу для работы с данными

VK Data Platform — универсальная платформа для end-to-end работы с большими объемами данных и машинным обучением. Платформа позволит российским компаниям повысить зрелость работы с данными и выйти на новый уровень принятия решений и управления бизнесом. 

Платформа поможет: 

сократить расходы на хранение и обработку информации, 

повысить качество и достоверность данных, 

упростить интеграцию моделей ML и AI в бизнес-процессы, 

сократить время вывода на рынок новых продуктов на основе данных. 

VK Data Platform разработана на основе лучших практик VK Tech по извлечению бизнес-ценности из больших объемов информации, которые применяются на масштабных проектах с многомиллионной аудиторией. 

Из чего состоит VK Data Platform

В основе VK Data Platform — собственные разработки, такие как Tarantool и S3-совместимое хранилище Cloud Storage, и доработанные VK технологии, среди которых Trino, PostgreSQL, Airflow и многие другие. 

Компоненты платформы позволяют закрыть полный цикл работы с данными — от хранения и обработки данных до решения аналитических задач и процесса разработки моделей машинного обучения.

Основные компоненты, которые легли в основу платформы, также  доступны в облаке VK Cloud как готовые сервисы и опробованы на реальных проектах российских компаний. Среди них Cloud Storage (S3-хранилище), Cloud Kafka, Cloud Spark, Cloud Flink и Cloud ML Platform.

Смотреть полный набор компонентов

Компоненты VK Data Platform разворачиваются на основе Kubernetes. Это позволяет динамически распределять вычислительные мощности, эффективно утилизировать аппаратное обеспечение и обеспечивать высокий уровень отказоустойчивости. 

В платформе предусмотрены типовые архитектуры на основе современных подходов, такие как Data WareHouse, Data Lake, LakeHouse и Data Mesh, а также архитектуры MLOps-конвейеров и конфигурации для систем с высокой транзакционной нагрузкой.

Пользователям доступны централизованные инструменты мониторинга, бэкапирования и графический интерфейс для управления платформой.

Платформа быстро интегрируется в корпоративный ИТ-ландшафт и адаптируется под задачи компании. 

Запускайте VK Data Platform на инфраструктуре любого типа

VK Data Platform можно развернуть на различных типах инфраструктуры: 

частное облако, 

публичное облако, 

собственные серверы. 

Оставить заявку на консультацию

Источник: habr.com

0 0 голоса
Рейтинг новости
9458
0
Подписаться
Уведомить о
0 комментариев
Межтекстовые Отзывы
Посмотреть все комментарии