В VK Tech создали единую платформу для работы с большими данными, нейросетями и ИИ
Компания VK (бывшая Mail.ru Group) объявила о запуске нового проекта в рамках VK Tech. Универсальная платформа VK Data Platform предназначена для комплексной работы с большими объемами данных, нейросетями и искусственным интеллектом. Как пояснили в пресс-службе, с ее помощью крупный бизнес сможет ускорить обработку, управление, обогащение и анализ данных.
Также платформа позволит быстро внедрять алгоритмы искусственного интеллекта и нейросети в бизнес. Платформа ориентирована на банковский сектор, ретейл и электронную коммерцию, транспорт, логистику, телекоммуникации и промышленность.
VK Data Platform включает 16 готовых инструментов. Платформа решает разноплановые задачи: от хранения и обработки до решения аналитических задач и процесса разработки моделей машинного обучения.
Основа VK Data Platform — собственные разработки, такие как Tarantool и S3-совместимое хранилище Cloud Storage. Также в платформу вошли другие технологии, ставшие стандартом для индустрии: PostgreSQL, Trino, Airflow. Ряд инструментов платформы доступен в облаке VK Cloud и опробован на реальных проектах российских компаний. Среди них Cloud Storage (S3-хранилище), Cloud Kafka, Cloud Spark, Cloud Flink и Cloud ML Platform.
Платформа может быть развернута на различных типах инфраструктуры, включая публичные и частные облака, а также собственные серверы компании. В ней предусмотрены типовые архитектуры на основе современных подходов, что позволяет быстро адаптировать её под задачи любой компании и ускоряет интеграцию решения в корпоративный ИТ-ландшафт. Компоненты VK Data Platform разворачиваются на основе Kubernetes, что позволяет динамически распределять вычислительные мощности, эффективно утилизировать аппаратное обеспечение и обеспечивать высокий уровень отказоустойчивости.