изображение 70.png
Масштабируемая корпоративная система хранения данных, обеспечивающая бесперебойную передачу данных между хранилищем и моделями ИИ. Фото: Midjourney

Искусственный интеллект меняет способы хранения и доступа к данным в бизнесе. Это связано с тем, что традиционные системы хранения данных были разработаны для обработки простых команд от нескольких пользователей одновременно, тогда как современные системы ИИ с миллионами агентов должны получать доступ к огромным объёмам данных и обрабатывать их непрерывно и параллельно.

Традиционные системы хранения данных теперь имеют много уровней сложности, что замедляет работу ИИ, поскольку данные должны пройти через много уровней, прежде чем достигнуть графического процессора — графического процессора, который считается «мозговой клеткой» ИИ.

Компания Cloudian, основанная Майклом Цо (из Массачусетского технологического института) и Хироши Охтой, помогает системам хранения данных идти в ногу с революцией в области искусственного интеллекта. Компания разработала масштабируемую корпоративную систему хранения данных, которая обеспечивает плавный обмен данными между системами хранения и моделями искусственного интеллекта.

Система снижает сложность за счет применения параллельных вычислений к хранилищу, консолидируя функциональность ИИ и данных на единой параллельной платформе обработки, способной хранить, извлекать и обрабатывать большие наборы данных, с высокоскоростным прямым соединением между хранилищем и как графическими процессорами, так и центральными процессорами.

Интегрированная вычислительно-складская платформа Cloudian упрощает создание инструментов ИИ в коммерческих масштабах, предоставляя предприятиям инфраструктуру хранения данных, способную справиться с бурным развитием ИИ.

«Одно из часто забываемых моментов в отношении ИИ — это то, что всё дело в данных», — говорит Цо. «Невозможно добиться 10% повышения производительности ИИ, увеличив объём данных на 10%, и даже десятикратного увеличения данных недостаточно — нужно в 1000 раз больше. Хранение данных таким образом, чтобы ими было легко управлять, и внедрение вычислений непосредственно в процесс, чтобы их можно было обрабатывать по мере поступления, без необходимости перемещать данные, — вот куда движется отрасль».

Хранилище объектов и ИИ

В настоящее время платформа Cloudian использует архитектуру объектного хранилища, в которой все типы данных — документы, видео , данные датчиков — хранятся как отдельные объекты с метаданными. Объектное хранилище позволяет управлять большими объемами данных в плоской структуре, что делает его идеальным для неструктурированных данных и систем искусственного интеллекта. Однако ранее было невозможно отправлять данные напрямую в модель искусственного интеллекта без предварительного копирования в память компьютера, что приводило к задержкам и энергозатратам.

В июле компания Cloudian объявила о расширении своей системы хранения объектов с помощью векторной базы данных, которая хранит данные в формате, сразу доступном для использования ИИ. По мере поступления данных Cloudian вычисляет их векторную форму в режиме реального времени для поддержки инструментов ИИ, таких как рекомендательные системы, поиск и ИИ-помощники.

Cloudian также объявила о партнёрстве с NVIDIA, которое позволит её системе хранения данных работать напрямую с графическими процессорами. Cloudian заявила, что новая система обеспечивает более быструю обработку данных ИИ и снижает затраты на вычисления.

«NVIDIA обратилась к нам около полутора лет назад, поскольку графические процессоры полезны только при наличии данных», — сказал Цо. «Сейчас люди понимают, что проще применять ИИ к данным, чем перемещать огромные объёмы данных. В нашей системе хранения данных встроено множество функций ИИ, поэтому мы можем выполнять предварительную и постобработку данных непосредственно в месте их сбора и хранения».

Приоритетное хранилище ИИ

Cloudian помогает примерно 1000 компаний по всему миру извлекать максимальную выгоду из своих данных, включая крупных производителей, финансовые учреждения, учреждения здравоохранения и государственные учреждения.

Например, платформа хранения данных Cloudian помогает крупному автопроизводителю использовать ИИ для определения необходимости технического обслуживания каждого из его производственных роботов. Cloudian также сотрудничает с Национальной медицинской библиотекой США для хранения исследовательских работ и патентов, а также с Национальной базой данных по раковым заболеваниям для хранения последовательностей ДНК опухолей — обширных наборов данных, которые ИИ может обрабатывать для разработки новых методов лечения или научных открытий.

«Графические процессоры — отличный инструмент», — говорит Цо. «Закон Мура удваивает вычислительную мощность каждые два года, но графические процессоры могут распараллеливать задачи на кристалле, объединять несколько графических процессоров в цепочку и превосходить закон Мура. Такой масштаб выводит ИИ на новый уровень интеллекта, но единственный способ заставить графические процессоры работать максимально эффективно — это передавать данные с той же скоростью, с которой они обладают вычислительной мощностью, а единственный способ сделать это — устранить все промежуточные уровни между графическим процессором и вашими данными».

(По данным Массачусетского технологического института)

Источник: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html