Количество пользователей интернета постоянно увеличивается, общее их количество уже перевалило за половину всего населения Земли. Если же к этому добавить и корпоративных клиентов, можно получить отдалённое представление о нагрузке, которую испытывают на себе серверы в глобальной сети. Возможно, частично потребность в вычислительных мощностях сможет удовлетворить новый суперкомпьютер, представленный компанией Meta (бывший Facebook).

Информационная нагрузка

Современный человек уже успел привыкнуть к быстрому интернету, мгновенно открывающимся страницам сайтов, к субтитрам в видео и поисковым запросам, которые обрабатываются практически мгновенно. Вот только редко кто задумывается, почему всё это работает и насколько большой вычислительной мощностью должно обладать используемое оборудование. Тем не менее тот же самый Facebook (Meta) давно перестал быть просто социальной сетью. С тех пор, как в 2006 году была открыта свободная регистрация, соцсеть обросла огромным количеством сервисов и превратилась в транснациональную компанию. Разумеется, потребность в вычислительных мощностях выросла колоссально.

Искусственный интеллект доказал полезность и нашёл применение в самых разных сферах, и Facebook начал активно развивать собственные технологии в этом направлении. В конечном итоге это оказало помощь в управлении миллионами пользовательскими аккаунтами в социальной сети и различными сервисами, в том числе и модерацией контента. Следующим шагом стало создание огромного кластера Meta AI (RSC), работающего под управлением искусственного интеллекта.

Супервычислительный кластер

Основное предназначение созданного суперкомпьютера – обработка огромного количества данных, поступающих от пользователей социальной сети. Как ожидают специалисты, с его помощью можно будет значительно расширить функционал и увеличить количество инструментов, доступных членам сообщества. Например, будет улучшено распознавание объектов на фотографиях, преобразование текста в речь, выявление запрещённого контента, а также перевод с одного языка на другой. Технически эти задачи лягут на графические модули Nvidia A100, они объединены в единую систему, а их количество на текущий момент составляет 6080 штук. Для их соединения используется квантовая сеть InfiniBand, пропускная способность которой составляет 200 Гбит/с, что позволяет намного повысить скорость работы системы в целом.

Для обеспечения работы с огромными массивами данных используется кэш-память размером 46 петабайт, ещё 10 петабайт выделено под сетевое хранилище NFS, а также 175 петабайт (175 миллионов гигабайт) – под основное хранилище. В ходе тестирования суперкомпьютер показал отличные результаты, например, работа с машинным зрением происходила в 20 раз быстрее предыдущего суперкомпьютера. Планируется, что к середине текущего года Meta AI (RSC) обновят, установив ещё 10 000 модулей Nvidia A100, новую сеть с пропускной способностью 16 терабайт/с и хранилищем размером 1000 петабайт.

Понравилась эта новость? Подпишись на нас в соцсетях!