NetApp Insight 2018 — NVMe, MAX data, SCM

NetApp Insight 2018 — NVMe, MAX data, SCM

НОВОСТИ ТОП

НОВОСТНАЯ ЛЕНТА

НОВИНКИ ВЕНДОРОВ

“NetApp Insight 2018”. Отчет о пресс-конференции

С 22 по 25 октября в Лас-Вегасе (США) прошла конференция NetApp Insight 2018 – крупнейшее для известной американской компании мероприятие, в ходе которого обычно делаются все ключевые анонсы текущего года. 3–5 декабря в Барселоне пройдет NetApp Insight 2018, предназначенная для европейских партнеров и заказчиков, – на данном форуме также ожидается анонс новинок продуктовой линейки NetApp. В промежутке между этими двумя большими событиями московский офис компании провел пресс-конференцию, где российские топ-менеджеры рассказали о состоянии бизнеса, перспективах развития компании и важнейших анонсах, сделанных на конференции NetApp Insight в Лас-Вегасе.

глава представительства NetApp в России и странах СНГ

Татьяна Бочарникова, глава представительства NetApp в России и странах СНГ , анализируя локальные успехи компании, заявила о том, что прошлый финансовый год (начавшийся 1 мая 2017 г.) оказался для ее офиса очень удачным – NetApp смогла достичь в России 60% роста YOY (Year Over Year). Что же касается текущего финансового года, то его показатели обещают быть еще более впечатляющими, по крайней мере, за I квартал наблюдается повышение на 29%.

Сегодня компания – «номер один» по All-Flash-решениям, причем как на мировом рынке, так и в России. Как особо подчеркнула Татьяна Бочарникова, рост продолжается десять кварталов подряд. Кроме того, NetApp является лидером по управлению данными в гибридных облаках и держит в России второе место в секторе SAN.

Глава представительства NetApp в России отметила, что в РФ уже перестали быть редкостью поставки гиперконвергентных решений HCI, SolidFire, StorageGRID, которые востребованы в разных индустриях, поэтому выделить какой-то один тип заказчиков, интересующихся этими системами, невозможно.

Татьяна Бочарникова объясняет успех NetApp продвинутыми наработками в области облачных технологий и Flash-решений. Еще одной причиной успеха она считает наличие мощной операционной системы для СХД – ONTAP 9.5.

Роман Ройфман, технический директор NetApp в России, странах СНГ и Восточной Европе

Роман Ройфман, технический директор NetApp в России, странах СНГ и Восточной Европе, в своем докладе рассказал об анонсированных новинках компании и о том, как они помогают реализовывать стратегическую линию NetApp.

Прежде всего, он описал участникам пресс-конференции новую структуру компании, которая теперь организационно включает в себя три основных бизнес-юита. Во-первых, это подразделение, которое выпускает облачные решения, ориентированные на Cloud Native потребителей. Второе крупное подразделение занимается интеграцией новых инфраструктур в on-prem решениях (объектные хранилища, HCI, гиперконвергентные и конвергентные решения). Третий юнит занимается решениями для ЦОД (в on-prem).

Роман Ройфман сразу подчеркнул, что эти три бизнес-юита не предполагают движения в разных направлениях – они тесно связаны друг с другом. Например, говоря о Flash, эксперты NetApp всегда подразумевают, что оно должно быть связано с облачными решениями, а облачные решения, такие как ONTAP Cloud Services, – это тоже решения, построенные на Flash. Технология машинного обучения попадает сразу в три юнита, поскольку ML связано с продвижением больших Flash-массивов, с решениями на ONTAP Select и с решениями, связанными с облаками.

Затем Роман Ройфман перешел, собственно, к объявленным на NetApp Insight новинкам.

На первом месте здесь оказались так называемые Cloud-First сервисы – решения NetApp, ориентированные на комьюнити разработчиков. Немногим более месяца тому назад стало известно о приобретении StackPointCloud – передовой платформы Kubernetes-as-a-service, которая напрямую поддерживает возможности использования приложений для организации данных в облаке. Вслед за этим приобретением компания NetApp запустила сервис NetApp Kubernetes Service, Universal Control Plane for Managed Kubernetes, упрощающий развертывание кластера Kubernetes в облаке. NetApp также недавно объявила о новых модулях Ansible для Element, ONTAP и SANtricity, которые позволяют заказчикам использовать знакомые инструменты для разработки и внедрения консистентной инфраструктуры для разработки, тестирования и производства.

Далее был представлен новый облачный сервис Cloud Insights – инструмент для мониторинга и оптимизации инфраструктуры, доступный в виде SaaS, разработанный специально для динамических гибридных облачных инфраструктур. Инструмент Cloud Insights специально разработан для мониторинга современных облачных архитектур, таких как Kubernetes и микро-сервисы. NetApp Cloud Insights позволяет понимать, что происходит в ИТ-инфраструктуре заказчика и обеспечивать: мониторинг облачной инфраструктуры и предотвращение до 80% проблем, которые могут возникнуть у конечных пользователей; уменьшение среднего времени решения проблем на 90%; сокращение расходов на облачную инфраструктуру в среднем на 33%.

Решение Cloud Insights будет доступно в трех редакциях: стандартной, премиальной и базовой. Интересно, что базовая редакция, по заявлению Романа Ройфмана, с системами NetApp будет доступна в качестве бесплатного сервиса.

Еще одна новинка – Azure NetApp Files – представляет собой файловый сервис Azure на основе технологий NetApp ONTAP, обеспечивающий хранение, управление, безопасность и защиту данных корпоративного уровня для заказчиков, перемещающих рабочие нагрузки своих предприятий в облако Microsoft Azure. Аналогичный сервис доступен и в Google, только называется он несколько иначе – Cloud Volumes Service for GCP. Тот же самый сервис доступен и в Amazon – под названием Cloud Volumes Service for AWS.

Затем был представлен уже не облачный сервис, а экземпляр операционной системы ONTAP, работающий в облачной среде – NetApp Cloud Volumes ONTAP. Независимо от того, выбирают заказчики Azure или AWS для запуска своих критически важных приложений в облаке, Cloud Volumes ONTAP в любом случае поможет воспользоваться встроенной функцией обеспечения отказоустойчивости с высокой доступностью. Далее, благодаря SnapLock Enterprise заказчики смогут получит возможность соответствовать требованиям законодательных норм и внутренних политик своей организации. А с помощью сервиса NetApp Cloud Tiering Service можно оптимизировать размещение данных благодаря их автоматическому распределению в ЦОД и облаке.

Как отметил Роман Ройфман, NetApp видит большое будущее за контейнерами, поэтому прилагает немало усилий к развитию соответствующего направления. Так, был обновлен Trident – инструмент NetApp для автоматического выделения ресурсов для контейнерных сред Docker, Kubernetes и Red Hat OpenShift Container Platform. В новой редакции он поддерживает NetApp Cloud Volumes ONTAP, резервное копирование и восстановление с использованием копий NetApp Snapshot, а также мультиоблачные среды.

Trident предлагает обширную производственную поддержку для постоянного хранения на контейнерных платформах, доступных сегодня, обеспечивая самостоятельное хранение и управление данными на нативном языке контейнера. Модуль повышает эффективность, упрощая и автоматизируя постоянство хранения данных в контейнерах, устраняя необходимость в ручной работе по их выделению. Trident обеспечивает гибкие процессы цепочки «создание – тестирование – развертывание», снижая необходимость в человеческом вмешательстве в эти процессы, тем самым повышая качество работы ПО и удовлетворенность заказчиков. Модуль повышает последовательность данных и безопасность благодаря масштабируемым решениям для управления контейнерами. Наконец, Trident постоянно развивается и оптимизируется: разработчики непрерывно совершенствуют модуль, добавляя ему новые возможности, поскольку это продукт с открытым кодом.

Еще один анонс – объектное хранилище StorageGRID SG6060. Ускоренное при помощи Flash-технологий, оно обеспечивает высокую производительность, а также высокую многопоточность рабочих нагрузок для Интернета вещей, аналитики больших данных и сред машинного обучения. В комбинации с ONTAP FabricPool заказчики теперь могут получить и самые широкие в отрасли возможности управления данными, одновременно экономя средства благодаря объектному хранению данных.

Представляя операционную систему NetApp ONTAP 9.5, Роман Ройфман указал на высокую производительность и согласованно низкую латентность, что позволяет выполнять критически важные рабочие нагрузки с помощью сквозной поддержки протокола NVMe. ONTAP 9.5 унифицирует управление данными на любых ресурсах хранения, будь то Flash, жесткие диски или облако; автоматизирует балансировку нагрузки на ресурсы хранения в масштабе петабайт для объектных хранилищ, как облачных, так и on-prem; снижает стоимость развертывания систем хранения данных для обеспечения непрерывной работы бизнеса, распределенного по нескольким площадкам; повышает производительность чтения кэшированных наборов данных в кластере на удаленных площадках; увеличивает эффективность хранения данных, экономя до 15% пространства для приложений реляционных баз данных; радикально повышает производительность за счет автоматического тиринга между системами AFF и NetApp MAX Data на серверах.

В завершающей части выступления Роман Ройфман уделил большое внимание новому ПО MAX Data, которое позволяет заказчикам значительно нарастить производительность приложений без переписывания их кода. MAX Data – это первое отраслевое решение для использования Persistent Memory на серверах для сверхнизкого времени отклика.

Показательно, что NetApp решилась на необычный шаг: она предлагает заказчикам Flash Performance Guarantee – первую в отрасли гарантию по времени отклика, что обеспечивает заказчикам возможность с уверенностью использовать приложения на основе ИИ с предсказуемо низким временем отклика. Гарантия предполагает постоянный уровень времени отклика 500 мс и менее, позволяя предприятиям снижать риски благодаря переходу на Flash.

NetApp NVMe: Leading the Future of Flash

Unleash the power of your data: industry’s first all-flash solution with NVMe inside and out.

Your data is a gold mine. Get the most out of it—faster—with AFF A800.

Designed for NVMe media, further accelerated with NVMe/FC connectivity to the host, AFF A800 all-flash systems deliver an incredible sub-200 microsecond latency.

Providing more than 11.4M IOPS and 300GB/s throughput in a single cluster, AFF A800 redefines the limit of what’s possible with artificial intelligence and deep learning.

Modernize to a faster future. Without disruption.

Accelerate your infrastructure. Reduce the time required to unlock the full value of your data.

The Data Fabric, enabled by ONTAP® 9 scale-out architecture, lets you add new technologies such as NVMe—without forklift upgrades.

You can even enable NVMe over Fibre Channel (NVMe/FC) over many existing SAN deployments. It just takes a software refresh for select models of the AFF A-series all-flash arrays.

Your new Data Fabric is ready when you are.

Realize the true advantages of NVMe technology.

NVMe drives alone won’t deliver on the promise of the next performance revolution. To realize the true value of NVMe technology, you need an NVMe fabric to the host.

Run 60% more workloads or reduce the application-response time by half with NVMe/FC on AFF A-Series systems. Achieve consistent microsecond latency with NVMe/RoCE and NVMe/InfiniBand support on EF-Series systems.

Achieve 2,000,000 IOPS or sub-100 microsecond latency with NVMe/RoCE, NVMe/FC, NVMe/InfiniBand on EF-Series systems. The EF600 is the industry’s leading price/performance end-to-end NVMe system.

Watch: our vision for NVMe over Fabrics and storage-class memory.

See NetApp Strategist and Chief Evangelist Jeff Baxter present “Creating the Fabric of a New Generation of Enterprise Apps.”

Learn how data centers will implement an overall “flash fabric” to dramatically reduce latency and power a new generation of real-time applications, including:

• Data Analysis
• Cognitive Computing
• Artificial Intelligence
• Virtual and Augmented Reality

SIMPLICITY. INSIGHTS. SPEED.
A LEADER IN PRIMARY STORAGE.

More on NVMe Technology

Why NetApp? A Partner Perspective

NetApp is a leader in NVMe innovation and on the NVMe standards body. John Woodall of IAS answers the question: What’s the differentiator for NetApp?

Demystifying NVME

In this NetApp Tech ONTAP® podcast, we discuss whether NVMe is the future or just a passing trend. Where does NVMe fit within the NetApp product portfolio?

PopUp TechTalks

This time on PopUp TechTalks, Manfred Buchmann tackles NVMe and explains exactly why you might be finding less time for Twitter in the near future.

NetApp & Next Generation Storage Technologies

There are some exciting technology developments taking place in the storage industry, some behind closed doors but some that are also publicly announced and already commercially available that most of you may already have come across. Some of these are organic developments to build on existing technologies but some are inspired by megascalers like AWS, Azure, GCP and various other cloud platforms. I’ve been lucky enough to be briefed on some of these when I was at SFD12 last year I the Silicon Valley, by SNIA – The Storage and Networking Industry Association that I’ve previously blogged about here.

This time around, I was part of the Storage Filed Day (SFD15) delegate panel that got a chance to visit NetApp at their HQ at Sunnyvale, CA to find out more about some of exciting new product offerings that are in NetApp’s roadmap, either in the works or starting to just come out, incorporating some of these new storage technologies. This post aim to provide a summary of what I learnt there and my respective thoughts.

Introduction

It is no secret that Flash media has changed the dynamics of the storage market over the last decade due to their inherent performance characteristics. While the earliest incarnations of flash media were prohibitively expensive to be used in mass quantities, the invention of SSDs commoditised the use of flash media across the entire storage industry. For example, most tier 1 workloads in the enterprises today are held on a SSD backed storage system where SSD disk drives form the whole or a key part of the storage media stack.

When you look at some of the key storage solutions in use today, there are 2 key, existing flash technologies that stand out, DRAM & SSD. DRAM is the fastest possible flash storage media that is most easily accessible by the data processing compute subsystem while SSD’s fall in to next best place when it comes to speed of access and the level of performance (IOPS & bandwidth). As such, most enterprise storage solutions in the world, be that the ones aimed at the customer data centers or on the megascaler’s cloud platforms utilise one or both of these flash media types to either accelerate (caching) or simply store tier 1 data sets.

It is important to note that, while the SSD’s benefitted from the overall higher performance and lower latency compared to mechanical drives due to the internal architecture of the SSD disks themselves (flash storage cells that don’t require spinning magnetic media), both the SSD drives and classic mechanical (spinning) drives are typically attached & accessed by the compute subsystem via the same SATA or the SaS interface subsystem with the same interface speed & latency. Often the internal performance of an SSD was not fully realised to its maximum potential, especially in an aggregated scenario like that of an enterprise storage array, due to these interface controller access speed and latency limitations, as illustrated in the diagram below.

One of the more recent technology developments in the storage and compute industry, namely “Non-Volatile Memory Express” (NVMe) aims to address these SAS & SATA interface driven performance and the latency limitations through the introduction of new, high performance host controller interface that has been engineered from the ground up to be able to fully utilise flash storage drives. This new NVMe storage architecture is designed to be future proof and would be compatible with various future disk drive technologies that are NAND based as well as non-NAND based storage media.

NVMe SSD drives connected via these NVMe interfaces will not only outperform traditional SSD drives attached via SAS or SATA, but most importantly will enable higher future capabilities such as being able to utilise Remote Direct Memory Address (RDMA) for super high storage performance extending the storage subsystem over a fabric of interconnected storage and compute nodes. A good introduction to the NVMe technology and its benefits over SAS / SATA interfaces can be viewed here.

Another much talked about development on the same front is the subject of the Storage Class Memory (SCM) – Also known as Persistent Memory (PMEM). SCM is an organic successor to the NAND technology based SSD drives that we see in mainstream use in flash accelerated as well as all flash storage arrays today.

At a theoretical level, SCM can come in 2 main types as shown in the above diagram (from a really great IBM research paper published in 2013).

The idea of the SCM is to address the latency and performance gap that exist in every computer system when it comes to memory and storage since the advent of X86 computing. Typically, access latency for DRAM is around 60ns, and the next best option today, NVMe SSD drives will have a typical latency of around 20-200us and the SCM will fit in between these 2, at a typical latency between 60ns-20uS, depending on the type of the SCM, with a significantly high bandwidth that is incomparable to SSD drives. It is important to note however that most ordinary workloads do not need this type of super latency sensitive, extremely high bandwidth storage performance, the next generation data technologies involving Artificial Intelligence techniques such as machine learning, real-time analytics that relies on processing extremely large swathes of data at super quick time, would absolutely benefit, and in most instance, necessitate the need for these next gen storage technologies to be fully effective.

NetApp’s NVMe & SCM vision

NetApp was one of the first classic storage vendors who incorporate flash in to their storage systems, in an efficient manner to accelerate the workloads that is typically stored on spinning disks. This started with the concept of NVRAM that was included in their flagship FAS storage solutions as an acceleration layer. Then came the flash cache (PAM cards) which were flash media attached via the PCIe subsystem to act as a cashing layer for reads which was also popular. Since the advent of all flash storage arrays, NetApp went another step by introducing all flash storage in to their portfolio through the likes of All Flash FAS platform that was engineered and tuned for all flash media as well as the EF series.

NetApp innovation and constant improvement process hasn’t stopped there. During SFD15 event, we were treated to the next step of this technology evolution by NetApp when they discussed how they plan to incorporate the above mentioned NVMe and SCM storage technologies in to their storage portfolio, in order to provide next gen storage capabilities to serve next gen use cases such as AI, big data and real-time analytics. Given below is a holistic roadmap plan of where NetApp see NVMe and SCM technologies fitting in to their roadmap, based on the characteristics, benefits and costs of each technology.

The planned use of NVMe is clearly in 2 different points of the host->storage array communication path.

NVMe SSD drives : NVMe SSD drives in a storage array, attached via NVMe host controller interface in order to be able to fully utilise the latency and throughput potential of the SSD drives themselves by the storage processor (in the controllers). This will provide additional performance characteristics to the existing arrays.

The planned (or experimented) use of SCM is in 2 specific areas of the storage stack, driven primarily by the costs of the media vs the need for acceleration.

Based on some of the initial performance benchmarks, the effect of this is significant, as can be seen below when compared to a normal

My thoughts

As an IT strategist and an Architect at heart with a specific interest in storage who can see super data (read “extremely large quantities of data”) processing becoming a common use case soon across most industries due to the introduction of big data, real-time analytics and the accompanying Machine Learning tech, I can see value in this strategy from NetApp. Most importantly, they are looking at using these advanced technologies in harmony with some the proven, tried and tested data management platforms they already have in the likes of OnTAP software could be a big bonus. The acquisition of Plexistor was a good move for NetApp and integrating their tech and having a shipping product would be super awesome if and when that happens but I would dare say the use cases would be somewhat limited prohibitive initially given the Linux dependency. Others are taking note and the HCI vendor Nutanix’s acquisition of PernixData kind of hints Nutanix also having a similar strategy to that of Plexistor and NetApp.

While the organic growth of current product portfolio with capabilities through incorporating new tech such as NVMe is fairly straight forward and help NetApp stay relevant, it remains to be seen however how well acquisition driven integration such as that of Plexistor with SCM technologies to the NetApp platform would pan out to become a shipping product. NetApp has historically had issues around the efficiency of this integration process which in the past has known to be slow but this time around, under the new CEO George Kurian who brought in a more agile software development methodology and therefore, a more frequent feature & update release cycle, things may well be different this time around. The evidence seen during SFD15 pretty much suggest the same to me which is great.

NetApp представила NVMe решения с системами корпоративного класса InfiniBand

NetApp объявила о выходе мощной системы, которая установила новый рекорд соотношения цены и производительности, и предложила новое ПО, которое стало дополнением ее линейки продуктов для аналитики больших данных, включая новое для рынка решение NVM-e и решение NetApp с конвергентной инфраструктурой для аналитики данных . Эти новые предложения обеспечивают ультра-быструю производительность и структурные элементы для быстрого, безопасного и эффективного управления данными, которое учитывает и будущие требования к хранению данных.

Сегодня компании должны использовать и оптимизировать богатый потенциал данных, сделав их эффективными, стратегически и тактически полезными на будущее. Целенаправленная аналитика — это ключевая отличительная характеристика, обеспечивающая разумность решений и конкурентные преимущества. Решения для управления данными, которые хранятся в гибридных облаках, должны обеспечивать оптимальную производительность работы приложений и непрерывную готовность данных, чтобы компания смогла выгодно отличаться от конкурентов и максимально сокращать время вывода продукции на рынок.

Система NetApp EF570 all flash – это 4 поколение массивов all flash, специально разработанное для высокопроизводительных нагрузок — таких, как аналитика больших данных, технические вычисления и видеонаблюдения, сегодня обеспечивает до 21GBps полосы пропускания, 1M поддерживаемого IOPS, суб-100 микросекундную задержку, а также поддержку 100Gb NVMe с InfiniBand с целью повышения отклика приложений и ускорения аналитики — все это в компактной стойке 2U. Система поддерживает 367TB «сырого» флэш в модульном блоке 2U, который масштабируется до 1.8PB.

Гибридная флэш система NetApp E5700 Series – ускорение производительности и повышение плотности с помощью гибридной флэш системы, которая идеально подходит для современных корпоративных приложений. Она также поддерживает 100Gb NVMe с InfiniBand.

SANtricity Cloud Connector – реализует возможности Data Fabric, обеспечивая экономичное резервное копирование и восстановление в облаке из систем E/EF-Series.

ПО NetApp SANtricitry – SANtricity 11.4 содержит технические усовершенствования — такие, как доступ к контролю и журналу проверки на основе ролей, а также поддержку Active Directory. Поставляется с on-box SANtricity System Manager.

Конвергентное инфраструктурное решение NetApp для аналитики данных сочетает в себе новейшую СХД, сетевые и серверные технологии в предварительно протестированной, апробированной референсной архитектуре, которая позволяет упрощать внедрение аналитических сред.

«Организации стремятся к тому, чтобы данные стали ценным бизнес-активом, но зачастую это не получается по причине неэффективности инфраструктур, которые просто не созданы для высокопроизводительных рабочих нагрузок, — сказал Риту Джуоти, директор по научным исследованиям, инфраструктуре для больших данных и аналитике, IDC. — Нехватка скорости для аналитики данных третих платформ и бизнес-данных в реальном времени дает понять, что экстренные дорогостоящие обновления инфраструктуры — это не выход. Предприятия нуждаются в решении, которое обеспечивает оптимальное соотношение цены и производительности и эффективное выполнение бизнес-задач».

«Мы знаем, что технологии меняются быстро, и поэтому мы всегда используем передовые находки в плане приложений и инфраструктурной архитектуры, — отметил Роб Бергер, управляющий директор по аналитике данных, Global Technology Resources, Inc. — Системы NetApp EF570 и E5700 помогают ускорить аналитику для наших заказчиков, одновременно предлагая огромные преимущества и поддержку критически важных рабочих нагрузок».

Массив NetApp EF570 all-flash — это система среднего класса, обеспечивающая 2-кратное повышение производительности по сравнению с предыдущими версиями. Внедренная EF570 способна сократить время обработки видеофайлов даже до 95%, сократив анализ массива данных с недель до часов, а также ускорить время отклика при проведении финансовых операций в 4 раза по сравнению с другими системами.

NetApp E5700 Series — это гибридная флэш система, содержащая адаптивные алгоритмы кэширования ОС NetApp SANtricity, поддерживающие более широкий спектр рабочих нагрузок приложений. Всего лишь 2U или 4U массивы E5700 Series сочетают максимальное IOPS и суб-100 микросекундный отклик приложений и аналитики. Заказчики также смогут оценить беспрерывное резервное копирование и восстановление данных в гибридном облаке благодаря интеграции с NetApp® Data Fabric. Обе системы — E5700 и EF570 — поддерживают множество высокоскоростных интерфейсов хостов, включая 32Gb Fibre Channel, 25Gb iSCSI, 100Gb InfiniBand, 12Gb SAS и 100Gb NVMe с InfiniBand; таким образом, EF570 и E5700 Series стали одними из первых массивов 2U, которые поддерживают NVMe.

Массивы NetApp E-Series и EF-Series с SANtricity, разработанные для сред приложений, включая резервное копирование и восстановление, технические вычисления, видеонаблюдение и аналитику больших данных, обеспечивают высочайшую производительность, выгоду и подтвержденную на практике простоту. SANtricity System Manager предлагает заказчикам гибкость, необходимую для управления их системами NetApp EF570 и E5700 Series из любой точки и в любое время благодаря простому в использовании веб-интерфейсу on-box. Заказчики также могут упростить развертывание и доступ к данным с помощью безопасной и надежной СХД, которая развертывалась более 1 миллиона раз за свою двадцатилетнюю историю. SANtricity Cloud Connector — это решение для гибридного облака, которое напрямую соединяется с AWS S3, NetApp StorageGRID или AltaVault с целью повышения экономичности копирования и восстановления данных в облаке.

Систему EF570 можно будет приобрести начиная с октября.

NetApp MAX Data

NetApp MAX Data позволяет повышать производительность приложений без переписывания их кода.

2019: NetApp Memory Accelerated Data (MAX Data) 1.3

2 апреля 2019 года компания NetApp анонсировала NetApp Memory Accelerated Data (MAX Data) 1.3 с поддержкой энергонезависимой памяти Intel Optane DC. Комбинация MAX Data и энергонезависимой памяти Intel Optane DC позволит компаниям поддерживать высокий уровень конкурентоспособности, более эффективно работая с данными и повышая качество предоставляемых клиентам услуг.

По информации компании, NetApp помогает заказчикам использовать имеющиеся данные без перестройки архитектуры критически важных приложений. Инструментарий, предоставляемый клиентам MAX Data, позволяет максимально эффективно работать с массивами данных и распространять стратегию Data Fabric на свои серверы с критически важными для бизнеса приложениями и данными.

MAX Data — первое в отрасли решение для локального хранения данных, использующее энергонезависимую память Intel Optane DC на серверах для хранения постоянных данных, обеспечивающих доступность, низкую латентность на уровне обычной памяти и характеристики, схожие с флэш-накопителями, без необходимости переписывания кода приложения, что позволяет компаниям в полной мере использовать преимущества приложений в режиме реального времени.

2018: Выпуск

Компания NetApp 30 октября 2018 года объявила о выходе решения MAX Data, позволяющего заказчикам мгновенно повышать производительность приложений без переписывания их кода.

По словам разработчиков, MAX Data — это отраслевое решение для использования Persistent Memory на серверах для обеспечения сверхмалого времени отклика, как у системной памяти, и емкости, как у флэш-носителей.

В целом решение MAX Data:

• Ускоряет производительность на уровне приложений, ускоряя обработку данных для приложений на основе искусственного интеллекта и аналитику данных в реальном времени.
• Ускоряет восстановление данных приложений с помощью сервисов защиты данных для Persistent Memory на серверах.
• Повышает эффективность за счет использования меньшего количества серверов, сохраняя ту же или большую производительность.
• Предлагает все возможности управления данными NetApp ONTAP.

NetApp Insight 2018 — NVMe, MAX data, SCM

20 августа 2019 года компания NetApp анонсировала новый дисковый массив в линейке EF-Series – NetApp EF600 All-Flash NVMe Array.

Мы публикуем перевод анонса и заметки Mike McNamara в официальном блоге NetApp, а также некоторые мысли и комментарии по поводу новой системы.

NetApp обеспечивает более быстрое и эффективное решение для аналитики и высокопроизводительных вычислений

NetApp расширяет линейку EF-Series, чтобы помочь клиентам быстрее получать доступ к данным и ускорить принятие решений.

20 августа 2019 г. – компания NetApp — анонсировала массив хранения NetApp EF600. EF600 – это массив среднего уровня со сквозной поддержкой протокола NVMe* на всем пути передачи данных, который ускоряет доступ к данным и позволяет компаниям быстро разрабатывать новые решения для рабочих нагрузок, чувствительных к производительности.

Организации ищут способы повышения скорости работы и сокращения времени отклика бизнес-критичных приложений. Поскольку производительность приложений является ключевым фактором быстроты выхода на рынок, получения доходов и удовлетворенности клиентов, крайне важно, чтобы компании работали на самом высоком уровне с максимальной эффективностью. Массив EF600 со сквозной поддержкой протокола NVMe показывает вдвое большую производительность по сравнению с доступными сегодня all-flash массивами хранения, использующими протокол SAS. NetApp лидирует в этом предложении, поскольку компании продолжают переходить на решения с флеш-накопителями. Эта технология позволяет организациям ускорить операции записи и пропускную способность чтения/записи с помощью системы хранения со сквозной поддержкой протокола NVMe, специально разработанной для рабочих нагрузок высокопроизводительных вычислений (HPC).

“Индустрия хранения данных в настоящее время переходит от протокола SAS к протоколу NVMe, что значительно увеличивает скорость доступа к данным”, – говорит Тим Стаммерс, старший аналитик компании 451 Research. – “Но традиционные системы хранения не в полной мере используют производительность NVMe из-за задержек, вносимых их контроллерами. Системы NetApp E-серии были разработаны для решения этой архитектурной проблемы и уже широко используются в приложениях, чувствительных к производительности. EF600 задает новый уровень производительности для E-серии, внедряя сквозную поддержку протокола NVMe, и может рассматриваться ИТ организациями, ищущими высокоскоростное хранилище для задач аналитики и прочих приложений, интенсивно работающих с данными.”

“NetApp является лидером в поддержке сетевых адаптеров Mellanox NVMe-oF в своих массивах EF- и E-Серий, в том числе NVMe/IB и NVMe/RoCE, доступных в настоящее время в новейшей платформе EF600.”, заявил вице-президент по технологиям хранения данных Mellanox Роб Дэвис. “Мы надеемся на продолжение нашего партнерства с NetApp в области инноваций для ускорения перехода отрасли на NVMe-oF.”

“Быстрое и надежное получение ценной информации и концепций из различных сред со смешанной рабочей нагрузкой может позволяет организациям выгодно отличаться от конкурентов и ускорять выход на рынок”, – говорит Робин Хубер, вице-президент и руководитель подразделения E-Series, NetApp. – “EF600 помогает заказчикам раскрыть ценность своих данных и быстро развивать идеи, которые ранее были нереализуемыми для рабочих нагрузок, чувствительных к производительности, таких как базы данных Oracle, аналитика в реальном времени и высокопроизводительные вычислительные приложения, на основе высокопроизводительной параллельной файловой системы BeeGFS.”

Флэш-массив EF600 обеспечивает стабильные 2 миллиона операций ввода-вывода в секунду, время отклика менее 100 микросекунд и пропускную способность 44 ГБ/с и предлагает наилучшее соотношение цена/производительность для корпоративных рабочих нагрузок. Зарекомендовавшая себя простота массива, модульная конструкция и простые средства управления допускают масштабирование EF600 без усложнения управления.

* Массив со сквозной поддержкой протокола NVMe (end-to-end NVMe array) – предполагает использование протокола NVMe на всем пути следования данных от процессора хоста до накопителей СХД (storage backend). В этом случае протокол NVMe должны поддерживать как адаптеры серверов (Host HBA), так и устройства фабрики (NVMeoF), адаптеры и контроллеры СХД, наконец, сами накопители. Первое в индустрии решение подобного рода (NetApp A800) было выпущено 8 мая 2018 года и предполагало использование протокола NVMeoFC.

В предшественнике EF600 – массиве EF570 – в процессе эволюции ПО Santricity и добавления новых опций хост-портов появилась поддержка NVMe-oF с использованием в качестве транспортного слоя протоколов InfiniBand (IB) и RoCE (NVMe/IB и NVMe/RoCE). Но бэкенд массива остался прежним, поэтому для работы с накопителями SSD с интерфейсом подключения SAS приходилось применять механизм NVMe-to-SCSI Bridge.

Тем не менее EF570 демонстрировал впечатляющие показатели производительности (до 1 млн. IOPS) и отклика (менее 120 микросекунд).

С выходом EF600 устранено последнее узкое место в архитектуре – теперь поддержка NVMe обеспечивается на всем пути передачи данных.

Высочайшая производительность для аналитики и рабочих нагрузок HPC

Сегодня компания NetApp анонсировала флэш-массив среднего уровня EF600, первую платформу в линейке EF-Серии, построенную на NVMe. NetApp EF600 может ускорить доступ к вашим данным, чтобы вы могли быстрее извлекать из них выгоду.

Получите максимальную производительность, интеллектуальную ценность и надежную простоту в плотном 2-юнитовом шасси.

EF600 идеально подойдет для рабочих нагрузок, чувствительных к производительности, таких как базы данных Oracle, аналитика в реальном времени и высокопроизводительные вычислительные приложения, на основе высокопроизводительной параллельной файловой системы BeeGFS.

NVMe флэш-массив EF600 сочетает в себе высочайшие показатели производительности ввода-вывода (до 2 млн. IOPS), время отклика менее 100 микросекунд и пропускную способность до 44 ГБ/с с передовым, проверенным на практике функционалом обеспечения доступности, включая:

• Поддержку протоколов NVMe/IB, NVMe/RoCE и NVMe/FC, обеспечивающих низкие задержки и превосходную защиту инвестиций
• Зарезервированные компоненты с автоматизированной обработкой отказа
• Интуитивно понятный интерфейс управления с обширными функциями настройки
• Полнофункциональные веб-сервисы NetApp SANtricity® со встроенным интерфейсом REST API
• Расширенный мониторинг и диагностика с упреждающим ремонтом
• Технологии мгновенных снимков (NetApp SANtricity Snapshot™), копирования томов (Volume copy) и Динамических дисковых пулов (DDP).

В совокупности эти возможности обеспечивают лучшее в отрасли соотношение цена/ производительность, гибкость конфигурации и простоту в компактном размере, помогая вам принимать решения быстрее, эффективнее и безопаснее.

EF600 предлагает проверенную надежность оборудования 5-го поколения, основываясь на более чем 1 миллионе установок* по всему миру.

Протестированные дизайны решений для баз данных Oracle и Microsoft SQL, высокопроизводительных вычислений на основе BeeGFS и аналитики в реальном времени дают вам уверенность в том, что критически важные бизнес-приложения, созданные на базе систем EF600, будут работать безупречно, что позволит вам сосредоточиться на развитии бизнеса.

*На сегодняшний день инсталляционная база E/EF-Серии составляет более 1 миллиона устройств, а операционная система NetApp SANtricity является самой распространенной ОС для СХД в мире (системы NetApp и OEM NetApp).

Вслед за выходом новых устройств “флагманской” линейки AFF, обеспечивших сквозную поддержку NVMe в системах A800 и A300, NetApp обновляет и E/EF-серию. Первый шаг в этом направлении был сделан с выходом операционной системы SANtricity версии 11.40, в которой появилась поддержка NVMe/IB, затем в SANtricity 11.50 появился NVMe/RoCE, с выходом EF600 и SANtricity 11.60 появляется законченное решение с полноценным бэкэндом на NVMe накопителях и сквозной поддержкой всех трех вариантов – NVMe/IB, NVMe/RoCE и NVMe/FC.

Ключевым моментом, на наш взгляд, является преемственность: так, в случае с системами на базе ONTAP сохраняется та же привычная архитектура, тот же интерфейс и те же принципы, что и при работе с “legacy”-накопителями. Аналогично, в развитии E/EF-Серии сохранено все, что было в предыдущих устройствах линейки, промежуточное решение в виде NVMe-oF, реализованное в EF570, дополнено изменениями на бэкэнде системы, расширена поддержка протоколов. Для управления новой системы используется тот же веб-интерфейс, что и прежде, а с помощью Unified manager можно управлять несколькими системами разных поколений.

Еще немного о системе. Она доступна в вариантах с 32 или 128 ГБ памяти (также, как и EF570), это в очередной раз подтверждает, что для достижения высоких показателей производительности не обязательно оснащать СХД гигантским объемом кэша (как это делают некоторые производители). Для работы NVMe-oF требуется 128 ГБ памяти (аналогично EF570).

Конструктивно система также претерпела изменения, контроллеры теперь увеличены в размерах, располагаются один над другим, блоки питания уменьшены:

В новой системе отсутствует возможность подключения дополнительных полок, соответственно, в контроллерах не предусмотрено каких-либо портов для этих целей. Хост-порты выбираются при первоначальном конфигурировании, в контроллер устанавливаются сразу обе карты, т.о. возможные варианты это: 16 портов 32G NVMe/FC ИЛИ 8 портов 100G NVMe/IB ИЛИ 8 портов 100G NVMe/RoCE.

Из NVMe накопителей заявлены 1.9TB, 3.8TB и 7.6TB (в конфигураторе пока что доступны NVMe объемом 1.9TB и 3.8TB), для вариантов с шифрованием выбор накопителей шире, вплоть до 15.3TB.

Если взглянуть на таблицу с техническими характеристиками систем, в глаза бросается отсутствие некоторого функционала в EF600 по сравнению с EF570 и EF280, а единственной поддерживаемой на хостах операционной системой на сегодняшний день является Novell SUSE Linux Enterprise Server. Заметим, что аналогичные ограничения (например, отсутствие поддержки репликации и тонкого выделения пространства) присутствуют и в EF570 в случае использования NVMe-oF. Пока что нам ничего не известно о планах и сроках появления сквозной поддержки NVMe для других ОС.

Поддержка протокола FC (здесь все же имеется в виду FCP), заявлена на октябрь 2019 года, скорее всего в эти же сроки следует ожидать других обновлений системы с точки зрения поддерживаемого функционала и совместимых ОС. Скорее всего, поддержка FCP в системе нужна для более плавного перехода от использования SCSI поверх FC к полноценному NVMe-oF.

NetApp также приступил к обновлению источников технической информации, EF600 уже появилась в Fusion и Hardware Universe, ждем обновления документации в E-Series and SANtricity 11 Documentation Center и, конечно же, новых Technical Reports.

Итого, СХД выглядит достаточно интересно, но на момент выхода на рынок ограничена использованием Novell SUSE на хостах. Т.е. сейчас ее можно рассматривать исключительно для размещения приложений, работающих в этой среде.

Дополнительный функционал ожидается после выхода обновлений системы.

Весь ассортимент массивов хранения данных вы можете увидеть и купить здесь.