StorageTalks

storagetalks @ telegram, 539 members, 424 posts since 2016

Полезные материалы про системы хранения данных NetApp, немного о конкурентах и просто интересные ссылки.
🚮 🔃 💽 💾 🍖 🔃 🏆 & 😌 🖇

С вопросами к @alikulov

Обсуждения в чате: t.me/storagediscussions

Филиал в вебе: storagetalks.net

Posts by tag «AFF»:

storagetalks, August 01, 12:35

​​Сотрудничество NetApp c NVIDIA вылилось в новый продукт — NetApp ONTAP AI. Приятный шкафчик с AFF A800, NVIDIA DGX-1 и Cisco Nexus 3232C 100GbE. Программная часть работает на NVIDIA GPU Cloud Deep Learning Software Stack и NetApp Trident. Поддержка на всё решение от одного вендора, можно на выбор обращаться к NetApp или NVIDIA. Есть документ с валидированной архитектурой, в котрой используется одна AFF A800 и 4 сервера DGX-1. В документе подробно описана архитектура решения, конфигурация серверов, СХД и коммутаторов. Приведены результаты тестов производительности. Для доступа используется NFS и FlexGroups. В конфигурации 1:4 загрузка контроллеров A800 ниже 20%, задержки ниже 700 мкс. То есть еще остаются ресурсы для подключения серверов. В случае с ONTAP AI работает подход FlexPod. Необязательно брать конкретные модели AFF и определенное количество серверов DGX-1. Если такая можная СХД не требуется, то можно использовать A700s, A300 или даже A220. И это всё равно будет ONTAP AI.

#nvidia #ONTAP #AI #ML #DL #Cisco #AFF

www.netapp.com/us/media/nva-1121-design.pdf

blog.netapp.com/accelerate-your-journey-to-ai-with-netapp-and-nvidia/

www.netapp.com/us/products/ontap-ai.aspx

www.netapp.com/us/company/news/press-releases/news-rel-20180801-692736.aspx

storagetalks, July 25, 06:00

Очередная подборка свежих Technical Reports.

TR-4572. The NetApp Solution for Ransomware

Немного обновили документ о том, как бороться с вирусами-шифровальщиками. Снепшоты, репликация, FPolicy.

Как раз недавно этот вопрос обсуждался в нашем чате и было приятно прочитать о том, что клиенты счастливы, что снепшоты спасли их данные от шифрования.

Напомню про пост на Хабре на ту же тему - habr.com/post/332098/

#TR #ransomware

www.netapp.com/us/media/tr-4572.pdf

TR-4704. Deploying Veritas NetBackup with NetApp E-Series Storage

Документ описывает как использовать E-серию в качестве репозитория резервных копий Veritas NetBackup. В этом случае данные могут храниться на любой СХД. И описывается как бекапить данные с E-серии за счёт интеграции на уровне снепшотов.

#backup #veritas #netbackup #ESeries

www.netapp.com/us/media/tr-4704.pdf

TR-4598. FabricPool Best Practices. ONTAP 9.4

Рекомендации по использованию FabricPool. Это тиринг данных с ONTAP в объектное хранилище (AWS, Azure, StorageGRID). В 9.4 добавили возможность отправлять в облако не только данные из снепшотов, но и активные данные. Работает для AFF, all-SSD агрегатов на FAS, для ONTAP Select (на HDD тоже), в ONTAP Cloud.

#tiering #ONTAP #S3 #cloud #Select

www.netapp.com/us/media/tr-4598.pdf

TR-4400. VMware vSphere Virtual Volumes with ONTAP

Хороший документ, в котором собрано практически всё что нужно знать о работе VVols на ONTAP. Актуализировали информацию для VASA Provider 7.2. Например, подробно описали как работают QoS для VVol. Есть информация о том, как обеспечивать сохранность VASA Provider. Как бекапить VVols с помощью Commvault и Veeam.

#VVols #VMware #ONTAP

www.netapp.com/us/media/tr-4400.pdf

​​TR-4630. NetApp HCI with VMware Horizon 7

VDI на HCI с сайзингом, тестами производительности при помощи Login VSI. Тестировалось 8 маленьких вычислительных нод (7 под десктопы, 1 для инфраструктуры) и 4 маленькие ноды хранения. Напомню, что все ноды имеют три варианта small, medium, large. В такой конфигурации производительность ограничивалась вычислительными нодами, производительности нод хранения было с запасом. Дополнительно сравнили производительность большой ноды с маленькими. Из интересного сравнили изменение производительности до и после применения патчей от Spectre и Meltdown.

#TR #VMware #Horizon #HCI #SolidFire

www.netapp.com/us/media/tr-4630.pdf

​​TR-4684. Implementing and Configuring Modern SANs with NVMe/FC

Документ описывает общие концепции NVMe и NVMe over Fabrics, как реализована поддержка NVMe/FC в ONTAP, какие преимущества в производительности, какие сейчас существуют ограничения. Основное ограничение сейчас — нет поддержки мультипасинга, связано это с тем, что протокол всё ещё находится в активной фазе развития. Вообще NetApp является основным автором спецификации ANA (Asymmetric Namespace Access) — это аналог ALUA. Но предложения были ратифицированы только в марте 2018. К этому моменту разработка ONTAP 9.4 явно была уже в фазе тестирования и добавлять новую функциональность было бессмысленно. Но в следующих релизах всё будет.

В конце документа очень обширная подборка полезных ссылок на стандарты, документы, видео. Например, там есть сравнение RoCE с iWARP за авторством Mellanox. Несложно догадаться какой протокол оказывается лучше, но читать всё равно полезно и интересно.

#TR #ONTAP #NVMe #FC #SAN #AFF

www.netapp.com/us/media/TR-4684.pdf


storagetalks, July 18, 11:45

​​Почти год назад я уже писал в канале про компанию Plexistor.

//storagetalks.net/244

А теперь появляется публичная информация о том, как их решение будет интегрировано с NetApp AFF. Называться это будет NetApp Memory Accelerated Data или MAX Data. На серверах с Persistent Memory будет работать MAX FS, она же M1FS, которая будет зеркалироваться на AFF. Все понимают, что локально подключенные устройства хранения всегда быстрее сетевых СХД, но отстают по функциональности, надежности, гибкости и т.д. С MAX Data получаем очень высокую производительность на серверах и возможность репликации данных, использования снепшотов и прочие прелести AFF. Параллельно NetApp разрабатывает аналог FUSE для работы с Persistent Memory. Пока он называется ZUFS (Zoo FS) — Zero-copy User-mode FS. Файловые системы, работающие на уровне ядра всегда быстрее, чем те, которые работают в user-space. Но остаётся вопрос со скоростью и гибкостью разработки. ZUFS работает быстрее FUSE и написан специально для работы с Persistentent Memory.

#SCM #PM #AFF

blog.netapp.com/an-update-on-the-plexistor-acquisition-introducing-netapp-memory-accelerated-data/

Download nvmw2018-paper97-presentations-slides.pptx 3.05 MB
Download pmandzufsktlvmeetup14nov2017-171115095650.pdf 2.10 MB

storagetalks, July 10, 11:08

Подборка свежих Technical Reports.

До того как начал писать пост, думал ссылок немного, а дописал и понял, что получилось на 3 поста. Читайте на здоровье 🙂

TR-4700. SnapCenter Plug-In for Oracle Database. Best Practices

Бекапы Oracle с помощью консистентных снепшотов, клоны для разработчиков и т.д. Как лучше размещать файлы баз данных, стоит ли держать несколько LUNов в одном FlexVol или нет? Сколько ресурсов выделять под сервер SnapCenter.

#Oracle #SnapCenter

www.netapp.com/us/media/tr-4700.pdf

TR-4699. NetApp Active IQ. Telemetry and UI Feature Security

Небольшой документ про ActiveIQ (AutoSupport). Описывает как работает ActiveIQ, какие данные для разных систем передаются, какие протоколы используются, какая польза от всего этого клиентам. Не так давно еще вышел TR-4688. Security and Privacy of NetApp Telemetry Data. Ссылка на него была в канале.

#ActiveIQ

www.netapp.com/us/media/tr-4699.pdf

Пара TR про решения NetApp для Hadoop.

TR-4697. NetApp ONTAP SAN Solution for Hadoop

Надо ли использовать Hadoop кластера с SAN хранилищем. В качестве примера взят AFF A300. Экономия ёмкости, так как можно использовать 2 реплики данных в HDFS, а не 3 как это принято с DAS. Компрессия дала около 30% экономии дискового пространства. В документы есть тесты производительности и сравнение с DAS-вариантом.

#Hadoop

www.netapp.com/us/media/tr-4697.pdf

TR-4382. NetApp In-Place Analytics Module. Best Practices

NetApp In-Place Analytics Module добавляет в Hadoop поддержку NFS. Зачем это? Позволяет компаниям анализировать уже накопленные данные, которые внутри компании хранятся на файловых хранилищах. Можно использовать клоны для тестов и QA, не используя дополнительную ёмкость и экономя время. Использовать несколько дата-центров и облачные сервисы для аналитики данных — SnapMirror позволяет легко реплицировать данные между on-prem СХД и ONTAP в облаке.

Это уже 3 версия модуля. Можно посмотреть на видео как модуль устанавливается, натсраивается и работает.

www.youtube.com/watch?v=8wKyzDkdL7c&list=PLdXI3bZJEw7l8oFkYC_umsBaBX3hqK3Oq&index=1

#Hadoop

www.netapp.com/us/media/tr-4382.pdf

TR-4471. E-Series and EF-Series Reference Architecture and Storage Best Practices with Veeam Backup & Replication 9.5

Использование NetApp E-series в связке с Veeam. Из-за своей невысокой цены и очень хорошой поточной производительности системы E-серии очень хорошо подходят в качестве репозиториев резервных копий Veeam.

#Eseries #Veeam #backup

www.netapp.com/us/media/tr-4471.pdf

TR-4658. NetApp SANtricity Cloud Connector 3.1

Многие не знают, но E-серия у NetApp тоже cloud-connected storage. SANtricity Cloud Connector это бесплатное решение, которое работает на Linux и позволяет бекапить снепшоты в объектные хранилища. Причём возможен бекап на уровне файлов, с гранулярностью восстановления на уровне директорий.

#cloud #ESeries

www.netapp.com/us/media/tr-4658.pdf

Два #TR по использованию FPolicy с решениями от IntraFind и STEALTHbits.

TR-4696. FPolicy Solution Guide for ONTAP: STEALTHbits File Activity Monitor

TR-4670. FPolicy Solution Guide for ONTAP: IntraFind. Full-Text and Enterprise Searches with iFinder5 Elastic Edition for NetApp

Напомню, что FPolicy это фреймворк внутри ONTAP, который позволяет сторонним продуктам получать уведомления при доступе к файлам на системах NetApp FAS. С помощью него сторонние продукты могут строить продивнутые отчеты, ограничивать доступ к конкретным файлам, применять квоты и т.д. Например, на основе FPolicy работает анивирусное сканирование файловы ресурсов.

#NAS #FPolicy

www.netapp.com/us/media/tr-4696.pdf

www.netapp.com/us/media/tr-4670.pdf

TR-4694. Visualizing NetApp HCI Performance. Using Grafana, Docker, Trident, and Graphite

Построение графиков, дашбородов и т.д. для NetApp HCI и SolidFire при помощи Grafana.

#SolidFire #HCI #Grafana

www.netapp.com/us/media/tr-4694.pdf

TR-4693. FlexPod Datacenter for Epic EHR Deployment Guide. Healthcare Industry Solution

Использование FlexPod для здравоохранения, конкретно с продуктами компании Epic. Это не то чтобы очень актуально для нашего региона. Epic в основном работает в США. Но внутри они используют БД InterSystems Caché, которая мне периодически попадается.

#FlexPod

www.netapp.com/us/media/tr-4693.pdf

TR-4695. Database Storage Tiering with NetApp FabricPool

Применение FabricPool при хранении баз данных. Напомню, что это решение по тирингу холодных данных с flash в облако или приватное объектное хранилище. Может быть очень выгодно именно с базами данных, ведь часто активная работа ведется только с данными, которые записаны в последнее время, а старые данные приходится держать онлайн для месячных или квартальных отчетов.

#FabricPool #AFF

www.netapp.com/us/media/tr-4695.pdf

TR-4613. ONTAP Select on KVM. Product Architecture and Best Practices

ONTAP Select поверх KVM. Самое интересное в этой версии документа — появление Software RAID. Пока он поддерживается только для KVM. Теперь доступны привычные RAID-4, DP и TEC. Также обещается прирост производительности относительно железного RAID-контроллера. Что-то мне подсказывает, что Select на KVM чаще будет обгонять Select на ESXi. Об этом не особо говорят публично, но в IBM Cloud активно используется Select.

#ONTAP #Selelct #KVM

www.netapp.com/us/media/tr-4613.pdf

TR-4375. NetApp MetroCluster for ONTAP 9.3

Для всех кому нужная синхронная репликация. Описание архитектуры NetApp MetroCluster, возможных конфигураций, настройки, взаимодействия с другой функциональностью ONTAP.

#MetroCluster

www.netapp.com/us/media/tr-4375.pdf

#TR

storagetalks, June 19, 14:51

На CNews в рамках спецпроекта NetApp вышло интересное интервью с Дмитрием Конягиным из Nvidia Россия. Интервью про “ИИ”, машинное обучение и т.д., где это применяется на практике и как в этом помогают технологии Nvidia и NetApp. Дмитрий будет выступать на NetApp Directions 17 июля в Москве.

#nvidia #AI #ML #DL

storage.cnews.ru/articles/2018-06-14_nvidia_iskusstvennyj_intellekt_uchitsya_sovsem_ne_takkak_chelovek

Nvidia: Искусственный интеллект учится совсем не так, как человек

Системы искусственного интеллекта переживают бурный рост. Это влечет за собой колоссальный рост потребностей в вычислительных мощностях, а следом и опасения, что вычислительные ресурсы скоро будут исчерпаны....


​​Чуть больше про инфраструктуру для AI вычислений. В интервью из предыдущего поста упоминается совместная архитектура Nvidia и NetApp для AI. В качестве вычислительных ресурсов используются NVIDIA DGX-1, в каждом из которых по 8 GPU Tesla V100, для хранения данных можно использовать NetApp AFF A700s или A800, сеть на Cisco Nexus

3232C 100GbE. Решение позволяет легко и независимо масштабировать вычислительные и storage ресурсы. Одной A700 хватает на 4 NVIDIA DGX-1, а A800 вытягивает нагрузку с 5 NVIDIA DGX-1. Дальше можно добавлять AFF контроллеры в кластер, до 24 штук. Это всё прозрачно для серверов, так как используется NFS и FlexGroup. Подробнее об архитектуре можно почитать в тематическом white paper — WP-7267. Scalable AI Infrastructure. Designing For Real-World Deep Learning Use Cases. Там же есть результаты тестирования одной AFF A700s c DGX-1. Ну и кто-то наверное слышал про аналогичную архитектуру от Pure Storage под названием AIRI, маркетинг Pure во всю трубит об этом решении. И вот со сравнением результатов тестирования AFF A700s и Pure AIRI произошла "забавная" история. Об этом я напишу подробнее.

А если интересно почитать про подход NetApp к построению инфраструктуры для AI, то советую еще почитать Santosh Rao (Senior Technical Director for the Data ONTAP Engineering Group) или даже посмотреть видео с его выступлением на Storage Field Day.

В постах в блоге NetApp он рассказывает про то, на что обращать внимание при выборе файловой системы для AI вычислений, как NetApp обеспечивает передачу данных по конвееру данных от edge к core и в облако.

#nvidia #AI #ML #DL #AFF

storagetalks, June 14, 12:33

У меня уже неделю в закладках лежит документ из серии NetApp Verified Architecture с архитектурой совместного решенеия NetApp и Broadcom для Oracle поверх NVMeoF — NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution. Oracle and SUSE NetApp Verified Architecture Design Edition. А тут им поделились в соседнем канале. В документе описано решение с использованием AFF A700s и Brocade G620, подробно описано как настроена сеть, как разбиты диски и т.д., вплоть до точных версий прошивок HBA. Посчитана экономия от перехода с SCSI FC на NVMe over FC. Тут самое важное, что вместо 2 целых инженеров вам теперь хватит половины инженера. И основная проблема куда девать второую половину инженера 🙂

#NVMe #AFF #brocade #Oracle

Forwarded from Brocade Russia SAN:

NetApp and Broadcom Modern SAN Cloud-Connected Flash Solution

This NetApp® Verified Architecture has been jointly designed and verified by NetApp and Broadcom Inc. It uses the latest Brocade, Emulex, and SUSE technology solutions along with NetApp all-flash storage, which sets a new standard for enterprise SAN storage and data protection that will drive superior business value.

This document describes a verified, unified modern SAN solution reference architecture, designed by industry leaders Broadcom and NetApp with a first-to-market enterprise NVMe/FC solution. NetApp and Broadcom provide an end-to-end NVMe-powered solution, from host to storage controller, that can help you realize the promise and the benefits of NVMe technology right now.

ent.box.com/s/mc6rgei9u2adoawwnflnr1rej6urufla

storagetalks, May 14, 12:32

​​Небольшой анбоксинг NetApp AFF A700s.

#AFF

blog.krogloth.de/unboxed-netapp-aff-a700s/

storagetalks, May 10, 17:51

​​Если во время чтения последних новостей у кого-то возник вопрос: “А зачем NVMe-oF в текущих моделях AFF А300, А700, A700s?”, то вот вам отчёт от компании Demartek, которая протестировала A700s на одинаковых нагрузках с NVMe-oF и SCSI FCP. Если кратко, то NVMe-oF дал прирост IOPS на 58% и снижение latency на 34%. Они взяли A700s c 24 960GB SSD, на одной ноде использовали NVMe-oF, на другой — обычный FC. Глядя на графики, не забывайте, что это половина производительности, на которую способна A700s. Из интересного, для получения максимальной производительности потребовалось 4 NVMe namespace против 16 LUN’ов. За счет чего такой прирост производительности? NVMe стек в ONTAP написан с нуля — меньше legacy кода, короче путь данных, меньше переключений контекстов, лучше работает параллелизация.

Спасибо читателям канала за ссылку.

#AFF #NVMe #performance

www.demartek.com/Reports_Free/Demartek_NetApp-Broadcom_NVMe_over_Fibre_Channel_Evaluation_2018-05.pdf

storagetalks, May 08, 10:48

​​Ну и конечно самый интересный анонос: AFF A800 — первый end-to-end NVMe all flash массив на рынке. Кроме новой топовой AFF системы вышло небольшое обновление для систем начального уровня — A220 и FAS2700.

#AFF #NVMe

alikulov.me/blog/all/aff-a800-pervy-end-to-end-nvme-all-flash-massiv-na-rynke/

storagetalks, April 10, 09:03

​​Опять про деньги. Сравнение продаж all-flash систем за Q4 2017 по вендорам и по линейкам внутри вендора, что куда интереснее 🙂 Dell EMC за год в целом упали. Особенно заметно падение продаж XtremIO, учитывая бешенный рост после того как EMC их купил. All-flash VMAX просели на 16%. Unity подросли на 9%. Вполне возможно это всё результат слияния Dell и EMC. Но не совсем ясно, что будет драйвером роста. Например, у нас в чатике ходят слухи, что, VMAX дальше развивать не будут 🤷‍♂️

NetApp подрос на 25%. По линейкам - основные продажи это AFF. SolidFire продаётся больше, чем EF. Последних продалось на 8.8% меньше, чем год назад. Отдельно показаны результаты по NetApp All-flash FAS и NetApp AFF A-Series, хотя это просто разные поколения одной линейки.

У HPE обороты в сравнении с прошлым годом не изменились. Но на фоне 15% роста рынка, это падение доли. Интересно, что внутри произошло падение продаж all-flash 3Par на 17% и заметный рост Nimble. Хотя Nimble было продано в 2.5 раза меньше, чем 3Par, если такая динамика продолжится, то вполне возможно, что основной СХД для HPE станет Nimble.

Pure уверено растёт. По общей доле 3 место после Dell EMC и NetApp. Хотя HPE и IBM не сильно отстают.

Не забываем, что это цифры за квартал и за год в целом картина может быть немного иной.

#AFF #financial #HPE #Pure #IBM #EMC

www.theregister.co.uk/2018/04/09/analysts_day_reveal_flash_rises_and_falls/

storagetalks, April 09, 15:54

​​Новый Technical Report. TR-4674. End-to-End Storage Provisioning for MongoDB. Deploying NetApp OnCommand Workflow Automation for MongoDB. В документе описано как с помощью WFA быстро разворачивать MongoDB сразу в нескольких дата-центрах. Для резервного копирования и/или создания тестовых баз можно использовать SnapCenter. Для MongoDB есть готовый шаблон в Storage Automation Store. Там вообще много все интересного для WFA и не только. Ну и самое главное — вместо Mongo DB может быть что-то другое. Всегда есть возможность соорудить свой workflow для WFA.

#MongoDB #AFF #TR #WFA #automation

www.netapp.com/us/media/tr-4674.pdf

storagetalks, March 14, 12:05

​​Результаты от IDC по All Flash Array Market за Q4 2017. Год назад доля NetApp была ≈16%

#IDC #AFF #financial

storagetalks, March 05, 13:14

​​Кажется я пропустил два документа по FlexPod c Exchange и SharePoint. Исправляюсь:

- FlexPod Datacenter with Microsoft Applications and NetApp AFF A-Series. NVA Design.

- FlexPod Datacenter with Microsoft Exchange 2016, SharePoint 2016, and NetApp AFF A300. NVA Deployment.

Первый с дизайном решения, второй с подробным гайдом по развёртыванию решения. А300 спокойно переваривает нагрузку от 10K пользователей Exchange и SharePoint, и даже остаётся запас по производительности для 100K пользователей.

Для полного погружения в тему 8 марта в 19:00 по Москве можно послушать вебинар от NetApp и Cisco, посвященный этому решению.

bit.ly/2tiFVwM

Будет про:

1. Details about the specific FlexPod configuration used to validate 10k Exchange mailboxes and 10k SharePoint users.

2. Validation details including SnapManager for Exchange, AvePoint DocAve software for SharePoint and overall workload performance.

#FlexPod #Exchange #SharePoint #webinar #AFF