StorageTalks

storagetalks @ telegram, 498 members, 393 posts since 2016

Полезные материалы про системы хранения данных NetApp, немного о конкурентах и просто интересные ссылки.
🚮 🔃 💽 💾 🍖 🔃 🏆 & 😌 🖇

С вопросами к @alikulov

Обсуждения в чате: t.me/storagediscussions

Филиал в вебе: storagetalks.net

storagetalks, August 17, 22:36

Forwarded from ONTAP Updates:

Service Update: ONTAP - 9.3P7

Date Posted: 17-AUG-2018

mysupport.netapp.com/NOW/download/software/ontap/9.3P7/

storagetalks, August 16, 15:14

Вышло обновление ONTAP Select Deploy 2.9. Напомню, что ONTAP Select состоит из двух элементов: образа ONTAP Select с самой операционной системой, которая работает на нодах, последняя доступная версия совпадает с версией просто ONTAP - 9.4P1; и ONTAP Select Deploy - отдельная виртуальная машина, которая отвечает за развёртывание кластера и используется как медиатор в двухнодовых конфигурациях. Deploy обновляется независимо от образа ONTAP Select. Что нового в Deploy 2.9:

- ONTAP Select 9.4P1

- Поддержка VMware ESXi 6.7 GA (build 8169922 и выше)

- Поддержка RedHat Enterprise Linux 7.5 и CentOS 7.5

#ONTAP #Select #SDS

storagetalks, August 14, 06:01

Стал доступен NetApp SnapCenter 4.1. Много мелких изменений, все realease notes я сюда вставлять не буду, ограничусь тем, что мне кажется интересным.

Enhancement to SnapCenter Software:

- SnapCenter supports multisite data center. The SnapCenter Server and the plug-in host can be at different geographical locations.

- Supports ONTAP 9.4 including increased Snapshot copy counts per volume.

Enhancements to the SnapCenter Plug-in for VMware vSphere:

- Supports REST APIs for all plug-in functionality.

- Supports built-in workgroup user for guest file restore operations.

Enhancements to the SnapCenter Plug-in for Microsoft Exchange Server:

- Supports backup and restore with existing SnapMirror and SnapVault relationships.

- Supports backup and restore to and from secondary sources.

- Supports copy-only backups with no log truncation.

Enhancements to the SnapCenter Plug-in for Microsoft SQL Server:

- Supports FCI (Failover Cluster Instance) cloning.

- Supports Microsoft SQL Server 2017.

Enhancements to the SnapCenter Plug-in for Oracle Databases:

- Supports parallel restore of multiple databases.

- Supports Oracle RAC One node and third-party cluster solutions (active-passive).

- Supports Flex ASM cluster.

Enhancements to the SnapCenter Custom Plug-ins. New SnapCenter Custom Plug-ins released on the NetApp Automation Store:

- SnapCenter Plug-in for SAP MaxDB

- SnapCenter Plug-in for SAP Adaptive Server Enterprise (SAP ASE)

- SnapCenter Plug-in for Storage

Качать на mysupport.netapp.com/NOW/download/software/snapcenter/4.1/

#SnapCenter #Oracle #VMware #MSSQL

Automation Store Data Protection List

Displays list of Snap packs uploaded by users on the dev site of Automation Store site.


storagetalks, August 09, 18:45

Forwarded from Brocade Russia SAN:

Updated Brocade SAN Scalability Guidelines for Brocade Fabric OS 8.X Now Available

We are pleased to inform you that the Brocade SAN Scalability Guidelines for Brocade Fabric OS 8.X has been updated to include FOS v8.2 scalability support for the Brocade G630. You can find access to this matrix at the following links:

docs.broadcom.com/docs/12379837

www2.brocade.com/en/backend-content/pdf-page.html?/content/dam/common/documents/content-types/deployment-guide/brocade-san-scalability-fos-8x-dp.pdf

Download brocade-san-scalability-fos-8x-dp.pdf 0.48 MB

storagetalks, August 09, 12:14

Вот еще новости с Flash Memory Summit. Тут больше про анонсированные и выпущенные продукты.

www.theregister.co.uk/2018/08/09/flash_memory_summit_sees_nvme_rule_the_interconnect_roost/

Couldn't get out to the Valley? Here's a taste of the flashy goodness you've been missing

NVMe rules the interconnect roost


storagetalks, August 09, 10:52

На днях в Калифорнии прошёл ежегодный Flash Memory Summit. Презентации уже доступны. Общие мысли: NAND скоро подешевеет (год назад тоже самое говорили :)). Intel 3D XPoint всё еще не взлетел и Intel продаёт продукты себе в убыток, чтобы развить рынок. Больше разговоров про разделение вычислительных ресурсов и хранение данных, физические скорости в сети уже выросли, теперь делается большой упор на сетевые протоколы для уменьшения задержек в сети. Продолжается работа над переносом логики работы с NAND из контроллеров SSD на сторону клиентов, FTL, Garbage Collection и т.д. хотят вынести из контроллеров SSD. Это в том числе упростит работу над IO Determinism - на стороне СХД, хостов, приложений больше знаний о том, как лучше с точки зрения производительности хранить данные на SSD, например, чтобы избегать write amplification. MSW (multi-stream write), технология реализованная Samsung совместно с NetApp и уже используемая в AFF/FAS, про это же. А есть и альтернативные идеи - перенести вычисления на сторону SSD. То есть в диске будет более мощный процессор, данные ближе к нему.

www.flashmemorysummit.com/English/Conference/Proceedings_Chrono.html

2018 Proceedings - Flash Memory Summit

Flash Memory Summit Speaker presentations


storagetalks, August 08, 18:43

Новые модули NetApp для Ansible. 18 модулей для работы с ElementOS (SolidFire, HCI).

#Ansible #automation #SolidFire

netapp.io/2018/08/08/second-major-ansible-module-release/

Second Major Ansible Module Release - thePub

Thank you to everyone who’s provided feedback and comments on the Ansible ONTAP modules we released this past May. Your input has helped us with everything from bugs and fixes to ideas for new enhancements and new functionality. We have been listening to your feedback and our new releases incorporate many of your suggestions along ... Read more


storagetalks, August 08, 16:23

Как проверить производительность объектного уровня перед подключением его в FabricPool.

Эта функция появилась в ONTAP 9.4.

#ONTAP #FabricPool #S3

youtu.be/TREon90QIbo?a

Measuring FabricPool Performance in ONTAP 9.4
ONTAP’s object store profiler makes measuring FabricPool performance super easy. See latency and throughput of an object store, predict recovery times, set e...

storagetalks, August 07, 16:51

Config Advisor обновился до версии 5.4. Добавилась проверка конфигурации плагинов SnapCenter.

Качать с support-сайта в ToolChest.

storagetalks.net/445

StorageTalks

Config Advisor обновился до версии 5.3. Что нового: - Supports ONTAP 9.4 release - Supports new NetApp platforms: All Flash FAS (AFF) A800, FAS2750, and FAS2720 - Supports new 100G cluster switch from Cisco (Cisco Nexus 3232C) - MetroCluster visualization from ONTAP AutoSupport data Что это вообще такое писал ранее —> https://t.me/storagetalks/378


storagetalks, August 07, 11:06

​​На DockerCon Europe 2017 инженеры из Société Générale рассказывали как банк переходит на использование микросервисов и Docker EE. Почему нам это интересно? Потому что это хороший пример того куда движется IT в крупных компаниях. Société Générale входит в 20 самых крупных мировых банков. И они планируют к 2020 году запускать 80% своих приложений в облаке. За 15 месяцев они смогли перевести большую часть своих сервисов на работу к контейнерах. Ну и конечно в качестве persistence storage используются СХД NetApp.

#Docker #Trident #NFS

blog.docker.com/2017/11/docker-ee-societe-generale/

И в продолжение темы, пост о том как использовать Docker + NFS + FlexGroup volumes. Кстати, именно контейнеры и FlexGroups используются в валидированной архитектуре ONTAP AI с NVIDIA, про которую я писал несколько дней назад.

#Docker #FlexGroup #Trident #ONTAP

whyistheinternetbroken.wordpress.com/2018/08/06/docker-nfs-flexgroups-magic/

Docker + NFS + FlexGroup volumes = Magic!

A couple of years ago, I wrote up a blog on using NFS with Docker as I was tooling around with containers, in an attempt to wrap my head around them. Then, I never really touched them again and tha…


storagetalks, August 07, 09:40

​​Полезная презентация от Dell EMC по FC SAN. В названии говорится про All Flash Arrays, но по мне это просто дань моде. Самая позновательная и интересная часть называется “Congestion Spreading and its Impact”.

#FC #SAN

Download storage25_Connectrix_Configuring.pdf 2.25 MB

storagetalks, August 01, 12:35

​​Сотрудничество NetApp c NVIDIA вылилось в новый продукт — NetApp ONTAP AI. Приятный шкафчик с AFF A800, NVIDIA DGX-1 и Cisco Nexus 3232C 100GbE. Программная часть работает на NVIDIA GPU Cloud Deep Learning Software Stack и NetApp Trident. Поддержка на всё решение от одного вендора, можно на выбор обращаться к NetApp или NVIDIA. Есть документ с валидированной архитектурой, в котрой используется одна AFF A800 и 4 сервера DGX-1. В документе подробно описана архитектура решения, конфигурация серверов, СХД и коммутаторов. Приведены результаты тестов производительности. Для доступа используется NFS и FlexGroups. В конфигурации 1:4 загрузка контроллеров A800 ниже 20%, задержки ниже 700 мкс. То есть еще остаются ресурсы для подключения серверов. В случае с ONTAP AI работает подход FlexPod. Необязательно брать конкретные модели AFF и определенное количество серверов DGX-1. Если такая можная СХД не требуется, то можно использовать A700s, A300 или даже A220. И это всё равно будет ONTAP AI.

#nvidia #ONTAP #AI #ML #DL #Cisco #AFF

www.netapp.com/us/media/nva-1121-design.pdf

blog.netapp.com/accelerate-your-journey-to-ai-with-netapp-and-nvidia/

www.netapp.com/us/products/ontap-ai.aspx

www.netapp.com/us/company/news/press-releases/news-rel-20180801-692736.aspx

storagetalks, August 01, 09:05

NetApp Trident 18.07 зарелизился. Из самого заметного — поддержка Kubernetes Container Storage Interface (CSI), поддержка работы с FlexGroup, поддержка мультипасинга для iSCSI. И много других улучшений и исправлений.

#Trident #k8s #kubernetes #Docker

netapp.io/2018/07/31/trident-18-07-summer-heat-and-awesome-features/

Trident 18.07: Summer Heat and Awesome Features - thePub

Trident 18.07, released in July, brings new features, bug fixes, and more to NetApp's open source dynamic storage provisioner for the container ecosystem.


storagetalks, August 01, 08:44

Как перенести FlexClone с одной SVM на другую без потери эффективности на источнике? volume rehost не работает для клонов, а volume move для последующего rehost приведёт к тому, что клон отцепится от тома-родителя и начнёт занимать полную ёмкость. Но есть хитрость - использовать SnapMirror между двумя SVM, создать клон на получателе на базе общего снепшота и сделать ресинхронизацию отношений SnapMirror для клонов. Подробнее описывает Jastin Parisi. Пост про rehost томов я переводил пару лет назад.

#FlexClone #SnapMirror #ONTAP

whyistheinternetbroken.wordpress.com/2018/07/31/transporte-sans-bouger/

storagetalks, July 31, 11:45

Forwarded from ONTAP Updates:

Service Update: ONTAP - 9.4P1

Date Posted: 31-JUL-2018

mysupport.netapp.com/NOW/download/software/ontap/9.4P1/

storagetalks, July 31, 09:24

СберТех сравнил производительность нескольких вариантов Ersure Coding на Hadoop 3.0.0 с репликацией 3 копий. Мне бы было интересно еще посмотреть на графики для репликации с двумя копиями, потому что такой вариант рекомендуется при использовании NetApp E-Series под Hadoop.

#hadoop

habr.com/post/418667/

Сравнительный анализ HDFS 3 с HDFS 2

В нашей компании СберТех (Сбербанк Технологии) на данный момент используется HDFS 2.8.4 так как у него есть ряд преимуществ, таких как экосистема Hadoop,...


storagetalks, July 31, 09:18

Пара новых видео про NetApp Cloud Volumes Service for AWS.

Про SLA, квоты, производительность. Про то, как влияют на производительность размеры инстансов и ограничения AWS.

www.youtube.com/watch?v=q46qet1eajI

www.youtube.com/watch?v=eypkZDkhHs4

Первая часть была пару недель назад: storagetalks.net/505

#ONTAP #Cloud #AWS

Cloud Volumes Service for AWS: Foundations (Part 2)
Join us as we explore SLAs, Quotas, Throughput, and other foundations of Cloud Volumes Service for AWS

storagetalks, July 30, 09:16

Появилась возможность запускать демо-ноду SolidFire Element OS. Доступна в виде виртуального аплаинса для VMware в ToolChest. Из демо-нод нельзя собрать кластер, нельзя обновлять до новых версий Element OS. Ну и само собой, не идёт речи о какой-то серьёзной производительности. В первую очередь она для того, чтобы оценить простоту интерфейса, посмотреть как лего создавать и отдавать хостам тома, создавать снепшоты, клоны и т.д. Ну и очень удобно тестировать работу API.

#SolidFire

mysupport.netapp.com/tools/info/ECMLP2848232I.html?productID=62139&pcfContentID=ECMLP2848232

storagetalks, July 27, 12:25

А вот и презентации с NetApp Directions 2018.

www.netapp.ru/company/events/netapp-directions-2018-moscow.aspx#t2

NetApp Directions конференция по управлению данными

Главное событие осени, посвященное технологиям хранения и управления данными


storagetalks, July 27, 07:00

​​Как обстоят дела с резервных копированием VMware VVols. Пост от Pete Flecha, который еще пару лет назад работал в NetApp. Кратко об изменених в снепшотах для VVol (есть ссылка на более подробное описание изменений), какие есть грабли с использованием vMotion, какие VMware Transport Modes поддерживаются, какое ПО резервного копирования поддерживает VVols, что делать с VASA Provider.

#VVols #VMware #backup

blogs.vmware.com/virtualblocks/2018/07/25/backing-up-virtual-volumes-vvols/

storagetalks, July 27, 06:01

ONTAP 9.4 стала доступна в виде симулятора.

mysupport.netapp.com/cgi-bin/simulator

storagetalks, July 26, 09:46

​​Gartner Magic Quadrant for Solid-State Arrays за 2018 год. NetApp продолжил своё движение в правый верхний угол, как и Pure Storage. Dell EMC второй год подряд двигают влево. Hitachi, IBM, HPE немного улучшили свои позиции. Huawei на год пропадал из отчёта, теперь вернулся в квадрант Challengers к Fujitsu. Думаю никто не будет со мной спорить, что самый большой рывок совершил NetApp. Я еще пришлю картинку с 2017 годом наложенным поверх 2018.

Из прогнозов: к 2021 году массивы с NVMe дисками будут занимать больше 30% рынка, но использовать NVMe-oF будет меньше 30%, продаваемых систем. За 2017 год продали на $6.3 миллиарда, относительно 2016 года рынок вырос на 27%.

www.gartner.com/doc/reprints?id=1-465OEEV&ct=170713&st=sb

Gartner Magic Quadrant for SSA 2018 vs 2017

storagetalks, July 25, 06:00

Очередная подборка свежих Technical Reports.

TR-4572. The NetApp Solution for Ransomware

Немного обновили документ о том, как бороться с вирусами-шифровальщиками. Снепшоты, репликация, FPolicy.

Как раз недавно этот вопрос обсуждался в нашем чате и было приятно прочитать о том, что клиенты счастливы, что снепшоты спасли их данные от шифрования.

Напомню про пост на Хабре на ту же тему - habr.com/post/332098/

#TR #ransomware

www.netapp.com/us/media/tr-4572.pdf

TR-4704. Deploying Veritas NetBackup with NetApp E-Series Storage

Документ описывает как использовать E-серию в качестве репозитория резервных копий Veritas NetBackup. В этом случае данные могут храниться на любой СХД. И описывается как бекапить данные с E-серии за счёт интеграции на уровне снепшотов.

#backup #veritas #netbackup #ESeries

www.netapp.com/us/media/tr-4704.pdf

TR-4598. FabricPool Best Practices. ONTAP 9.4

Рекомендации по использованию FabricPool. Это тиринг данных с ONTAP в объектное хранилище (AWS, Azure, StorageGRID). В 9.4 добавили возможность отправлять в облако не только данные из снепшотов, но и активные данные. Работает для AFF, all-SSD агрегатов на FAS, для ONTAP Select (на HDD тоже), в ONTAP Cloud.

#tiering #ONTAP #S3 #cloud #Select

www.netapp.com/us/media/tr-4598.pdf

TR-4400. VMware vSphere Virtual Volumes with ONTAP

Хороший документ, в котором собрано практически всё что нужно знать о работе VVols на ONTAP. Актуализировали информацию для VASA Provider 7.2. Например, подробно описали как работают QoS для VVol. Есть информация о том, как обеспечивать сохранность VASA Provider. Как бекапить VVols с помощью Commvault и Veeam.

#VVols #VMware #ONTAP

www.netapp.com/us/media/tr-4400.pdf

​​TR-4630. NetApp HCI with VMware Horizon 7

VDI на HCI с сайзингом, тестами производительности при помощи Login VSI. Тестировалось 8 маленьких вычислительных нод (7 под десктопы, 1 для инфраструктуры) и 4 маленькие ноды хранения. Напомню, что все ноды имеют три варианта small, medium, large. В такой конфигурации производительность ограничивалась вычислительными нодами, производительности нод хранения было с запасом. Дополнительно сравнили производительность большой ноды с маленькими. Из интересного сравнили изменение производительности до и после применения патчей от Spectre и Meltdown.

#TR #VMware #Horizon #HCI #SolidFire

www.netapp.com/us/media/tr-4630.pdf

​​TR-4684. Implementing and Configuring Modern SANs with NVMe/FC

Документ описывает общие концепции NVMe и NVMe over Fabrics, как реализована поддержка NVMe/FC в ONTAP, какие преимущества в производительности, какие сейчас существуют ограничения. Основное ограничение сейчас — нет поддержки мультипасинга, связано это с тем, что протокол всё ещё находится в активной фазе развития. Вообще NetApp является основным автором спецификации ANA (Asymmetric Namespace Access) — это аналог ALUA. Но предложения были ратифицированы только в марте 2018. К этому моменту разработка ONTAP 9.4 явно была уже в фазе тестирования и добавлять новую функциональность было бессмысленно. Но в следующих релизах всё будет.

В конце документа очень обширная подборка полезных ссылок на стандарты, документы, видео. Например, там есть сравнение RoCE с iWARP за авторством Mellanox. Несложно догадаться какой протокол оказывается лучше, но читать всё равно полезно и интересно.

#TR #ONTAP #NVMe #FC #SAN #AFF

www.netapp.com/us/media/TR-4684.pdf


storagetalks, July 24, 11:01

Опубликованы фотографии с NetApp Directions. Много довольных и задумчивых лиц 😉 Презентации докладов будут немного позже.

www.facebook.com/pg/NetAppRussia/photos/?tab=album&album_id=1721674584553040

NetApp Russia & CIS

NetApp Russia & CIS, Moscow, Russia. 1.5K likes. NetApp создает инновационные решения для хранения и управления данными, которые способствуют успеху бизнеса.


storagetalks, July 19, 19:43

На Directions многие спрашивали про HCI. Как оно запускается, как управляется и чем вообще отличается от отдельно купленных серверов и СХД. Я уже делился видео с первоначальной настройкой HCI, но тут как раз вышло обновленное видео. Первоначальные настройки занимают буквально несколько минут. Главное определиться с ip-адресацией. Можно создать новый кластер VMware, можно присоедениться к существующему. Ну и можно сразу же развернуть ONTAP Select для файлового доступа. Дальше идёт процесс деплоя, который занимает около 30-40 минут. Всё управление из vCenter.

#HCI #VMware #SolidFire

tv.netapp.com/detail/videos/featured/video/5622558186001/netapp-hci-netapp-deployment-engine-demo

storagetalks, July 18, 11:45

​​Почти год назад я уже писал в канале про компанию Plexistor.

storagetalks.net/244

А теперь появляется публичная информация о том, как их решение будет интегрировано с NetApp AFF. Называться это будет NetApp Memory Accelerated Data или MAX Data. На серверах с Persistent Memory будет работать MAX FS, она же M1FS, которая будет зеркалироваться на AFF. Все понимают, что локально подключенные устройства хранения всегда быстрее сетевых СХД, но отстают по функциональности, надежности, гибкости и т.д. С MAX Data получаем очень высокую производительность на серверах и возможность репликации данных, использования снепшотов и прочие прелести AFF. Параллельно NetApp разрабатывает аналог FUSE для работы с Persistent Memory. Пока он называется ZUFS (Zoo FS) — Zero-copy User-mode FS. Файловые системы, работающие на уровне ядра всегда быстрее, чем те, которые работают в user-space. Но остаётся вопрос со скоростью и гибкостью разработки. ZUFS работает быстрее FUSE и написан специально для работы с Persistentent Memory.

#SCM #PM #AFF

blog.netapp.com/an-update-on-the-plexistor-acquisition-introducing-netapp-memory-accelerated-data/

Download nvmw2018-paper97-presentations-slides.pptx 3.05 MB
Download pmandzufsktlvmeetup14nov2017-171115095650.pdf 2.10 MB

storagetalks, July 17, 18:57

В OnCommand Unified Manager 9.4 теперь есть RESTful API.

#OCUM #API

blog.netapp.com/automation-ready-unified-manager-for-the-modern-data-center/

Automation-Ready Unified Manager for the Modern Data Center

With OnCommand Unified Manager 9.4, NetApp introduces RESTful APIs that can be integrated into your centralized monitoring platform.


storagetalks, July 13, 10:38

Чуть не забыл рассказать самое главное про NetApp Directions. Читателей канала ждёт небольшой сюрприз.

Для тех, кто пропустил — 17 июля во вторник в Москве пройдёт конференция NetApp Directions. Ещё не поздно зарегестрироваться.

А если во вторник на стойке регистрации вы произнесёте кодовое слово “ONTAP”, то вам дадут стикер с логотипом канала 😉 Даже, если вы равнодушны к такого рода вещам, берите стикер. Так мы заодно посчитаем сколько живых людей читает канал.

NetApp Directions конференция по управлению данными

Главное событие осени, посвященное технологиям хранения и управления данными


storagetalks, July 13, 10:16

​​К пятнице обновил старый пивной пост. Если кто не знал, NetApp для всех релизов ONTAP использует кодовые “пивные” названия. Добавил свежие релизы, названия пивоварен и ссылки на них.

#ONTAP

alikulov.me/blog/all/netapp-kak-pivo/

storagetalks, July 12, 16:55

Обновили TR-4517. ONTAP Select. Product Architecture and Best Practices. Добавилась информация о ONTAP Select 9.4 и Deploy 2.8. (Идите по ссылке, Телеграм кэширует pdf-файлы и у меня, например, скачивается мартовская версия).

#ONTAP #Select #SDS #TR

www.netapp.com/us/media/tr-4517.pdf

Download tr-4517.pdf 2.53 MB