Andrew Pantyukhin P Nf Sv4
-
Upload
guest092df8 -
Category
Documents
-
view
1.130 -
download
2
Transcript of Andrew Pantyukhin P Nf Sv4
![Page 1: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/1.jpg)
![Page 2: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/2.jpg)
SAN - Storage Area Network
NAS - Network Attached Storage
DAS - Direct Attached Storage
![Page 3: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/3.jpg)
SAN - FC, FCoE, iSCSI, AoE, ...
NAS - NFS, SMB/CIFS, AFP, ...
DAS - SAS/SATA, IDE, USB, ...
![Page 4: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/4.jpg)
SAN - low latency, простые протоколы,
дорогое и сложное FC-железо
NAS - high latency, сложные протоколы,
работает по сети
![Page 5: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/5.jpg)
SAN low latency теряется на логике FS
NAS high latency сглаживается
кэшированием с обеих сторон
![Page 6: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/6.jpg)
NFS отстаёт от FCP на 10-15%¹
NFS быстрее iSCSI на 5-10%¹
¹⁾отчёт NetApp tr-3581
![Page 7: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/7.jpg)
FC обычно в пределах ЦОД, редко до 100
км
NFS, SMB и iSCSI работают по IP, но не
любят большие RTT
NFSv4 подходит для любых RTT
![Page 8: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/8.jpg)
SAN: Oracle Exadata, … - сыровато, фокус
на надёжности
NAS: Lustre, NetApp GX, Isilon, Panasas -
проверено, фокус на скорости
![Page 9: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/9.jpg)
тесно интегрированные решения
pNFS = NAS + SAN
![Page 10: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/10.jpg)
NFS - Unix
SMB/CIFS - Windows
AFP - Apple
Lustre, GPFS, … - Linux, proprietary
![Page 11: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/11.jpg)
поддерживается всеми Unix
отлично работает на всех Mac OS X
работает даже на экзотике типа z/OS
сносно работает под Windows, есть
хорошее коммерческое ПО
обрастает возможностями Lustre и GPFS
![Page 12: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/12.jpg)
v1 - 1984 (Sun)
v2 - 1989 (Sun)
v3 - 1995 (Sun)
v4 - 2000, 2003 (IETF)
v4.1 - 2010 (IETF)
![Page 13: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/13.jpg)
лёгкость восстановления
независимость от транспорта, ОС и
файловых систем
простота
хорошая скорость
![Page 14: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/14.jpg)
работает по TCP и UDP
на основе протоколов ONC RPC и XDR
аутентификация и шифрование через GSS
(Kerberos)
авторизация через политики exports, ACL
advisory locking (в v4 - mandatory)
![Page 15: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/15.jpg)
лучшая доступность и скорость over Internet
обязательная безопасность, negotiation
настоящая кросс-платформенность
лёгкость расширений
![Page 16: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/16.jpg)
перешёл из Sun в IETF
RPCSEC_GSS, Kerberos security schemes
stateful-архитектура
compound RPC
сделан глядя на CIFS и AFS
![Page 17: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/17.jpg)
RPCSEC_GSS (RFC2203)
authentication, integrity, privacy
Kerberos V5 (RFC1964)
LIPKEY (RFC2874)
in-band negotiation
![Page 18: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/18.jpg)
чтение файла с нового сервера одним
запросом
эффективность HTTP
кэширование двух filehandles в "регистрах"
![Page 19: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/19.jpg)
только UTF-8
монтирования нет, сервер отдаёт один
ROOT FH
все экспортируемые фс склеиваются в одну
иерархию
гибкие, расширяемые атрибуты, включая
ACL и locations
именованные owner, group
![Page 20: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/20.jpg)
атрибут locations может сообщать клиенту о
других серверах
клиент мигрирует при отключении текущего
сервера
клиент может балансировать нагрузку
между репликами
![Page 21: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/21.jpg)
встроенный byte-range locking
lease-модель обеспечивает быстрое
восстановление
вечно подвисших locks больше нет
![Page 22: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/22.jpg)
кэширование директорий и атрибутов
определяется клиентом
кэши данных валидируются при открытии
делегирование - разрешение на локальную
обработку запросов
позволяет работать с активными
NFS-файлами на локальном диске
первый шаг к настоящей распределённости
![Page 23: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/23.jpg)
Solaris - самая полная поддержка
Linux - широкая поддержка, есть баги
FreeBSD - поддержка сыровата, есть баги
NetApp - широкая поддержка, есть
ограничения
Isilon, Panasas, AIX, z/OS - есть поддержка в
разном состоянии
![Page 24: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/24.jpg)
RFC5661 - самый длинный RFC-документ в
истории
исправление структурных недостатков NFS
дополнение v4 на основе опыта
промышленного использования
поддержка кластеров и параллельного
доступа (pNFS)
![Page 25: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/25.jpg)
атрибут locations в роли referrals
первый шаг к FedFS
![Page 26: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/26.jpg)
+-----------+
|+-----------+ +-----------+
||+-----------+ | |
||| | NFSv4.1 + pNFS | |
+|| Clients |<------------------------------>| Server |
+| | | |
+-----------+ | |
||| +-----------+
||| |
||| |
||| Storage +-----------+ |
||| Protocol |+-----------+ |
||+----------------||+-----------+ Control |
|+-----------------||| | Protocol|
+------------------+|| Storage |------------+
+| Devices |
+-----------+
![Page 27: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/27.jpg)
EMC, IBM, LSI, NetApp, Panasas, Google,
Sun, …
промышленный опыт: NetApp, Panasas,
Isilon, …
в открытой разработке с 2003 года, релиз в
январе 2010
NFSv4.1, block pNFS (RFC5663), object pNFS
(RFC5664)
![Page 28: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/28.jpg)
уровни: файлы, объекты или блоки
сервера делятся на metadata servers и
storage devices
клиент производит I/O напрямую
клиент отдаёт серверу новый layout
клиент может всегда выбрать обычный
NFSv4.1 I/O
![Page 29: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/29.jpg)
даёт клиенту layout и доступ к storage
клиент производит I/O напрямую
клиент отдаёт серверу новый layout
клиент может всегда выбрать обычный v4.1
I/O
![Page 30: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/30.jpg)
file - другой NFSv4.1 сервер
block - блочное хранилище (SAN)
object - объектное хранилище (OSD)
что-то ещё, поддерживающее NFSv4.1
storage protocol
![Page 31: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/31.jpg)
идеальная основа для cluster storage
объект - как inode: данные и атрибуты
OSDv1/v2 - стандартные наборы команд
SCSI
аппаратная поддержка объектов
![Page 32: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/32.jpg)
клиенты: Linux, Solaris, …
серверы: NetApp, Panasas, Linux, Solaris,
IBM, EMC, …
FreeBSD - ?
NetApp, Panasas, Isilon, IBM Series N -
FreeBSD!
![Page 33: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/33.jpg)
RDMA - не только InfiniBand/iWARP/Myrinet,
но и 10GbE
скоростной доступ к удалённой памяти без
CPU
RPCRDMA - скоростная работа RPC по
RDMA
NFS over RDMA - NFS любых версий по
RPCRDMA
![Page 34: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/34.jpg)
набор протоколов для федеративных
файловых систем
доступен для обычных клиентов NFSv4 и
NFSv4.1
участники сохраняют контроль над своими
системами
масштабируемость по географии, числу
клиентов, файлов, серверов
![Page 35: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/35.jpg)
NSDB - DNS для файлов на основе LDAP
Junction admin - управление разделами по
ONC RPC
Namespace discovery - на базе DNS SRV
![Page 36: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/36.jpg)
упрощает администрирование
разделяет физическое местонахождение
данных от логического
упрощает миграцию и HA/LB-репликацию
данных
существенно упрощает облачное хранение
данных
![Page 37: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/37.jpg)
AIX - 2004
HPUX - 2008
Linux - 2006
OpenSolaris - 2010
![Page 38: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/38.jpg)
о чём был доклад?
что такое NFS?
а обед уже был?
когда докладчик последний раз брился?
![Page 39: Andrew Pantyukhin P Nf Sv4](https://reader034.fdocument.pub/reader034/viewer/2022042614/5568a93dd8b42a4c378b4b06/html5/thumbnails/39.jpg)
www.NFSv4.org
www.pNFS.com
IETF NFSv4 WG