Открытие NAS файлов. Расширение файла NAS Каковы аппаратные требования для zfs

(оригинал)

Безудержное нарушение принципа многоуровневости? (оригинал)

Карты пространства (оригинал)

ZFS Deduplication (англ.)

Тюнинг

Вопросы новичка по zfs

Каковы аппаратные требования для zfs?

Минимальные, чтобы только включилось - 512 М памяти и 32 бит процессор. Минимальные рабочие - 64 бит процессор (напр двух ядерный атом) и 1Гб памяти. Желательно - процессоры Sandy или Ivy Bridge, можно младшие. Памяти чем больше, тем лучше, но в домашних условиях больше 8 Гб вряд ли нужно. (Не забудьте сделать тюнинг, если памяти много, см ниже.) Часто приходится слышать рекомендацию “гигабайт памяти на терабайт массива”. Но пока ни в одном из заслуживающих доверия источников этой рекомендации найти не удалось. Так что, возможно, это городская легенда. В идеале и в production память ECC, но у подавляющего большинства камрадов память обычная. Прим. Для режима дедупликации требуются очень большие, иногда непредсказуемо большие, объемы памяти, см ниже.

Попытки использования в домашних условиях SSD для кеширования как чтения, так и записи не дали заметных позитивных результатов. MikeMac

Какие есть варианты массивов (пулов) zfs?

Массив строится как набор виртуальных устройств (vdev). Часто пул состоит из одного vdev. Виды vdev (Прим. для краткости говорим, что vdev состоят из дисков, хотя это могут быть и разделы дисков и файлы и пр.)

• stripe - страйп, нечто среднее между RAID0 и JBOD. Не имеет избыточности, вся информация теряется при смерти любого из дисков.
• mirror - зеркало, примерный аналог RAID1. Каждый диск зеркала содержит полную копию всей информации. Выдерживает смерть одного любого диска. Возможно и тройное зеркало.
• raidz1 - примерный аналог RAID5, требует минимум 3 дисков, объем одного диска уходит на избыточность. Выдерживает смерть одного любого диска.
• raidz2 - примерный аналог RAID6, требует минимум 4 диска, объем двух дисков уходит на избыточность. Выдерживает смерть двух любых дисков.
• raidz3 - требует минимум 5 дисков, объем трёх дисков уходит на избыточность. Выдерживает смерть трёх любых дисков.

Если в пул входит несколько vdev, то они объединяются в страйп из vdev. Так можно сделать примерный аналог RAID10 (страйп из зеркал) или RAID60 (страйп из raidz2). Входящие в пул vdev могут иметь разный размер, но строго рекомендуются одного типа (хотя технически возможно собрать пул из разных типов vdev). Например, не рекомендуется объединять в пул raidz1 и страйп из-за падения надёжности. MikeMac

Каковы сравнительные достоинства и недостатки различных типов vdev?

• stripe
  • + используется всё пространство дисков; увеличение производительности аналогично RAID0
  • - низкая надежность, вся информация теряется при смерти любого из дисков.
• mirror
  • + высокая производительность и надежность
  • - половина объема уходит на избыточность (2/3 для тройного зеркала)
• raidz1
  • + Экономное использование дискового пространства при обеспечении избыточности
  • - некоторое снижение производительности по сравнению с зеркалом; при смерти одного из дисков до окончания перестроения на новый диск имеем страйп в смысле надежности
• raidz2
  • + высокая надежность, расчёты показывают, что более высокая, чем у зеркала - если вы и потеряете массив, то не из-за выхода дисков из строя, а из-за проблем с другими компонентами
  • - два диска уходят на избыточность
• raidz3
  • + параноидальная надежность, излишняя практически всегда
  • - три диска на избыточность. MikeMac

И какой вариант мне предпочесть?

• stripe для малоценной или легко восстанавливаемой информации (оцените и затраты своего времени)
• mirror для высокой нагрузки случайного чтения/записи
• raidz1 как базовый вариант для файлопомойки
• raidz2 как премиум вариант

NB: Никакой RAID не заменяет Backup. Важная, невосстановимая информация должна быть сохранена куда-то вовне. MikeMac

Подробнее о vdev

Сжатие включать?

Oleg Pyzhov : какие разделы сжимать, какие нет определил опытным путем. Проц у меня атомный поэтому без вариантов тип сжатия lzjb

• storage1/system 6,74G compressratio 1.71x (тут лежат скрипты, а также каталоги для FreeBSD: /usr/src, /usr/obj, /usr/ports)
• storage1/soft 61,6G compressratio 1.17x (тут дистрибьютивы)
• storage1/document 302G compressratio 1.16x (тут много мелких файлов: DWG,DOC,XLS, JPG)
• storage1/timemachine сжатие не испольщую, тк неэффективно.. MacOSX и так походу сжимает свой Backup)
• storage1/media не сжимаю, тк неэффективно

Sergei V. Sh : размеры датасета с кучей фото

• 93.2G (ashift=9 compresion=on)
• 95.0G (ashift=9 compresion=off)
• 94.5G (ashift=12 compresion=on)
• 96.1G (ashift=12 compresion=off)

Как переименовать пул?

zpool export poolname zpool import poolname newname

Как удалить файл, если нет места на диске с ZFS

dd if = /dev/null of = file.avi rm file.avi

UPD от MikeMac На практике оказалось, что первым пунктом следует проверить наличие снапшотов

zfs list -t snapshot

Если снапшоты есть, то их следует удалять (http://docs.oracle.com/cd/E19253-01/819-5461/gbcya/index.html), начиная с наиболее древних, пока не появится место (или пока не будут удалены все).

Если же проводить операцию по усечению файла как выше - то в случае наличия его копии в снапшоте операция не высвободит места.

Кроме того, практика показывает что усечение файла лучше проводить над небольшими файлами.

Как узнать точный размеры пула?

• Как определить полный объем пула, доступный пользователю (т.е. за вычетом ушедшего на избыточность)?

USED - объем занятого пространства AVAIL - сколько осталось

• Сиди складывай USED + AVAIL?
• в байтах для датасета zpool/var:

zfs get -Hp -o value avail,used zpool/var | awk "{ s+=$1; } END { print s; }"

• в терабайтах:

zfs get -Hp -o value avail,used zpool/var | awk "{ s+=$1; } END { printf "%.3f Tb.\n", s/(1048576*1048576); }"

От WearWolf .

Заменил все диски на бОльшие, но размер пула не изменился, что делать?

Наиболее простой для новичка способ - перезагрузить систему. Если это не помогает

zpool online -e <имя пула> <имя любого диска из этого пула>

Если задать автоувеличение при помощи команды

zpool set autoexpand = on <имя пула>

Пул будет сам вырастать. Sergei V. Sh

Автоувеличение пула не работало перепробовал все трюки - включение autoexpand=on , экспорт-импорт, ребут импорт пула был невозможен пока не деинсталировал VirtualBox - расположен на пуле и при попытке принудительного экспорта просто уводит весь нас в ребут.

Данная рекоммендация, по всей видимости, не актуальна для новых версий ZoL.

Для настоящих знатоков извращений:)

Q. Купить разом все хдд не имею возможности, а ухудшать конфиг не хочу
A. мой случай… я сделал себе 8+2 (raidz2 из 10 дисков) - но дисков сразу не имею

Q. А какими командами FreeBSD поделить 2T диск на половинки для этого?
A. например, так

Q. имею raidz1 на 2T дисках. Заменить каждый на 4T - ноль проблем. Но в выхлопе остается несколько шт 2T дисков. Печалька.
A.

Творческая студия «АН Формат» объединяет коллектив талантливых художников, настоящих виртуозных мастеров своего дела. Профессиональные опытные специалисты готовы реализовать оригинальные и уникальные идеи заказчиков, учитывая все дополнительные пожелания и важнейшие нюансы. Мы разрабатываем и воплощаем авторские проекты от эскиза до готового результата, выполняя полное преобразование внутреннего интерьерного решения, внешнего благоустройства и привычной планировки территории. Как ландшафтный дизайн, так и дизайн интерьера продумываются в едином стиле или их гармоничном сочетании. Наиболее популярны и востребованы:

• классическая или современная готика,
• впечатляющие элементы барокко,
• привлекательная комфортная эклектика,
• композиции и зарисовки по мотивам русских сказок.

Индивидуальный комплексный подход и креативный дизайн позволяют решать задачи самых требовательных клиентов без каких-либо ограничений по стилевым направлениям и модным тенденциям. Более того, мы предлагаем максимальное разнообразие форм, качественных материалов и видов их обработки:

• отдельно стоящие фигуры и статуэтки, композиции, МАФ,
• металл, дерево, природный и искусственный камень, стекло, ковка,
• изящная чеканка
• резьба по дереву или камню, гравировка,
• специфическая технология изготовления витражей,
• красивая графика и необыкновенная скульптура.

Многолетний опыт наших квалифицированных сотрудников гарантирует получение наилучших результатов выполнения отдельных видов работ и полного комплекса рабочих процессов. Большинство идей и замыслов имеют эксклюзивный дизайн. У наших постоянных клиентов уже сложилась добрая традиция заказывать удивительные подарки для друзей и близких знакомых. Людям с высоким уровнем дохода очень сложно угодить и подобрать для них действительно роскошный презент. Нам удается их приятно удивлять. В сфере дизайна интерьера и ландшафтного дизайна мы работаем уже много лет. Мы оказываем услуги по дизайну интерьера в Москве и других городах России. Мы также готовы воплотить для вас эксклюзивный ландшафтный дизайн. Москва и ближайшие области уже знакомы с нашими работами.
Многолетний опыт наших квалифицированных сотрудников гарантирует получение наилучших результатов выполнения отдельных видов работ и полного комплекса рабочих процессов.
Большинство идей и замыслов имеют эксклюзивный дизайн. У наших постоянных клиентов уже сложилась добрая традиция заказывать удивительные подарки для друзей и близких знакомых. Людям с высоким уровнем дохода очень сложно угодить и подобрать для них действительно роскошный презент. Нам удается их приятно удивлять.
В сфере дизайна интерьера и ландшафтного дизайна мы работаем уже много лет. Мы оказываем услуги по дизайну интерьера в Москве и других городах России. Мы также готовы воплотить для вас эксклюзивный ландшафтный дизайн. Москва и ближайшие области уже знакомы с нашими работами. За это время накопилось множество публикаций о нас в прессе. С некоторыми статьями, написанными о нас в разное время, вы можете ознакомиться на нашем сайте.

Попросил нас рассказать о RAID 1 в Synology, а именно

- raid 1, отказ одного диска, процедура диагностики и горячей замены
- raid 1 из двух дисков разных производителей
- raid 1, отказ самого устройства, спасение данных с диска средствами ОС

Спрашивали? Отвечаем!
Итак, 2-х дисковые накопители все чаще востребованы в среде домашних пользователей и небольших компаний, где требуется небольшой объем хранения и обеспечение отказоустойчивости. В линейке продукции Synology представлено аж 7 (семь) 2-х дисковых NAS накопителей. Это модели:
DS214+ и RS214 сегмента smb
DS214 сегмента soho
DS214play ,DS213air ,DS213j и DS214se сегмента home.

Диагностика и горячая замена
Для диагностики неисправностей жестких дисков в Synology применяется 2 процедуры: проверка поверхности диска, запускаемая при создании нового массива и в дальнейшем по расписанию (по желанию пользователя) и получение данных S.M.A.R.T. в реальном времени. Использование этих процедур позволяет отследить и вовремя предупредить выход из строя одновременно двух дисков.

Зачастую, при неправильном выборе жесткого диска происходит его вылет из системы. Причем состояние поверхности диска и его смарт остаются в порядке. Причина таких вылетов - задумчивость диска и его неотклик в течении 7 секунд (время ожидания контроллера). Поэтому лучше выбирать диски NAS или Enterprise серий.

Если по результатам диагностики Synology выдал предупреждение, что жесткий диск неисправен - его рекомендуется заменить. Для этого, в зависимости от модели устройства, придется выключить (DS213air, DS213j, DS214se) или просто, на «горячую» извлечь диск. После установки нового диска (а в модели DS214play для этого даже не нужно откручивать винты - салазки для дисков безвинтовые) нужно открыть веб интерфейс Synology, авторизоваться и открыть Диспетчер хранения. Здесь мы в первую очередь отключаем звуковой сигнал соответствующей кнопкой на панели задач, а затем кнопкой управление запускаем процедуру восстановления раздела.
В зависимости от размера диска она может длиться от нескольких часов до 1 дня.

RAID 1 из двух дисков разных производителей.
Здесь все просто: работаем по меньшему/медленному диску.
Поскольку RAID 1 подразумевает одновременную запись на оба диска, то при установке медленного и быстрого накопителя в один раздел быстрый будет постоянно дожидаться, пока допишет его медленный товарищ. Такие конфигурации жизнеспособны, но не рекомендуются для использования .

Отказ устройства Synology, восстановление данных с дисков.
Крайне маловероятно, но все же Synology может выйти из строя: неправильное выключение (по питанию), физическое воздействие или просто несчастный случай. В такой момент пользователю необходимо в первую очередь удостовериться, что с данными все в порядке. Итак, что же на дисках? Все предельно просто:

Раздел 1 - Сама ОС DSM, объединяется в RAID 1, независимо от количества отсеков в устройстве.

Раздел 2 - swap, свойственный всем linux-овым ОС

Раздел 3 - Пользовательские данные. Самый главный для Вас и для NAS раздел:)

Производство дымоходов FORMAT было открыто в 2015 года. Разрабатывая линию дымоходов под российским брендом FORMAT, мы учли богатый опыт по реализации дымоходных систем. Наши специалисты не стали делать упор на работу с одним производителем, а взяли самое лучшее от производителей дымоходов, имеющих репутацию поставщиков надёжной и качественной продукции на европейском рынке. Это позволило собрать под одним крылом лучшие разработки Stabile (Италия), ATI (Италия), AntKalip (Турция) и предложить их на российском рынке под маркой FORMAT. Надеемся, наши цены, ассортимент и гарантированное европейское качество не оставят Вас равнодушными.

Представителем бренда FORMAT на территории Российской Федерации является ООО Термо Лайф .

Широкий ассортимент элементов дымоотводящих систем включает порядка 300 изделий.

Продукция поделена на разделы:

А. Дымоходы для конвекционных (традиционных) котлов:

• Раздельная система дымоудаления (включает линию Ø60, Ø80, Ø100).
• Утеплённая система дымоудаления (двойные стенки Ø80/100).
• Коаксиальная система дымоудаления (включает линию Ø60/100, Ø80/125).

Б. Дымоходы для конденсационных котлов:

• Раздельная система дымоудаления из PVC (включает линию Ø60, Ø80, Ø100).
• Коаксиальная система дымоудаления из PVC (включает линию Ø60/100, Ø80/125).

Дымоходы FORMAT изготавливаются из алюминия с термостойкими, кислотостойкими добавками. Гарантийный срок службы составляет 3 года, расчётный срок службы - 25 лет.

Крепкие партнёрские отношения с производителями, оптимизация доставки и желание развивать долговременные коммерческие связи на российском рынке отопительного оборудования позволяет нам предлагать продукцию FORMAT по очень интересным ценам с неизменным сохранением качества изделий.

Вся продукция имеет разрешительную документацию для реализации на территории РФ.