Как создать файловую систему Ext4 с помощью Mkfs
Добавить в избранное
Главное меню » Linux » Как создать файловую систему Ext4 с помощью Mkfs

E xt4 является преемником ext3 в семействе файловых систем Linux. Он совместим с большинством дистрибутивов Linux, таких как RedHat, Ubuntu, Fedora и т. д.
Ext4 стала файловой системой по умолчанию для многих дистрибутивов Linux и теперь является стандартом де-факто для ядер Linux 2.6.28 и выше.
Что мы узнаем?
В этой статье мы увидим базовый обзор файловой системы Ext4 и то, как мы можем использовать ее для создания файловой системы Ext4 с помощью mkfs?
Файловая система Linux Ext4
В отличие от 32-битной файловой системы ext3, которая просто добавила несколько функций к предыдущей файловой системе ext2 и сохранила ту же структуру данных, что и файловая система ext2, файловая система ext4 включает в себя более значительные улучшения, чем ext3, например:
- Улучшенная структура данных и улучшенные функции.
- 64-битная файловая система.
- Поддерживает размеры файлов до 16 ТБ.
- Одновременное выделение нескольких единиц.
- Быстрый fsck (проверка файловой системы).
История файловой системы EXT
Хотя файловая система EXT была создана для Linux, ее происхождение восходит к ОС Minix и файловой системе Minix. Линус Торвальдс использовал файловую систему Minix для своей первой версии Linux. Файловая система EXT появилась в Linux в 1992 году, чтобы компенсировать некоторые ограничения размера, связанные с файловой системой Minix. Однако вскоре файловая система EXT была вытеснена ее преемницей файловой системой EXT2.
Файловая система EXT2 имела большой успех. В течение многих лет она использовалась в системах Linux. Файловая система EXT2 имеет те же структуры метаданных, что и файловая система EXT, но EXT2 является более продвинутой, поскольку оставляет больше места на диске между структурами метаданных для будущего использования. Одна проблема с файловой системой EXT2 заключалась в том, что восстановление после сбоя может занять много часов, поскольку инструменту fsck (проверка файловой системы) потребовался долгий путь, чтобы найти и исправить любые нарушения в файловой системе.
Файловая система EXT3 была разработана с учетом большого количества времени, необходимого инструменту fsck для правильного восстановления структуры диска, нарушенной ошибочным завершением работы во время действия по обновлению файлов. Он был добавлен к основному ядру Linux версии 2.4.15. Журнал, который заранее записывает изменения в файловой системе, был единственным улучшением файловой системы EXT. Остальная структура диска остается неизменной по сравнению с EXT2.
Файловая система EXT4 была представлена в 2006 году и была принята в основное ядро Linux версии 2.6.28 в 2008 году. Файловая система Ext4 работает так же, как и Ext3. Тем не менее, он добавляет поддержку больших файловых систем, повышенную устойчивость к фрагментации, превосходную производительность, а также лучшие временные метки.
Создание файловой системы Ext4 с помощью mkfs
После установки операционной системы Linux может потребоваться добавить новую файловую систему ext4. Например, если вы добавляете в систему новый жесткий диск, вы можете захотеть разбить его на разделы с файловой системой ext4. Это означает, что мы можем разделить наши жесткие диски на логические части, называемые разделами.
Разделы в Linux монтируются в определенных точках дерева каталогов, что делает их доступными как подкаталоги.
Давайте переместимся и посмотрим, как мы можем создать файловую систему EXT4 с помощью инструмента GNU Parted:
Шаг 1 . Во-первых, давайте перечислим раздел, доступный в нашей системе:
Или вы также можете использовать:
Шаг 2 . Используйте следующую команду для изменения целевого диска (в нашем случае /dev/sdb):
Вы увидите сообщение, подобное приведенному ниже:
В этом новом приглашении мы можем использовать различные команды GNU parted, такие как help, mklabel, mkfs, mkpart и т. д.
ВАЖНОЕ ПРИМЕЧАНИЕ: GNU Parted немедленно применяет свои модификации. С помощью fdisk вы можете отменить изменения с помощью команды «q». Это очень полезно, если вы допустили ошибку во время операции с разделом. Однако с GNU Parted выхода нет. Поэтому при использовании GNU Parted следует проявлять крайнюю осторожность.
Шаг 3. Теперь мы будем использовать здесь команду print, чтобы отобразить информацию о файловой системе для нашего целевого диска «sdb»:
Таким образом, мы можем подтвердить, что работаем с правильным диском. Вы можете использовать команду mklabel, чтобы дать метку вашему диску.
Шаг 4 . Теперь мы выполним команду mkpart:
Это подскажет нам разные значения:
Partition type? primary/logical? primary Enter primary here.
Partition name? []? Enter some name like Andreyex.
File system type: Use ext4 here.
Start? Enter some value here like 100MB.
End? Enter some value here like 21GB.
Здесь мы используем ТБ для единицы «terabyte». Мы также можем использовать другие единицы и форматы, такие как GB, GiB, kB, KiB и т. д. Теперь снова запустите команду «print», чтобы увидеть детали раздела:

Шаг 5. Простого создания разделов недостаточно, чтобы сделать их функциональными. Чтобы использовать их, вам нужно сначала создать файловую систему на разделе (это процедура, известная как «форматирование» раздела). Теперь выйдите из разделенного приложения.
Отформатируем наш раздел утилитой mkfs. Мы также можем использовать mke4fs для этой цели:
Здесь /dev/sdb1 — это блочное устройство в нашем случае.
В приведенной выше команде block_device — это раздел, в котором будет храниться файловая система Ext4, которая будет создана на следующих шагах.
Шаг 6. На этом шаге мы создадим точку монтирования файловой системы, на которую будет монтироваться:
Теперь смонтируйте файловую систему в указанной выше точке монтирования:
Проверьте вышеуказанные шаги с помощью команды df :
Шаг 7 . Наконец, измените файл fstab для постоянного монтирования новой файловой системы:
Введите следующее содержимое здесь, в этом файле:
Вывод
В этой статье мы узнали, как создать раздел EXT4 в Linux. Хорошей практикой является планирование того, как вы будете разбивать жесткий диск на разделы, прежде чем устанавливать на него Linux. Несовершенный первоначальный дизайн разделов может стать проблемой, когда вы исчерпаете пространство в одном разделе, когда в другом есть много свободного места.
Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.
2 Создание новой файловой системы
Для того, чтобы использовать диск, необходимо создать на нём файловую систему, т.е. отформатировать его. Для этой цели используется команда newfs. Данная команда создаёт на диске файловую систему UFS. Как правило достаточно указать имя файла устройства в качестве параметра данной команды, но возможно, также, указывать различные параметры файловой системы.
Для создания файловой системы FAT можно использовать команду newfs_msdos: newfs_msdos [-F FAT][-L метка][-c разм-класт][-f формат] устройство
Параметры имеют следующее значение:
-F определяет тип FAT (12, 16, 32).
-L задаёт метку диска.
-c определяет размер кластера в секторах.
-f определяет формат гибкого диска. Возможные значения: 360, 720, 1200, 1440, 2880.
Для низкоуровнего форматирования гибких дисков используется команда fdformat. Как правило, в качестве параметра достаточно указать имя файла устройства.
3 Получение дополнительной информации о файловых системах
Для того, чтобы получить информацию о свободном и используемом месте на различных дисках можно воспользоваться командой df. Для измененения формата вывода команды можно использовать ключи -h, -k, -m.
Нередко требуется определить размер занимаемый определённым каталогом. В таких случаях используется команда du: du [-I маска][-a|-s][-c][-h|-k][-x] файл.
Параметры имеют следующее значение:
-I игнорировать файлы соответствующие маске.
-a вывести запись для каждого файла в иерархии.
-s вывести записи только для файлов и каталогов заданных в качестве аргументов.
-c вывести общий итог.
-h вывести размер в удобном для человека формате.
-k вывести размер в килобайтах.
-x не выходить за пределы одной файловой системы.
Задание 4: Выведите в файл отчета сведения о степени использования разделов жесткого диска. Выведите в файл отчета сведения о размере Вашего домашнего каталога. Размер должен быть указан в килобайтах или мегабайтах. Выведите, также, сведения о размере корневого каталога, при этом не выходите за пределы файловой системы, на которой находится корневой каталог
Лабораторная работа №7.
Универсальный загрузчик GRUB
Загрузчик GNU GRUB разрабатывался для загрузки ОС, соответствующих стандарту Multiboot. GRUB был разработан так, чтобы уметь загружать: Linux, FreeBSD, OpenBSD, NetBSD и через вызов вторичного загрузчика — MS DOS, MS Windows NT, OS/2.
Особенностью GRUB является понимание форматов нескольких файловых систем (BSD FFS, FAT16, FAT32, Minix fs, ext2fs, ReiserFS, JFS, XFS, VSTa fs и, на всякий случай, номера блоков) и ядер (a.out, различные варианты ELF), что позволяет записывать в конфигурацию загрузчика имена файлов вместо номеров блоков. Позволяет использовать при загрузке меню (читается из конфигурационного файла или встраивается в тело загрузчика) или командный интерфейс. Меню можно редактировать в момент загрузки.
Файлы читаются с флоппи, жёсткого диска или CD средствами BIOS со всеми вытекающими ограничениями и неприятностями типа путаницей со способом трансляции адресов блоков и нумерацией дисков. Однако, может переключать диск в режим LBA, если имеется такая возможность.
Имеется возможность загрузки по сети (TFTP, BOOTP, DHCP, RARP) и использования терминала (RS-232). Ещё он умеет пользоваться Etherboot и PXE ROM, но в комплект обычной поставки (RH) эти компоненты не входят.
Есть средства парольной защиты (команды password и lock), но в наше время загрузочных носителей — это ненадёжная защита.
GRUB состоит из 3 частей:
stage1 — 512 байт, обычно размещается в MBR; ничего про файлы не знает, имеет вшитый адрес первого блока stage1_5 или stage2 (размер и адреса остальных интервалов хранятся в этом первом блоке); в эти же 512 байт умещается таблица разделов, BPB и некоторые константы, так что размер программы невелик
stage1_5 — отдельный модуль для каждого типа файловой системы; ищет и загружает stage2; может находиться в файловой системе или вне её (между MBR и первым разделом или в специально зарезервированном месте FFS или ReiserFS)
stage2 — основной модуль GRUB, обеспечивающий работу с меню и командной строкой; имеет вшитый флажок LBA, имя конфигурационного файла и прямо сюда в момент загрузки может записываться номер выбранной из меню строки
Имена устройств и файлов
Имя устройства заключается в круглые скобки и начинается с указания типа устройства (fd, hd, cd, nd) за которым идёт номер устройства. Устройства нумеруются с нуля, порядок определяется BIOS (в частности, ATA и SCSI диски не различаются). Если устройство разбито на разделы и необходимо указать конкретный раздел вместо всего диска, то далее необходимо после запятой указать номер раздела (нумеруются с нуля, первый расширенный раздел имеет номер 4), например, первый расширенный раздел первого диска:
Имя файла записывается сразу после имени устройства (если имя устройства опущено, то подразумевается «корневое» устройство; задаётся командой root), в обычном POSIX синтаксисе, начиная от корневого слеша (/).
Если же GRUB ничего не знает про используемую файловую систему, то расположение файла можно задать с помощью списка через запятую интервалов блоков (512 байт) в виде: смещение+число-блоков. Если смещение первого интервала опущено, то подразумевается число 0. Если имя устройства опущено, то подразумевается «корневое» устройство. Самое распространённое использование — загрузка вторичного загрузчика размером 512 байт:
Командный интерфейс
GRUB переходит после загрузки в режим командного интерфейса, если не находит конфигурационный файл или если пользователь переводит его явно (команда c в режиме меню). Режим ввода команды напоминает bash, те же клавиши редактирования строки (включая историю команд и авто дополнение команд и имён дисков и файлов), немедленное исполнение после нажатия клавиши «Enter». Команды:
boot (запустить загруженное ядро или вторичный загрузчик)
chainloader [—force] имя-файла (загрузить в память вторичный загрузчик)
help [—all] [шаблон]
hide имя-раздела (устанавливает флаг «hidden» в таблице раздела, чтобы не пугать DOS несколькими первичными разделами)
initrd имя-файла (загрузить initrd — RAM диск для Linux)
kernel [—type=netbsd|freebsd|openbsd|linux|biglinux|multiboot] [—no-mem-option] имя-файла параметр . (загрузить ядро в память; остальные параметры передаются ядру; —no-mem-option запрещает передавать ядру параметр mem=. генерированный GRUB)
makeactive (взвести флаг активности для корневого раздела; требуется для DOS)
map в из (позволяет отобразить исходное устройство в результирующее; требуется для работы некоторых вторичных загрузчиков (DOS), умеющих загружаться только с первого диска)
module имя-файла параметр . (загрузить модуль для ядра стандарта Multiboot)
modulenounzip имя-файла параметр . (загрузить модуль для ядра стандарта Multiboot без расширения)
partnew имя-раздела тип начальный-сектор число-секторов (создать раздел)
parttype имя-раздела тип (изменить тип раздела)
root имя-устройства-или-раздела (считать указанное устройство «корневым», определить размер раздела)
rootnoverify имя-устройства-или-раздела (считать указанное устройство «корневым», не пытаться работать с разделом)
uppermem килобайт (принудительно назначить размер верхней памяти)
GRUB может самостоятельно загрузить ядро ОС или загружить вторичный загрузчик и передать ему управление. В первом случае типовой набор команд выглядит так:
kernel /vmlinuz root=/dev/hda1 .
inird /initrd.img
rootnoverify (hd0,0)
makeactive .
chainloader +1
Команды управления интерфейсом и процессом:
color цвет/фон [цвет-выделенного/фон] (имена цветов достались от CGA IMHO 😉
configfile имя-файла (загрузить конфигурационный файл и интерпретировать его)
halt [—no-apm] (остановить компьютер)
pager [on | off] (делать ли паузы между экранами при большом выводе)
pause текст-сообщения (вывести текст и ждать нажатия кнопки Any)
savedefault (сделанный из меню выбор становится выбором по умолчанию; прописывается в тело stage2; интересно — будет ли работать при загрузке с CD 😉
setkey [в из] (переназначение клавиши)
splashimage имя-файла (используется в качестве фоновой картинки; xpm 640×480, 14 цветов, сжатый gzip)
blocklist имя-файла (выдать список интервалов адресов блоков, занимаемых файлом)
cmp имя-файла-1 имя-файла-2
debug (выводить отладочные сообщения)
displayapm (вывести информацию об APM BIOS)
displaymem (вывести карту памяти)
find имя-файла (искать указанное абсолютное имя файла на всех доступных разделах)
fstest (включить отладочную печать о файловых операциях)
geometry имя-устройства [C H S] (посмотреть, что BIOS думает о геометрии диска; при работе в рамках ОС можно установить геометрию для использования в GRUB)
impsprobe (попытаться включить процессоры согласно Intel Multiprocessor Specification 1.1 или 1.4)
ioprobe имя-устройства (вывести адреса портов ввода/вывода данного устройства)
testload имя-файла (файл читается различными способами, чтобы проверить возможность чтения файлов)
testvbe режим (переключить видеокарту в указанный режим и запустить мультфильм)
vbeprobe (вывести список имеющихся видеорежимов VESA BIOS EXTENSION)
Команды для установки GRUB:
device имя-устройства-GRUB имя-устройства-ОС (только при работе в рамках ОС; задаёт соответствие между именем устройства в понимании GRUB и ОС
embed имя-файла устройство-или-раздел (встроить stage1_5 из файла сразу после MBR или область загрузки файловой системы FFS или ReiserFS)
install . (установка GRUB на диск: модификация содержимого stage1 и stage2 в соответсвии с указанными адресами, именами и пр.)
quit (только при работе в рамках ОС)
setup [—force-lba] [—stage2=имя-файла] [—prefix=каталог-с-источниками] имя-раздела [имя-раздела-с-источниками] (оболочка для install; установка GRUB на диск; по умолчанию источники ищутся на корневом разделе в каталогах /boot/grub и /grub; при установке на диск пытается встроить stage1_5 вне файловой системы)
Команды для загрузки по сети (после определения сетевых параметров можно использовать сетевой диск — (nd) — для загрузки файлов по TFTP; интересно GRUB знает про все на свете сетевые карточки?):
bootp (запрашивает IP адрес компьютера и прочие параметры у BOOTP сервера)
dhcp (запрашивает IP адрес компьютера и прочие параметры у DHCP сервера)
rarp (запрашивает IP адрес компьютера и прочие параметры у RARP сервера)
ifconfig —address=наш-адрес —server=адрес-TFTF-сервера —gateway=адрес-шлюза —mask=сетевая-маска (явное задание сетевых параметров)
Команды для работы с терминалом по RS-232:
serial [—unit=номер-последовательного-порта] [—port=UART-I/O-порт] [—speed=бод] [—word=число-бит-данных] [—stop=число-стоповых-бит] [—parity=no|odd|even] (параметры по умолчанию — 0 (т.е. COM1), 9600, 8, 1, no; вывод на теринал начинается по команде terminal)
terminal [—dumb] [—no-echo] [—no-edit] [—timeout=секунд] [—lines=число-строк] [—silent] [console] [serial] (задаёт тип устройства общения — через PC консоль или последовательный терминал; определяется явно или где первым нажмут кнопку или первое в списке по истечению времени ожидания; под последовательным терминалом подразумевается VT100, если не указано —dumb; —silent запрещает вывод приветствия до первого нажатия кнопки — например, если у вас вообще нет терминала)
terminfo . (позволяет описать особенности терминала; есть утилита grub-terminfo)
Описание меню
GRUB переходит после загрузки в режим работы с меню, если находит конфигурационный файл. Команды работы с меню описаны на экране (перемещение по меню, выбор текущей секции, переход в командный режим, редактирование меню).
Меню создаётся из конфигурационного файла grub.conf в загрузочном каталоге (/grub или /boot/grub) в момент загрузки. Конфигурационный файл может содержать любые команды командного интерфейса GRUB и некоторые дополнительные. Комментарии начинаются с символа ‘#’. Файл делится на секции, разделяемые командой title. Секция до первой команды title задаёт общие параметры, в частности секцию по умолчанию и описание интерфейса. Каждая команда title задаёт имя секции, которое будет высвечиваться на экране в момент загрузки. При выборе данной секции выполняются составляющие её команды. Указывать команду boot в конце секции необязательно — она подразумевается.
Команды, задающие общие параметры:
timeout секунд (по истечению указанного времени выполняется секция, указанная в default или секция 0, если default не использована)
default номер-секции (какую секцию выполнять по умолчанию по истечению интервала времени; нумеруются с нуля; можно указать ключевое слово «saved» — выполняется секция, номер которой сохранён командой savedefault)
fallback номер-секции (какую секцию выполнять, если default выполнить не удалось; нумеруются с нуля)
hiddenmenu (не выводить меню на экран; его всё же можно вызвать нажав ESC)
password [-md5] пароль-или-хеш [имя-нового-конфигурационного-файла] (md5 — такой же алгоритм как в /etc/shadow; есть утилита grub-md5-crypt; блокирует интерактивное управление до ввода пароля, если указан новый файл конфигурации, то он загружается и загрузчик начинает с начала)
команды, общие с командным интерфейсом: bootp, color, device, dhcp, hide, ifconfig, pager, partnew, parttype, password, rarp, srial, setkey, splashimage, terminal, terminfo, unhide
Команды, которые могут входить в секцию:
lock (должна идти сразу за title; блокирует использование секции, пока не будет введён пароль, заданный командой password)
password [-md5] пароль-или-хеш (md5 — такой же алгоритм как в /etc/shadow; определяет пароль для использования секции)
color цвет/фон [цвет-выделенного/фон] (имена цветов достались от CGA IMHO 😉
команды командного интерфейса: blocklist, boot, cat, chainloader, cmp, configfile, debug, displayapm, displaymem, embed, find, fstest, geometry, halt, help, impsprobe, initrd, install, ioprobe, kernel, makeactive, map, md5crypt, module, moduleunzip, pause, quit, reboot, reed, root, rootnoverify, savedefault, setup, testload, testvbe, uppermem, vbeprobe
Установка GRUB
Скорее всего, что GRUB будет установлен в MBR во время установки Linux, но иногда приходится его восстанавливать или перемещать на другое место. Для этого необходимо иметь установленным пакет grub (/boot/grub: stage1, *stage1_5, stage2). stage1 — это 512 байт, помещаемые обычно в MBR. Кроме программы загрузки stage1_5 или stage2 в них помещается таблица разделов и прочая информация. Адрес загрузчика следующего этапа «впечатывается» в тело stage1 в виде адресов блоков, так что о файловых системах он ничего не знает и после смены адреса stage1_5 и stage2 его надо модифицировать и записывать заново.
Установка GRUB на флоппи:
dd if=stage1 of=/dev/fd0 bs=512 count=1
dd if=stage2 of=/dev/fd0 bs=512 seek=1
Установка GRUB на диск после загрузки GRUB с флоппи (этот метод гарантирует правильную нумерацию дисков):
# сделать корневым раздел, содержащий каталог boot
grub > root (hd0,0)
# запись stage1 в MBR
grub > setup (hd0)
Можно установить GRUB на диск без изготовления флоппи непосредственно из текущей ОС с помощью скрипта grub-install, но при этом есть риск ошибиться с номером устройства (файл device.map):
grub-install /dev/hda
Восстановление загрузчика (загрузка с CD-ROM в режиме rescue, корневая файловая система вместе с /boot на /dev/hda1):
mkdir /mnt/hard
mount -t ext3 /dev/hda1 /mnt/hard
chroot /mnt/hard
/sbin/grub —no-floppy
device (hd0) /dev/hda
Установка GRUB на CD (создание и запись ISO9660 в Linux, формат El Torito без эмуляции):
mkdir grubiso
mkdir -p grubiso/boot/grub
cp stage2_eltorito grubiso/boot/grub
mkisofs -R -b boot/grub/stage2_eltorito -no-emul-boot \
-boot-load-size 4 -boot-info-table -o /tmp/grub.iso grubiso
запись /tmp/grub.iso на CD
После загрузки с этого CD мы попадаем в командный режим GRUB. Файлы, записанные на CD дополнительно доступны с указанием устройства (cd). Этим можно воспользоваться для записи на CD конфигурационного файла, ядра Linux и initrd. Например, создадим конфигурационный файл grubiso/boot/grub/grub.conf:
title chainloader hd0
rootnoverify (hd0)
chainloader +1
title chainloader hd0,0
rootnoverify (hd0,0)
chainloader +1
title CD CentOS 4.0 (2.6.9-5.0.3.EL)
kernel /boot/vmlinuz-2.6.9-5.0.3.EL ro root=/dev/hda3
initrd /boot/initrd-2.6.9-5.0.3.EL.img
title CD Fedora Core 3 original (2.6.9-1.667)
kernel /boot/vmlinuz-2.6.9-1.667 ro root=LABEL=/ rhgb quiet
initrd /boot/initrd-2.6.9-1.667.img
title CD Fedora Core 3 upgrade (2.6.10-1.770_FC3)
kernel /boot/vmlinuz-2.6.10-1.770_FC3 ro root=LABEL=/ rhgb quiet
initrd /boot/initrd-2.6.10-1.770_FC3.img
Все упомянутые файлы необходимо скопировать в grubiso/boot/, создать образ ISO9660 и записать на CD. Получившийся CD (его необходимо дополнить строчками меню для всех вариантов Linux в сети предприятия) можно использовать как «универсальный» аварийный загрузчик. Например, если глючный BIOS компьютера не умеет работать с большими дисками, его приходится загружать с CD.
Последовательность загрузки (x86)
инициализация контроллера RAM
декомпрессия BIOS из флеш в RAM
защита от записи захваченного куска и передача туда управления
обход периферии и установка дополнительных модулей BIOS в ROM (VGA, SCSI)
POST и инициализация поддерживаемых BIOS устройств
проверка устройств, указанных как пригодных для загрузки, на наличие «магического» слова (про загрузку с CD-ROM см. описание спецификации El Torito)
загрузка загрузочного сектора (< 512 байт) в память и передача ему управления; если загрузка с жёсткого диска, то загрузочный сектор лежит в MBR (первом секторе, Master Boot Record) главного (master) жёсткого диска на первой шине ATA
первоначальный загрузчик находит и загружает программу загрузки 2 этапа (stage 2) и передаёт ей управление (GRUB, LILO, SYSLINUX); используется BIOS API; обычное место загрузчика 2 этапа — /boot/
загрузчик 2 этапа выбирает, находит и загружает ядро и RAM диск (initrd) в память; GRUB читает конфигурацию из /boot/grub/grub.conf; конфигурация для LILO хранится в MBR; GRUB и LILO позволяют вывести список возможных загружаемых систем на экран и выбрать нужную с помощью клавиатуры; GRUB позволяет изменить параметры загрузки (корневая файловая система, ядро, RAM диск, параметры ядра) с помощью текстового редактора; используется BIOS API; RAM диск содержит образ файловой системы с модулями (драйверами) устройств, необходимыми для монтирования корневой файловой системы; в случае со встроенным Linux RAM диск содержит всю систему
ядро повторно обходит и инициализирует периферийные устройства, для которых есть встроенные драйвера
ядро монтирует RAM диск (предварительно разжав) и загружает с него необходимые модули, инициализирует соответствующие устройства
если необходимо, то ядро инициализирует LVM и программный RAID
ядро размонтирует RAM диск и освобождает занимаемую им память
ядро монтирует корневую файловую систему в режиме «только чтение»; в процессе дальнейшей работы ядро загружает дополнительные модули с корневой файловой системы
запускается процесс /sbin/init (далее описывается загрузка в стиле System V)
init разбирает конфигурационный файл /etc/inittab для определения дальнейших действий; если при загрузке указан уровень s (или S), то inittab не читается, а система переходит в однопользовательский режим (shell на /dev/console с правами root); строка с действием initdefaultопределяет «уровень выполнения» (run level) по умолчанию, т.е. режим работы системы (однопользовательская, многопользовательская, с доступом в сеть, с графическим окружением и т.д.); строка с действиемsysinit(/etc/rc.d/rc.sysinit) определяет скрипт инициализации;
init выполняет скрипт /etc/rc.d/rc.sysinit (проверка и монтирование остальных файловых систем, swap и т.д.)
в «нормальном» /etc/inittab при переходе на любой уровень запускается скрипт /etc/rc.d/rc с указанием уровня в качестве параметра; данный скрипт запускает скрипты /etc/rcуровень.d/K* (в алфавитном порядке) с параметром stop и скрипты /etc/rcуровень.d/S* с параметром start; в конце запускается /etc/rc.d/rc.local; по традиции скрипты являются символьными ссылками на скрипты в директории /etc/init.d/; вместо /etc/init.d/ может использоваться /etc/rc.d/init.d/; вместо /etc/rcуровень.d/ может использоваться /etc/rc.d/rcуровень.d; реальность несколько сложнее
В различных дистрибутивах и различных ситуациях могут использоваться следующие загрузчики:
LILO и GRUB работают через BIOS, а большинство BIOS позволяют доступ только к первым двум IDE-дискам (считая ATAPI CD-ROM) в пределах первых 1023 цилиндров. Так что каталог (или раздел) /boot, в котором хранятся как файлы самого загрузчика, так и загружаемые файлы (ядро, initrd) должен удовлетворять данным ограничениям.
Уровни выполнения и /etc/inittab
Формат файла /etc/inittab (комментарии начинаются с символа ‘#’):
идентификатор — уникальная последовательность от 1 до 4 символов (в старых версиях до 2); для getty и ему подобных идентификатор д.б. номером линии tty
перечень-уровней-выполнения — перечисление (без пробела) уровней выполнения, для которых выполняется указанное действие (от 0 до 6 и от A до C, s, S); для sysinit, boot и bootwait игнорируется; при смене уровня всем процессам, не специфицированным для этого уровня, посылается сигнал SIGTERM, а через 5 секунд (интервал задаётся при вызове telinit -t) сигнал SIGKILL (init предполагает, что процесс не сменил группу процессов, в которой он его запустил); пустой список означает «для всех»
действие (по-моему, тут перемешанны условия и действия)
respawn (процесс по завершении запускается вновь и вновь; после 10 перезапусков за 2 минуты делается пауза 5 минут)
wait (процесс запускается один раз при переходе на уровень, init ждёт его завершения)
once (процесс запускается один раз при переходе на уровень)
boot (процесс запускается при загрузке системы)
bootwait (процесс запускается при загрузке системы, init ждёт его завершения)
off (ничего не делать)
ondemand (процесс запускается при вызове данного уровня выполнения (от A до C), но смены уровня не происходит)
initdefault (на какой уровень выполнения переходить после загрузки; если не указан, то будет спрашивать на консоли)
sysinit (процесс запускается при загрузке до boot и bootwait)
powerwait (вызывается при пропадании питания, например, программой слежения за UPS, SIGPWR (подробности в /etc/powerstatus: FAIL), init ждёт его завершения)
powerfail (вызывается при пропадании питания, например, программой слежения за UPS, SIGPWR (подробности в /etc/powerstatus: FAIL), init не ждёт его завершения)
powerokwait (вызывается при возобновлении питания, SIGPWR (подробности в /etc/powerstatus: OK), init ждёт его завершения)
powerfailnow (вызывается непосредственно перед исчерпанием аккумуляторов UPS, SIGPWR (подробности в /etc/powerstatus: LOW))
ctrlaltdel (вызывается при получении сигнала SIGINT от ядра)
kbrequest (ядро посылает SIGWINCH при нажатии определённой комбинации клавиш)
процесс — имя файла (‘+’ перед символом отменяет запись utmp и wtmp), программа или скрипт
При запуске процесса устанавливаются переменные окружения: PATH, INIT_VERSION, RUNLEVEL, PREVLEVEL, CONSOLE.
Уровни выполнения для Red Hat Linux:
0: halt (неинтереактивный уровень)
1: single user (одна виртуальная консоль)
2: multiuser (6 виртуальных консолей)
3: multiuser + NFS (6 виртуальных консолей)
4: не используется
5: X11 (6 виртуальных консолей и xdm, gdm или kdm в зависимости от /etc/X11/prefdm)
6: reboot (неинтереактивный уровень)
Переход на другой уровень можно сделать с помощью программы telinit или прямо через /dev/initctl. telinit с указанием уровня q (Q) заставляет init перечитать /etc/inittab. Использование SIGPWR и /etc/powerstatus признано устаревшим.
24. Работа с файловыми системами

Кое-какое представление о файловых системах у нас сложилось, пора уже приступать к делу. Для начала, давайте запишем файловую систему. В этом нам поможет утилита mkfs. Всякие настройки по умолчанию для файловой системы ext4 лежат в файле /etc/mke2fs.conf:
Тут у нас размеры блоков, инод и всё такое.

И всё что нам остаётся сделать для создания файловой системы – написать команду mkfs точка, желаемый тип файловой системы, а потом раздел или диск:
Программа создаст файловую систему и покажет нам информацию о ней – сколько блоков какого объёма поместилось в файловой системе, какое количество инод, идентификатор файловой системы, где сохранились бэкапы суперблока — того самого, где хранятся метаданные самой файловой системы.

Всякие детали о файловой системе можно посмотреть с помощью tune2fs и указанием раздела с нужной файловой системой:
Но в большинстве случаев с этим всем не нужно заморачиваться. По умолчанию всё настроено так, чтобы работать из коробки для большинства случаев. А если файловая система вам нужна для каких-то более серьёзных задач, то нужно изучать документацию. Пойдём дальше. Ну, есть у нас файловая система, а что с ней делать? Её нужно куда-то прицепить, точнее, примонтировать в какую-то директорию. Собственно, всё зависит от ваших задач. Задачи могут быть разные – скажем, отделить файлы пользователей от системы, чтобы можно было переустановить операционную систему, не стерев ваши файлы. Тут нужно отделить директорию /home. Или, допустим, вы хотите на сервере отделить файлы с данными от файлов операционной системы. Или, например, отделить директорию с логами, чтобы в случае какой-нибудь проблемы они внезапно не забили весь диск логами, от чего система вообще может перестать нормально работать. И это только ряд задач, на деле причин может быть много. Но, давайте, например, вынесем файлы пользователей на новую файловую систему.
Если я возьму и просто примонтирую новую файловую систему в /home, то я перекрою существующие файлы пользователей и вместо них будет чистая файловая система и директория /home окажется пустой. Это не дело, нужно сначала перенести файлы пользователей на новую файловую систему. А это не такая простая задача – если я сейчас сижу от имени пользователя, пусть даже не видно, но я работаю с файлами в домашней директории своего пользователя. Т.е. графический интерфейс подгрузил всякие файлы настроек и всячески использует мою домашнюю директорию, например, браузер может писать кэш, баш сохраняет историю и т.п. А пока файлы используются, перемещать их не стоит – можно случайно повредить их. Поэтому нужно завершить все процессы, использующие директорию /home и все поддиректории.

Во первых, для этого мне нужно разлогиниться. Но как мне тогда работать? Правильно, через виртуальный терминал. Нажимаем правый Ctrl+F3 (это зависит от гипервизора, на реальном железе Alt+Ctrl+F3) и заходим в виртуальный терминал из под рута. Дальше убеждаемся, что никакой процесс не использует файлы в директории /home, в этом нам поможет утилита lsof, показывающая открытые файлы, с ключом +D, чтобы проверить во всех субдиректориях:
У меня тут пусто, но если у вас какие-то процессы используют файлы, желательно их завершить, вы знаете как.

Дальше стоит проверить размер директории /home – хотя надо было ещё при создании разделов. Для этого используем утилиту du:
Как видите, тут файлов на 140 мегабайт, а наш раздел sdb1 почти на 200:
Хоть тут и хватает места, у меня дальше начинается другой раздел, а значит в будущем я не смогу увеличить размер раздела и файловой системы, по крайней мере без кучи махинаций. Поэтому лучше изначально разделы распределить так, чтобы у каждой файловой системы хватало места с запасом. Но при этом, если нет необходимости, не занимайте всё свободное место на раздел – увеличить раздел и файловую систему всегда можно, если есть свободное место, а вот уменьшить размер файловой системы зачастую проблемно, а на xfs пока вообще нет такой возможности.

Но у меня есть раздел sdc2 на 800 мегабайт:
его и будем использовать. Опять же, нам нужна файловая система:

Теперь мне нужно перенести файлы из директории /home на новую файловую систему. А чтобы это сделать, мне нужно временно примонтировать новую файловую систему. Для таких целей даже есть специальная директория — /mnt. Я просто пишу:
т.е. какую файловую систему монтировать в какую директорию. Чтобы убедиться, что всё сработало, я использую утилиту df:
Самая последняя запись — /dev/sdc2 примонтирован в /mnt.

Окей, пора переносить файлы:
Проверяем, всё ли нормально:
Вроде всё ок – файлы перемещены. Теперь пора отмонтировать новую файловую систему и примонтировать в /home. Чтобы отмонтировать — umount /mnt.

Но прежде чем пойдём дальше, есть ещё одна деталь. То как мы примонтировали сейчас, не означает, что после перезагрузки операционная система также примонтирует. Ей нужно об этом сказать, чтобы в будущем она всегда монтировала sdc2 в /home. Для этого есть файл /etc/fstab:
И в нём нам нужно достоверно компьютеру сказать, какую файловую систему куда нужно монтировать. А так как мы выяснили, что sda sdb и sdc – имена, которые могут меняться, то нельзя указывать их. Вместо них мы можем использовать идентификатор файловой системы. Помните, при создании мы видели такой? И чтоб не искать его, можем воспользоваться утилитой blkid:
Второй столбик – UUID – это наш идентификатор файловой системы. Если мы форматнём эту файловую систему, будет другой UUID.

И теперь нам нужно переписать этот UUID в файл /etc/fstab. Но.. тут же много символов? Хотя… мы же знаем, что у нас в системе куча утилит для работы с текстом. Воспользуемся одной из них – cut. И так, blkid делит столбцы по пробелам, значит пробел наш делитель. При этом, нам нужен второй столбец. Значит:
И мы получили нужную строку. Теперь нужно записать её в файл /etc/fstab. Но прежде чем делать эксперименты с реальными файлами, лучше их забэкапить:
Теперь выполняем команду blkid, но вывод добавляем в fstab:
Тут будьте очень внимательными, обязательно два символа больше, чтобы не перезаписать файл.

Теперь осталось дописать строку:
И так, файловая система указана. Можно ориентироваться на примеры выше. После UUID-а указываем точку монтирования — /home. Количество пробелов не важно. Дальше указываем тип файловой системы – ext4. После этого – опции монтирования. Допустим, чтобы в inode не писалась информация о последнем доступе к файлу – это сильно сократит частоту записи на жёсткий диск – напишем defaults,noatime, через запятую, без пробела. А по умолчанию можно оставить defaults. На самом деле, defaults тут чтобы поле не пустовало, мы могли бы убрать defaults и оставить только noatime, но я решил оставить, чтобы показать пример нескольких опций. По ссылке вы можете найти различные опции монтирования, там же можно найти информацию, что включает в себя defaults. Дальше две цифры. Первая – dump – для создания резервной копии файловой системы. Хотя для работы этого нужна утилита dump, которая сейчас практически не пользуются. Но, в целом, есть такая возможность, и если стоит 1, то будет сниматься дамп, а в большинстве случаев здесь указывается 0 – т.е. без дампа. Вторая цифра – проверка файловой системы.
Во время работы на файловой системе могут накапливаться ошибки, и всякие внештатные ситуации, как, например, при внезапном отключении компьютера, могут создавать ошибки. Да, журналирования частично решает проблемы, но не полностью. Поэтому файловые системы желательно иногда проверять на наличие ошибок и исправлять, для этого есть утилита fsck. Но проверять целостность файловой системы во время работы нельзя, это может её повредить. Её нужно предварительно отмонтировать. Но это не всегда просто – как вы отмонтируете корень, где у вас система? Да и чтобы не заниматься этим вручную, это можно автоматизировать, чтобы при включении компьютера конкретная файловая система проверялась на ошибки и они исправлялись. Тут значение может быть 0 – это не проверять. 1 стоит ставить только для файловой системы, где лежит корень, так как исправление ошибок на нём более приоритетно. Для проверки всех остальных файловых систем можно указать 2. После чего сохраняем и выходим.

И теперь, когда система знает куда монтировать sdc2, можно просто написать:
Теперь можем вернуться к графическому интерфейсу – Ctrl+F1 и залогиниться. Опять напишем df -h и посмотрим, что куда примонтировано. Как видите, файловая система sdc2 примонтирована в директорию /home. И если бы что-то не работало, мы бы просто не смогли залогиниться.
И так, при включении компьютера операционная система смотрит в fstab, видит какую файловую систему куда и как монтировать и делает это. Но что, если файловая система недоступна? Допустим, какие-то проблемы с диском или самой файловой системой, а может опечатка в fstab. В таких случаях операционная система не загружается полностью, а предлагает нам посмотреть и исправить ошибку. Игнорировать проблемы с файловой системой и загрузиться операционная система не может, если это не указано в fstab. Представьте, что на этой файловой системе есть какие-то важные файлы, допустим файлы приложения. И если у нас система запустится, запустит приложение, но оно не увидит свои файлы – приложение может создать кучу проблем. Во избежание такого операционная система не даст запустить всю систему, если ей не удаётся примонтировать какую-то файловую систему.

Давайте воссоздадим такую ситуацию и попытаемся её решить. Для этого давайте испортим запись в fstab:
Добавим здесь перед UUID какие-нибудь буквы, типа мы опечатались, и перезагрузимся:

Как видите, система не смогла запуститься и предложила нам командную строку. Во первых, вводим пароль от пользователя root. Чуть выше командная строка рекомендует посмотреть логи:
Немного полистаем вниз и увидим красную строчку – Failed to mount /home – т.е. не получилось примонтировать /home. Чуть выше написана причина – не найдено устройство.

Но прежде чем исправлять, представим, что дело не в нашей опечатке, а какая-то проблема с файловой системой. Для этого выполним проверку файловой системы с помощью утилиты fsck:
А для файловой системы xfs используется утилита xfs_repair. Сейчас у меня ошибок нет, но если бы были, программа бы о них сказала и предложила бы пути решения.

Также, у многих возникает вопрос – а какие директории стоит выносить на отдельные файловые системы:
Идеальной схемы нету, где-то что-то имеет смысл отделять, а где-то это просто усложняет. Мы разобрали, зачем это для /home. Вскоре мы разберём, зачем это может понадобится для /boot. Какие-то директории, например dev, proc и sys – мы их уже разбирали – в них и так виртуальные файловые системы. В /etc важные для загрузки операционной системы настройки, тот же fstab – и вынести /etc на отдельный раздел очень сложно и бесполезно. /media и /mnt обычно пустые директории, куда временно монтируются всякие флешки и cd диски, поэтому их выносить бессмысленно. В /opt обычно лежит проприетарный софт, на домашних компьютерах его выносить на отдельный раздел обычно не нужно, а на серверах сильно зависит от самого софта – иногда, для удобства, стоит отделять файлы приложения от файлов системы – это позволит легче бэкапить приложение, переносить его на новые системы и т.д. Это в целом касается приложений на серверах, которые могут использовать в качестве директории с данными /opt, /home, а то и отдельную директорию в корне, например /srv. Домашнюю директорию рута — /root – выносить бессмысленно, там обычно ничего примечательного. В /run – еще одна виртуальная файловая система. Про /tmp мы упоминали, тут у нас всякие процессы и пользователи могут создавать временные файлы при работе. И в большинстве случаев имеет смысл вынести /tmp в виртуальную файловую систему – можете почитать по ссылке. Касаемо /usr всё сложно – раньше имело смысл вынести /usr, чтобы сделать его read only – то есть доступным только для чтения. В таких случаях во время обновления или установки программ её перемонтировали для записи, а потом обратно в read only, что позволяло обеспечить безопасность, так как если нет возможности изменить файлы – то всяким вирусам будет посложнее. Но в современных дистрибутивах происходят изменения и вынести /usr если и можно, то всё равно не рекомендуется. А read only можно сделать весь корень, при определённых условиях. В директории /var лежат динамические файлы, которые меняются, например логи, файлы базы данных, сайты и т.п. В этом и суть директории – если вы хотите обезопасить систему и сделать её read only, то директорию, в которой что-то постоянно меняется стоит вынести в отдельную файловую систему. При этом монтировать /var можно с определёнными опциями, например noexec – чтобы нельзя было запускать программы в этой файловой системе. Но тут, конечно, нюансы – у вас тут может лежать сайт в директории /var/www, где может требоваться запускать какие-то файлы сайта. Поэтому имеет смысл выносить не весь /var, а его определённые субдиректории – например, /var/log, где лежат логи. В целом рекомендуется выносить директорию /var/log на отдельную файловую систему, потому что бывают случаи, когда какие-то сервисы начинают внезапно писать очень много логов. И если /var/log вместе с корнем в одной файловой системе, то когда закончится место на файловой системе, начнут появляться проблемы.
Всё это – базовые операции при работе с файловыми системами – мы знаем, как её создать, как её примонтировать, как сделать так, чтобы она монтировалась при включении компьютера. И мы для примера переместили /home на раздел одного из дисков. И, хотя, казалось бы, в целом проделать это всё не сложно, но когда речь идёт о терабайтах данных, все эти махинации могут занять много времени, при этом сервисы, использующие эти данные, будут недоступны для пользователей. Время – это деньги, и пока вы будете перемещать данные на новые диски большего объёма, бизнес будет терять деньги. Поэтому админ должен заранее определить – сколько места понадобится на те или иные файловые системы, какие из них в дальнейшем могут потребовать больше места, какого рода файлы будут храниться – большие или маленькие, в зависимости от этого подкорректировать размеры блоков файловой системы и рассчитать необходимое количество инод. И всё это сделать ещё на этапе установки операционной системы. Но как бы идеально вы не рассчитали, в жизни не всё идёт по плану, поэтому есть более гибкие системы, о которых мы поговорим в следующий раз.
Btrfs (Русский)
Btrfs — это современная файловая система для Linux, использующая принцип «копирование при записи» (CoW), направленная на реализацию дополнительных функций с особым упором на отказоустойчивость, восстановление и простоту администрирования. Совместно разработанная несколькими компаниями, Btrfs лицензирована под GPL и открыта для участия всех желающих.
Подготовка
Для утилит пользовательского пространства установите пакет btrfs-progs , который необходим для базовых операций.
Если вам нужно загрузиться с файловой системы Btrfs (то есть ядро и initramfs находятся на разделе Btrfs), проверьте, имеет ли ваш загрузчик поддержку Btrfs.
Создание файловой системы
Этот раздел демонстрирует, как создать новую файловую систему Btrfs. Также можно выполнить #Преобразование Ext3/4 в Btrfs или сделать #Диск Btrfs без разделов.
Дополнительная информация доступна man-странице mkfs.btrfs(8) .
Файловая система на одном устройстве
Чтобы создать файловую систему Btrfs на разделе /dev/раздел :
Размер узла для метаданных по умолчанию составляет 16 КБ, а размер сектора по умолчанию для данных равен размеру страницы и определяется автоматически. Чтобы использовать больший размер узла для метаданных (он должен быть кратен размеру сектора, допускается до 64 КБ), укажите значение nodesize с помощью опции -n , как показано в этом примере с блоками по 32 КБ:
Файловая система на нескольких устройствах
Можно использовать несколько устройств для создания RAID-массива. Поддерживаются уровни RAID 0, RAID 1, RAID 10, RAID 5 и RAID 6. Начиная с ядра 5.5, поддерживаются RAID1c3 и RAID1c4 для 3- и 4- копий уровня RAID 1. Уровни RAID могут быть настроены отдельно для данных и метаданных с помощью опций -d и -m соответственно. По умолчанию данные имеют одну копию ( single ), а метаданные зеркалируются ( raid1 ). Это похоже на создание конфигурации JBOD, где диски воспринимаются как одна файловая система, но файлы не дублируются. Дополнительная информация о создании Btrfs RAID есть на странице Using Btrfs with Multiple Devices.
В /etc/mkinitcpio.conf необходимо включить либо хук udev , либо хук btrfs , чтобы использовать несколько устройств Btrfs в пуле. Дополнительную информацию смотрите в статье mkinitcpio (Русский)#Доступные хуки.
- Существует возможность добавлять дополнительные устройства в файловую систему с несколькими устройствами после её создания. Дополнительную информацию смотрите в Btrfs wiki.
- Устройства могут быть разных размеров. Однако если один из дисков в конфигурации RAID больше остальных, то дополнительное пространство не будет использоваться.
- Некоторые загрузчики, такие как Syslinux, не поддерживают файловые системы на нескольких устройствах.
- Btrfs не пытается выбирать самое быстрое устройство для чтения, поэтому совместное использование разных типов дисков приводит к нестабильной производительности. [1]
Советы по обслуживанию файловых систем на нескольких устройствах приведены в разделе #RAID.
Настройка файловой системы
Копирование при записи (CoW)
По умолчанию Btrfs постоянно использует копирование при записи (copy-on-write) для всех файлов. Когда выполняется операция записи, новые данные не записываются поверх старых; вместо этого модифицированная копия блока записывается в новое место, а метаданные обновляются, чтобы указать на новое место. Подробности реализации, а также преимущества и недостатки описаны на странице Btrfs Sysadmin Guide.
Отключение CoW
Чтобы отключить копирование при записи для создаваемых файлов в примонтированном подтоме, используйте опцию монтирования nodatacow . Это повлияет только на новые файлы. Для существующих файлов копирование при записи всё равно будет происходить. Опция nodatacow также отключает сжатие. Подробности смотрите в btrfs(5) .
Чтобы отключить копирование при записи для отдельных файлов/каталогов, выполните:
Это отключит копирование при записи для тех операций, в которых существует только одна ссылка на файл. Если ссылок больше одной, например, из-за клонирования файлов / облегчённых клонов или снимков файловой системы, копирование при записи всё равно будет происходить. Начиная с coreutils 9.0, cp пытается создавать облегчённые копии по умолчанию — смотрите cp(1) для более подробной информации.
Сжатие
Btrfs поддерживает прозрачное и автоматическое сжатие. Это уменьшает размер файлов, а также значительно увеличивает срок службы флеш-носителей благодаря уменьшению их износа. Смотрите Fedora:Changes/BtrfsByDefault#Compression, [2] и [3]. Это также может улучшить производительность в одних случаях (например, однопоточные задачи с интенсивным файловым вводом-выводом), но в то же время ухудшить производительность в других случаях (например, многопоточные задачи и/или задачи с нагрузкой на процессор и большим файловым вводом-выводом). Более высокая производительность обычно достигается при использовании самых быстрых алгоритмов сжатия, zstd и lzo, и некоторые бенчмарки предоставляют подробные сравнения.
LZO имеет фиксированный уровень сжатия, в то время как ZLIB и ZSTD имеют диапазон уровней сжатия от 1 (слабое сжатие) до 9 (ZLIB) или 15 (ZSTD)[4]. Изменение уровней по-разному влияет нагрузку процессора и пропускную способность ввода-вывода, поэтому стоит проверять производительность до и после изменения.
Опция монтирования compress=алгоритм[:уровень] позволяет включить сжатие, где алгоритм — это либо zlib , lzo , zstd , либо no (без сжатия). При использовании этой опции btrfs будет проверять, помогает ли сжатие первой порции данных в файле сэкономить место. Если да, то весь файл будет сжат; если нет, то сжатие использоваться не будет. Таким образом, если первая часть записи не уменьшится при сжатии, то весь файл не будет сжат, даже если остальные остальные порции данных сжимаются хорошо. [5]. Это сделано для того, чтобы не заставлять диск ждать начала записи, пока все записываемые данные не будут полностью переданы btrfs и сжаты.
Также можно использовать другую опцию монтирования compress-force=алгоритм[:уровень] , которая заставляет btrfs пропустить проверку сжимаемости первой порции данных и включает автоматическую попытку сжатия для каждого файла. В худшем случае это может привести к (незначительному) бесполезному увеличению загрузки процессора. Однако эмпирическое тестирование на нескольких системах смешанного использования показало значительное улучшение примерно на 10% сжатия диска при использовании compress-force=zstd по сравнению с просто compress=zstd , который также имел 10% сжатие диска.
Будут сжиматься только файлы, созданные или изменённые после добавления опции монтирования.
Чтобы применить сжатие к существующим файлам, используйте команду btrfs filesystem defragment -cалгоритм , где алгоритм — это zlib , lzo или zstd . Например, чтобы сжать всю файловую систему с помощью zstd , выполните следующую команду:
Чтобы включить сжатие при установке Arch на пустой раздел Btrfs, используйте опцию compress при монтировании файловой системы: mount -o compress=zstd /dev/sdxY /mnt/ . Во время настройки свежеустановленной системы добавьте compress=zstd в опции монтирования корневой файловой системы в файле fstab.
- Системы, использующие старые ядра или btrfs-progs без поддержки zstd , могут быть не в состоянии прочитать или восстановить вашу файловую систему, если вы используете эту опцию.
- Поддержка zstd в GRUB появилась в версии 2.04. Убедитесь, что у вас обновлён код загрузчика, установленный в MBR/ESP, запустив grub-install с соответствующими опциями для вашей настройки BIOS/UEFI, поскольку это не выполняется автоматически. Смотрите FS#63235.
Просмотр типов и коэффициентов сжатия
compsize берёт список файлов (или всю файловую систему btrfs) и смотрит используемые типы сжатия и эффективные коэффициенты сжатия. Размер без сжатия может не совпадать с числом, выдаваемым другими программами, такими как du(1) , потому что каждый экстент считается один раз, даже если на него есть несколько ссылок и даже если часть его больше нигде не используется, но ещё не была убрана при сборке мусора. Опция -x ограничивает анализ одной файловой системой, что полезно в ситуациях типа compsize -x / , чтобы предотвратить попытки программы просканировать не-btrfs подкаталоги.
Подтома
В btrfs подтом (subvolume) не является блочным устройством (и не может рассматриваться как устройство); вместо этого можно рассматривать подтом btrfs как пространство имён файлов POSIX. Доступ к этому пространству имён может осуществляться через подтом верхнего уровня, или он может быть смонтирован сам по себе. [6]
Каждая файловая система Btrfs имеет подтом верхнего уровня с идентификатором 5. Он может быть смонтирован как / (по умолчанию), или вместо него может быть смонтирован другой подтом. Подтома можно перемещать в файловой системе, и они идентифицируются скорее по их идентификатору, чем по пути.
Более подробную информацию можно найти по следующим ссылкам:
Создание подтома
Чтобы создать подтом:
Список подтомов
Чтобы просмотреть список текущих подтомов и их идентификаторы:
Удаление подтома
Чтобы удалить подтом:
Начиная с Linux 4.18, можно также удалять подтом как обычный каталог ( rm -r , rmdir ).
Монтирование подтомов
Подтома можно монтировать как разделы файловой системы, используя флаги монтирования subvol=/путь/к/подтому (путь указывается относительно подтома верхнего уровня) или subvolid=objectid . Например, вы можете иметь подтом с именем subvol_root и монтировать его как / . Можно имитировать традиционные разделы файловой системы, создавая различные подтома на верхнем уровне файловой системы и затем монтируя их в соответствующих точках монтирования. Предпочтительнее монтировать, используя subvol=/путь/к/подтому , а не через subvolid, поскольку subvolid может измениться при восстановлении из снимков, что потребует изменения настроек монтирования.
В Btrfs Wiki FAQ описано, какие опции монтирования можно применять для отдельных подтомов.
Полный список опций монтирования, специфичных для btrfs, описан в man-странице btrfs(5) .
Монтирование подтома в качестве корня
Чтобы примонтировать определённый подтом как корневую файловую систему, добавьте его в параметры ядра: rootflags=subvol=/путь/к/подтому . Отредактируйте корневую точку монтирования в /etc/fstab , добавив опцию монтирования subvol= . Также можно указать id подтома ( rootflags=subvolid=objectid как параметр ядра и subvolid=objectid как опция монтирования в /etc/fstab ). Лучше использовать subvol=/путь/к/подтому , так как subvolid может меняться при восстановлении из снимков, что потребует изменения настроек монтирования, иначе система не сможет загрузиться.
Изменение подтома по умолчанию
Если опция монтирования subvol= не указана, будет монтироваться подтом по умолчанию. Чтобы изменить подтом, используемый по умолчанию, выполните команду:
Чтобы найти subvolume-id, посмотрите #Список подтомов.
Изменение подтома по умолчанию с помощью btrfs subvolume set-default сделает верхний уровень файловой системы недоступным, хотя вы всё равно сможете примонтировать его с помощью опций монтирования subvol=/ или subvolid=5 [7].
Квоты
Поддержка квот в Btrfs реализована на уровне подтомов с помощью групп квот, или qgroup: по умолчанию каждому подтому назначается группа квот в виде 0/subvolume_id. Однако при желании можно создать группу квот с любым номером.
Для использования групп квот необходимо сначала включить квоты командой
С этого момента вновь созданные подтома будут контролироваться этими группами. Чтобы ретроспективно включить их для уже существующих подтомов, включите квоты как обычно, а затем создайте группу квот (qgroup) для каждого из этих подтомов, используя их subvolume_id, после чего просканируйте их:
Группы квот в Btrfs образуют древовидную иерархию, в которой группы квот прикреплены к подтомам. Ограничения на размер устанавливаются для каждой группы квот и применяются при достижении любого предела в дереве, содержащем данный подтом.
Ограничения на группах квот могут применяться либо к общему использованию данных, либо к использованию данных, которые не используются в других подтомах (уникальных данных, unshared), либо к использованию сжатых данных, либо к обоим. Копирование и удаление файлов могут влиять на лимиты, так как в других группах квот может измениться размер уникальных данных, если после удаления осталась единственная копия. Например, у свежего снимка почти все блоки общие с исходным подтомом, запись новых данных в любой из подтомов будет увеличивать размер уникальных данных в нём, и удаление общих данных в одном подтоме тоже увеличит размер уникальных данных в другом подтоме.
Чтобы применить ограничение к группе квот, используйте команду btrfs qgroup limit . В зависимости от использования вы можете использовать либо общий лимит, либо лимит на уникальные данные ( -e ), либо лимит на сжатые данные ( -c ). Чтобы посмотреть использование и лимиты для заданного пути в файловой системе, используйте
Интервал записи на диск
Периодичность записи данных на диск диктуется самой Btrfs и общесистемными настройками. По умолчанию Btrfs устанавливает интервал между контрольными точками в 30 секунд, через который новые данные записываются на диск. Это можно изменить, добавив опцию монтирования commit в /etc/fstab для раздела btrfs.
Общесистемные настройки также влияют на этот интервал. Это включает в себя файлы в /proc/sys/vm/* и выходит за рамки данной вики-статьи. Документация ядра о них доступна по адресу https://docs.kernel.org/admin-guide/sysctl/vm.html.
SSD TRIM
Файловая система Btrfs может освобождать неиспользуемые блоки с SSD диска, поддерживающего команду TRIM. С версии ядра 5.6 имеется поддержка асинхронного discard, что можно включить опцией монтирования discard=async . Незанятые экстенты не освобождаются сразу, а группируются и освобождаются позже в отдельном потоке, что улучшает задержки при записи на диск.
Дополнительная информация о включении и использовании TRIM есть в разделе Твердотельные накопители#TRIM.
Использование
Файл подкачки
Использование файлов подкачки на Btrfs поддерживаются с Linux 5.0.[8]. Правильный способ инициализации файла подкачки заключается в том, чтобы сначала создать подтом без снимков для размещения файла, а затем установить атрибут No_COW на весь каталог с помощью chattr.
С этого момента любой новый файл, созданный внутри подтома для подкачки, будет иметь установленный атрибут No_COW .
Затем выполните шаги, описанные в разделе Файл подкачки#Создание файла подкачки. Настройка гибернации для файла подкачки описана в разделе Ждущий и спящий режимы#Гибернация в файл подкачки на Btrfs.
Отображение занятого/свободного места
Стандартные пользовательские инструменты linux, такие как df(1) , будут неточно отображать свободное пространство на разделе Btrfs. Рекомендуется использовать btrfs filesystem usage для чтения информации о разделах Btrfs. Например, для получения полной статистики:
В качестве альтернативы, btrfs filesystem df позволяет быстро проверить использование выделенного пространства без необходимости запуска от имени root:
Смотрите [9] для более подробной информации.
Те же ограничения относятся к инструментам, анализирующим использование места в подмножестве файловой системы, таким как du(1) или ncdu(1) , поскольку они не учитывают ссылки, снимки и сжатие. Вместо них используйте альтернативы с подержкой btrfs — btdu AUR и compsize.
Дефрагментация
Btrfs поддерживает онлайн-дефрагментацию, которую можно включить опцией монтирования autodefrag , смотрите btrfs(5) § MOUNT OPTIONS . Чтобы вручную запустить дефрагментацию корневой файловой системы, используйте:
Использование этой команды без ключа -r приведёт к дефрагментации только метаданных, хранящихся в указанном подтоме. Это позволяет дефрагментировать один файл, просто указав путь.
#Файловая система на нескольких устройствах может использовать «RAID». Примечательными особенностями, которые отличают btrfs RAID от mdadm, являются самовосстанавливающиеся избыточные массивы и онлайн-балансировка. Дополнительная информация доступна на вики-странице Btrfs. На странице сисадмина Btrfs также есть раздел с более подробной технической информацией.
Scrub
В Btrfs Wiki Glossary говорится, что Btrfs scrub — это «онлайн-инструмент проверки файловой системы. Считывает все данные и метаданные в файловой системе, использует контрольные суммы и дубликаты копий из RAID-хранилища для выявления и восстановления повреждённых данных».
Запуск вручную
Чтобы запустить scrub в фоне:
Чтобы проверить состояние scrub, работающего в фоне:
Запуск с помощью службы или таймера
Пакет btrfs-progs предоставляет юнит btrfs-scrub@.timer , запускающий ежемесячную проверку указанной точки монтирования. Включите таймер, указав экранированный путь, например, btrfs-scrub@-.timer для / и btrfs-scrub@home.timer для /home . Вы можете использовать systemd-escape -p /путь/к/точке/монтирования для экранирования пути, подробности смотрите в systemd-escape(1) .
Вы также можете запустить scrub через службу btrfs-scrub@.service (тоже указав экранированный путь). Преимущество этого способа перед простым запуском команды btrfs scrub (от имени root) в том, что результаты проверки будут записаны в журнал systemd.
На больших NVMe-дисках с недостаточным охлаждением (например, в ноутбуке) scrub может считывать данные достаточно быстро и долго, чтобы диск сильно нагрелся. Если вы запускаете scrub с помощью systemd, вы можете легко ограничить скорость проверки с помощью опции IOReadBandwidthMax , описанной в systemd.resource-control(5) , используя drop-in файл.
Балансировка
«Балансировка повторно пропускает все данные в файловой системе через аллокатор. В первую очередь он предназначен для перебалансировки данных в файловой системе между устройствами, когда устройство добавляется или удаляется. Балансировка восстанавливает недостающие копии для избыточных уровней RAID, если устройство вышло из строя». [12] [устаревшая ссылка 2023-04-22 ⓘ] Смотрите Btrfs FAQ.
В файловой системе с одним устройством балансировка может быть также полезна для (временного) уменьшения количества выделенных, но неиспользуемых (мета)чанков данных. Иногда это необходимо для устранения проблем «filesystem full».
Снимки
«Снимок (снапшот) — это просто подтом, который имеет общие данные (и метаданные) с другим подтомом, используя возможности COW в btrfs». (Btrfs Wiki SysadminGuide)
Для создания снимка, доступного только для чтения, добавьте флаг -r . Чтобы создать доступную для записи версию снимка, доступного для чтения, просто создайте его снимок.
- Можно преобразовать снимок, доступный только для чтения, в снимок с возможностью записи. Однако это не рекомендуется, поскольку это вызывает проблемы с любой будущей инкрементной отправкой/получением. Создание нового снимка с возможностью записи предотвращает такие проблемы.
- Снимки не являются рекурсивными. Каждый вложенный подтом внутри снимка будет пустым каталогом.
Отправка/получение
Подтом может быть отправлен в стандартный вывод или в файл с помощью команды send . Обычно это используется для передачи в btrfs-команду receive . Например, для отправки снимка с именем /root_backup (это может быть снимок, который вы сделали ранее из / ) в /backup , можно выполнить следующую команду:
Отправляемый снимок должен быть доступен только для чтения. Приведённая выше команда полезна для копирования подтома на внешнее устройство (например, USB-диск, смонтированный по адресу /backup выше).
Вы также можете отправить только разницу между двумя снимками. Например, если вы уже отправили копию root_backup выше и сделали новый снимок, доступный только для чтения, с именем root_backup_new , то для отправки только изменённых данных в /backup можно выполнить следующую команду:
После этого в /backup появится новый подтом root_backup_new .
Смотрите статью Incremental Backup на Btrfs Wiki и #Инкрементное резервное копирование на внешний диск о том, как использовать это для инкрементного резервного копирования и об инструментах, автоматизирующих этот процесс.
Дедупликация
Используя копирование при записи (CoW), Btrfs может копировать файлы или целые подтома без фактического копирования данных. Однако каждый раз, когда файл изменяется, создаётся новая полноценная копия. Дедупликация делает ещё один шаг вперед, определяя блоки данных с общими последовательностями и объединяя их в экстент с той же семантикой копирования при записи.
Инструменты для дедупликации: duperemove , bees , bedup AUR и btrfs-dedup. Также может потребоваться просто дедуплицировать данные на уровне файлов, используя, например, rmlint , jdupes AUR или dduper-git AUR . Обзор возможностей этих программ и дополнительную информацию можно найти в Btrfs Wiki.
Кроме того, разработчики Btrfs работают над синхронной (inband, inline) дедупликацией, то есть дедупликацией, выполняемой в момент записи новых данных в файловую систему. В настоящее время это всё ещё эксперимент, который разрабатывается отдельно. Пользователям, желающим протестировать новую функцию, следует ознакомиться с соответствующей вики-страницей.
Изменение размера
Вы можете увеличить файловую систему до максимального доступного пространства или указать точный размер. Убедитесь, что вы увеличили размер устройства или логического тома, прежде чем пытаться увеличить размер файловой системы. При указании точного размера файловой системы убедитесь, что новый размер удовлетворяет следующим условиям:
- Новый размер должен быть больше размера существующих данных; в противном случае произойдет потеря данных.
- Новый размер должен быть равен или меньше текущего размера устройства, поскольку размер файловой системы не может выходить за пределы доступного пространства.
Чтобы увеличить размер файловой системы до максимально доступного размера устройства:
Чтобы расширить файловую систему до указанного размера:
Замените размер на желаемый размер в байтах. Вы также можете указать единицу измерения, например K (кибибайты), M (мебибайты) или G (гибибайты). В качестве альтернативы можно указать увеличение или уменьшение текущего размера, дополнив значение знаком плюс (+) или минус (-) соответственно:
Известные проблемы
Несколько ограничений следует знать, прежде чем пробовать.
Шифрование
Btrfs не имеет встроенной поддержки шифрования, но это может появиться в будущем. Пользователи могут зашифровать раздел перед запуском mkfs.btrfs . Смотрите dm-crypt/Encrypting an entire system#Btrfs subvolumes with swap.
Существующие файловые системы Btrfs могут использовать что-то вроде EncFS или VeraCrypt, хотя, возможно, без некоторых возможностей Btrfs.
Проблемы проверки btrfs
Инструмент btrfs check имеет известные проблемы и не должен запускаться без чтения дополнительной информации, смотрите раздел #Проверка файловой системы.
Советы и рекомендации
Диск Btrfs без разделов
Btrfs можно разместить на всём устройстве целиком, без использования разметки разделов MBR или GPT, используя подтома для имитации разделов. Однако отказываться от разделов не обязательно, достаточно просто создать файловую систему Btrfs на существующем разделе, созданном обычным способом. Существуют некоторые ограничения при установке без разделов:
- Невозможно разместить другие файловые системы на другом разделе того же диска.
- В связи с предыдущим пунктом размещение системного раздела EFI на этом диске невозможно. Для загрузки с UEFI необходимо другое устройство.
- Если используется версия ядра Linux до 5.0, вы не можете использовать пространство подкачки, так как Btrfs не поддерживала файлы подкачки до версии 5.0 и нет возможности создать раздел подкачки.
Чтобы удалить существующую таблицу разделов и вместо неё записать файловую систему Btrfs, выполните следующую команду:
Указывайте путь к устройству целиком (например, /dev/sda ), а не к отдельному разделу ( /dev/sda1 ). Второй вариант отформатирует лишь указанный раздел, а не заменит всю разметку. Поскольку корневым разделом является Btrfs, убедитесь, что btrfs скомпилирован в ядро, или поместите btrfs в mkinitcpio MODULES и пересоберите образ initramfs.
Установите загрузчик как на MBR-устройство. Смотрите Syslinux (Русский)#Ручная установка или GRUB (Русский)#Установка BIOS-версии загрузчика. Если ядро не загружается с ошибкой Failed to mount /sysroot. , добавьте GRUB_PRELOAD_MODULES=»btrfs» в /etc/default/grub и пересоздайте файл настроек GRUB.
Преобразование Ext3/4 в Btrfs
Загрузитесь с установочного образа, а затем выполните конвертацию:
Смонтируйте раздел и проверьте целостность файлов на сконвертированном разделе. Обязательно измените /etc/fstab , чтобы отразить изменения (type на btrfs и fs_passno [последнее поле] на 0 , поскольку Btrfs не выполняет проверку файловой системы при загрузке). Также обратите внимание, что UUID раздела изменился, поэтому обновите fstab соответствующим образом при использовании UUID. Выполните chroot в систему и перенастройте загрузчик на использование сконвертированного раздела (смотрите статью Установка Arch из другого дистрибутива). Если вы преобразуете корневую файловую систему, то, пока вы ещё в chroot, запустите mkinitcpio -p linux для пересоздания образа initramfs, иначе система не сможет успешно загрузиться.
Убедившись в отсутствии проблем, завершите преобразование, удалив резервный подтом ext2_saved . Обратите внимание, что без него вы не сможете вернуться к ext3/4.
Наконец, выполните балансировку, чтобы перераспределить место.
Помните, что некоторые приложения, которые были установлены ранее, должны быть адаптированы к Btrfs.
Аппаратное ускорение контрольной суммы
В Intel SSE4.2 появилась новая инструкция CRC32. Чтобы проверить, является ли подсчёт контрольной суммы в Btrfs аппаратно ускоренным:
Если вы видите crc32c=crc32c-generic , это, вероятно, потому, что ваш корневой раздел — Btrfs, и вам придётся вкомпилировать crc32c-intel в ядро, чтобы заставить его работать. Вставка crc32c-intel в mkinitcpio.conf не работает.
Восстановление повреждённой файловой системы
btrfs-check не может быть использован на смонтированной файловой системе. Чтобы иметь возможность использовать btrfs-check без загрузки с live USB, добавьте его в initramfs:
Теперь, когда возникнут проблемы с загрузкой, эта утилита будет доступна в initramfs и позволит выполнить восстановление.
Дополнительная информация доступна в btrfs-check(8) .
Загрузка в снимок
Для загрузки в снимок применяется та же процедура, что и для монтирования подтома в качестве корневого раздела, как описано в разделе #Монтирование подтома в качестве корня, поскольку снимки можно монтировать как подтома.
- При использовании GRUB вы можете автоматически добавить снимки btrfs в меню загрузки при регенерации файла настроек с помощью grub-btrfs или grub-btrfs-gitAUR .
- При использовании rEFInd вы можете автоматически заполнить меню загрузчика снимками btrfs с помощью refind-btrfsAUR после включения службы refind-btrfs.service .
Использование подтомов Btrfs в systemd-nspawn
Уменьшение частоты записи метаданных при обновлении времени доступа
Из-за того, что Btrfs использует копирование при записи, простое чтение файла может вызвать копирование метаданных. Уменьшение частоты обновления времени доступа может устранить это непредвиденное использование диска и увеличить производительность. Опции монтирования, связанные с управлением временем доступа, описаны в разделе fstab (Русский)#Параметры atime.
Инкрементное резервное копирование на внешний диск
Следующие пакеты используют btrfs send и btrfs receive для инкрементной отправки резервных копий на внешний диск. Обратитесь к их документации, чтобы увидеть различия в реализации, возможностях и требованиях.
- btrbk — Инструмент для создания снимков и удалённых резервных копий подтомов Btrfs.
- buttersink — Как rsync для снимков Btrfs. Требуется Python 2.
- snap-sync — Использование снимков Snapper для резервного копирования на внешний диск или удалённую машину.
- snapsync — Инструмент синхронизации для Snapper.
Следующий пакет позволяет создавать резервные копии снимков snapper на файловые системы, отличные от Btrfs.
- snapborg — borgmatic-подобный инструмент, который интегрирует снимки snapper с резервными копиями borg .
Решение проблем
Смещение раздела
Проблема со смещением может возникнуть при попытке внедрить core.img в диск с разделами. Это означает, что можно напрямую внедрить core.img от GRUB в пул Btrfs на диске без разделов (например, /dev/sdX ) напрямую.
GRUB может загружать разделы Btrfs, однако модуль может быть больше, чем у других файловых систем. В результате файл core.img , который создаёт grub-install , может не поместиться в первые 63 сектора (31.5KiB) диска между MBR и первым разделом. Современные инструменты разметки, такие как fdisk и gdisk , позволяют избежать этой проблемы, смещая первый раздел примерно на 1 или 2 МиБ.
Корневая файловая система не найдена
Если возникает ошибка error no such device: root при загрузке с RAID-массива, то отредактируйте /usr/share/grub/grub-mkconfig_lib и уберите обе кавычки из строки echo » search —no-floppy —fs-uuid —set=root $
Таймаут монтирования
Иногда, особенно на больших массивах RAID1, монтирование может прерваться во время загрузки с подобным сообщением в журнале:
Это можно легко обойти, установив более длительный таймаут с помощью специфичной для systemd опции монтирования x-systemd.mount-timeout в fstab. Например:
BTRFS: open_ctree failed
По состоянию на ноябрь 2014 года, похоже, существует ошибка в systemd или mkinitcpio, вызывающая следующую ошибку, если Btrfs размещён на нескольких устройствах и используется хук btrfs в mkinitcpio.conf :
Обходным решением является удаление btrfs из массива HOOKS в /etc/mkinitcpio.conf и добавление btrfs в массив MODULES . Затем пересоберите образ initramfs и перезагрузитесь.
Вы получите ту же ошибку, если попытаетесь смонтировать raid-массив без одного из устройств. В этом случае необходимо добавить опцию монтирования degraded в /etc/fstab . Если в массиве находится корневая файловая система, вы также должны добавить rootflags=degraded в параметры ядра.
По состоянию на август 2016 года, потенциальным обходным решением этой ошибки является монтирование массива только по одному диску в /etc/fstab и разрешение btrfs обнаруживать и добавлять остальные диски автоматически. Похоже, что сбою способствуют групповые идентификаторы, такие как UUID и LABEL. Например, массив RAID1 из двух устройств, состоящий из ‘disk1′ и disk2’, будет иметь присвоенный ему UUID, но вместо UUID будет использоваться только /dev/mapper/disk1 в /etc/fstab . Более подробное объяснение смотрите в этой статье.
Другим возможным обходным решением является удаление хука udev в mkinitcpio.conf и замена его хуком systemd . В этом случае btrfs не должен находиться в массивах HOOKS или MODULES .
Смотрите тему на форуме и FS#42884 для более подробной информации.
Проверка файловой системы
Команда btrfs-check(8) может быть использована для проверки или восстановления размонтированной файловой системы Btrfs. Однако этот инструмент ещё не доработан и не может исправить некоторые ошибки файловой системы, даже те, которые не делают файловую систему немонтируемой.