Откройте браузер, запустите музыкальный проигрыватель и скачайте несколько файлов. Все программы работают одновременно, используют процессор и оперативную память, но не должны мешать друг другу. Если браузер зависнет, остальные приложения должны продолжить работу.
За такую организацию отвечает операционная система (Operating System, OS). Она управляет ресурсами компьютера, выполнением программ, доступом к оборудованию и изоляцией приложений.
В основе ОС находится ядро, вокруг которого работают системные службы, библиотеки, драйверы и пользовательские приложения. Понимание этой архитектуры необходимо для изучения контейнеров, виртуальных машин и юникернелов.
1. Операционная система и ядро
Операционная система представляет собой программную среду, которая управляет компьютером и предоставляет приложениям интерфейсы для работы с оборудованием.
Основные компоненты ОС
- Ядро (Kernel). Управляет процессами, потоками, памятью, устройствами, файловыми системами и сетевыми механизмами.
- Системные службы. Выполняют фоновые задачи, управляют сетью, учётными записями, обновлениями и другими функциями.
- Системные библиотеки. Предоставляют приложениям готовые функции для работы с файлами, памятью и сетью.
- Драйверы. Обеспечивают взаимодействие программных компонентов с оборудованием.
- Пользовательские инструменты. Командная строка, графическая оболочка и системные утилиты.
Ядро обеспечивает основные механизмы работы системы, но не заменяет всю операционную систему.
Например, Linux представляет собой ядро. Ubuntu, Debian и Fedora объединяют его с библиотеками, системными службами и пользовательскими инструментами. В Windows ядро входит в архитектуру Windows NT.
Архитектуры ОС различаются. В монолитном ядре многие подсистемы и драйверы работают в привилегированном пространстве. В микроядерной архитектуре часть функций выносят в отдельные пользовательские процессы. Существуют и комбинированные подходы.
Как устроена операционная система
+--------------------------------------+
| Пользовательские приложения |
| Браузер, редактор, проигрыватель |
+--------------------------------------+
|
v
+--------------------------------------+
| Пользовательское пространство |
| Библиотеки, API, службы |
+--------------------------------------+
|
v
+--------------------------------------+
| Системные вызовы |
+--------------------------------------+
|
v
+--------------------------------------+
| Ядро операционной системы |
| |
| Планировщик Управление памятью|
| Файловые системы Сетевой стек |
| Ввод-вывод Драйверы |
+--------------------------------------+
|
v
+--------------------------------------+
| Оборудование |
| CPU, RAM, SSD, GPU, NIC |
+--------------------------------------+
Схема показывает общий принцип. В конкретных ОС расположение компонентов может отличаться.
2. Пользовательское пространство и пространство ядра
Процессоры поддерживают несколько уровней привилегий. Операционная система использует их, чтобы отделить обычные приложения от компонентов, управляющих оборудованием.
- User Mode. Пользовательский режим, в котором работают браузеры, игры, редакторы и большинство обычных программ. Приложения имеют ограниченные полномочия.
- Kernel Mode. Привилегированный режим ядра и системного кода. Здесь доступны механизмы управления памятью, устройствами и выполнением программ.
На процессорах Intel и AMD архитектуры x86-64 ядро обычно использует Ring 0, а пользовательские программы работают в Ring 3. В ARM применяются уровни привилегий, например EL0 для приложений и EL1 для ядра.
С режимами выполнения связаны два понятия
- User Space. Пользовательское адресное пространство, в котором располагаются код и данные обычных процессов.
- Kernel Space. Область виртуального адресного пространства, предназначенная для кода и данных ядра.
Режим выполнения определяет полномочия процессора, а адресное пространство ограничивает доступ к памяти. Аппаратные механизмы защиты обеспечивают соблюдение обоих ограничений.
Каждый пользовательский процесс получает собственное виртуальное адресное пространство. Блок управления памятью (MMU) и таблицы страниц определяют соответствие виртуальных адресов физическим страницам и разрешённые операции.
Поэтому браузер не может произвольно прочитать память текстового редактора или ядра. При попытке недопустимого доступа процессор формирует исключение, которое обрабатывает ОС.
Ошибка обычного приложения обычно приводит к завершению процесса. Ошибка привилегированного драйвера может повредить системную память и вызвать сбой всей ОС. Для снижения рисков Windows, например, поддерживает драйверы пользовательского режима UMDF.
3. Процессы, потоки и планировщик
Что такое процесс
Процесс (Process) представляет собой выполняющийся экземпляр программы вместе с выделенными ресурсами и состоянием выполнения.
Исполняемый файл на диске содержит инструкции и данные, но сам ничего не выполняет. При запуске ОС создаёт процесс, подготавливает виртуальное адресное пространство, загружает необходимые компоненты и запускает первый поток.
Процесс включает
- Виртуальное адресное пространство.
- Программный код и данные.
- Один или несколько потоков.
- Открытые файлы и сетевые соединения.
- Идентификатор PID и контекст безопасности.
Одна программа может запускать несколько процессов. Например, браузеры часто разделяют вкладки, расширения и графическую обработку между отдельными процессами.
Чем процесс отличается от потока
Поток (Thread) представляет собой последовательность выполнения инструкций внутри процесса. Именно потоки планировщик распределяет между доступными логическими процессорами.
Потоки одного процесса используют общую память и системные ресурсы, но каждый имеет собственный стек, регистры процессора и состояние выполнения.
Например, графический редактор может использовать отдельные потоки для интерфейса, обработки изображения и сохранения файла. Пока один поток выполняет сложный фильтр, другой продолжает обрабатывать действия пользователя.
| Характеристика | Процесс | Поток |
|---|---|---|
| Назначение | Среда выполнения программы | Последовательность инструкций |
| Память | Собственное адресное пространство | Общая память процесса |
| Стек | Отдельный для каждого потока | Собственный стек |
| Идентификатор | PID | TID |
| Изоляция | Обычно отделён от других процессов | Разделяет память с потоками процесса |
Создание потоков обычно требует меньше ресурсов, чем создание отдельных процессов. Однако многопоточность не гарантирует ускорения. При одновременном обращении к общим данным возникают гонки данных и взаимные блокировки (deadlocks).
Как работает планировщик
Планировщик (Scheduler) распределяет процессорное время между готовыми к выполнению потоками.
На одном ядре несколько потоков поочерёдно получают процессорное время. Быстрое переключение создаёт впечатление одновременной работы программ. На многоядерном процессоре потоки могут действительно выполняться параллельно.
Если поток ожидает ответа от сервера или завершения операции чтения файла, планировщик может передать процессор другому потоку.
При смене выполняемой задачи ОС сохраняет состояние предыдущего потока и восстанавливает состояние следующего. Операция называется переключением контекста (Context Switch) и требует дополнительных ресурсов.
Планировщик учитывает приоритеты и политики обслуживания. Поэтому фоновые задачи могут получать меньше процессорного времени, чем интерактивные приложения.
4. Системные вызовы и работа с оборудованием
Пользовательские программы не могут напрямую выполнять любые операции с оборудованием. Для доступа к системным ресурсам они используют системные вызовы (System Calls), через которые запрашивают услуги ядра.
Как работает системный вызов
Например, при сохранении документа редактору нужно открыть файл и передать данные для записи. Программа не управляет непосредственно контроллером SSD и файловой системой. Она обращается к системному интерфейсу.
В Linux для работы с файлами используются системные вызовы openat(), read(), write() и close().
Приложение
|
v
Системная библиотека или API
|
v
Системный вызов
|
v
Ядро
|
v
Файловая система и подсистема ввода-вывода
|
v
Драйвер устройства
|
v
Контроллер накопителя
|
v
SSD или HDD
Приложения обычно используют библиотеки, предоставляющие удобные интерфейсы к системным вызовам. Например, в Linux программы на C часто обращаются к функциям glibc.
Библиотечная функция не обязательно выполняет системный вызов. Она может обработать запрос самостоятельно. Если требуется помощь ядра, процессор передаёт ему управление и переходит в привилегированный режим. Ядро проверяет параметры и права доступа, выполняет операцию и возвращает результат.
В Windows приложения обычно используют Win32 API, через который системные компоненты передают запросы ядру.
Системный вызов не означает обязательного переключения на другой процесс. После обработки запроса процессор обычно возвращается к тому же потоку. Переключение контекста происходит отдельно, если этого требуют состояние потока и планировщик.
В Linux некоторые операции выполняются без перехода в ядро благодаря механизму vDSO. Например, получение текущего времени в поддерживаемых случаях не требует полноценного системного вызова.
Как ОС управляет устройствами
Драйверы преобразуют запросы операционной системы в команды, понятные конкретному оборудованию. Благодаря унифицированным интерфейсам приложениям обычно не нужно знать модель установленного SSD или сетевого адаптера.
При чтении файла ядро обращается к файловой системе, подсистеме ввода-вывода и драйверу накопителя. Для сетевых соединений ядро обрабатывает протоколы и передаёт данные драйверу сетевого адаптера.
Часть работы выполняют сами устройства. Например, DMA (Direct Memory Access) позволяет контроллерам передавать данные между устройством и оперативной памятью без участия процессора при обработке каждого байта. После завершения операции устройство может отправить аппаратное прерывание, уведомляя систему о результате.
Почему успешная запись не всегда означает сохранение на диске
При вызове write() Linux может сначала поместить данные в page cache, то есть кэш файловой системы в оперативной памяти. Физическая запись на накопитель произойдёт позднее.
Поэтому успешный возврат write() сам по себе не гарантирует сохранение данных в энергонезависимой памяти. Для запроса синхронизации используют fsync() или fdatasync(). Такие механизмы особенно важны для баз данных и платёжных систем.
5. Изоляция процессов и распределение ресурсов
Изоляция процессов (Process Isolation) позволяет приложениям работать независимо друг от друга. Если браузер аварийно завершится, текстовый редактор и остальные программы обычно продолжат работу.
Как работает изоляция памяти
Основу изоляции составляет виртуальная память. Каждый пользовательский процесс получает собственное виртуальное адресное пространство, а MMU и таблицы страниц определяют доступные ему физические области памяти.
Браузер и текстовый редактор могут использовать одинаковые виртуальные адреса, но обращаться к разным физическим страницам.
Виртуальная память позволяет
- Ограничивать доступ процессов к памяти друг друга.
- Защищать данные от случайного повреждения соседними приложениями.
- Использовать общие физические страницы там, где это безопасно.
- Перемещать физические страницы без изменения виртуальных адресов приложений.
ОС может совместно использовать страницы библиотек между несколькими процессами. Ещё один механизм, Copy-on-Write (CoW), позволяет временно использовать общие страницы и создавать отдельную копию только при попытке изменения.
Например, после вызова fork() в Linux родительский и дочерний процессы первоначально могут использовать общие физические страницы. При изменении страницы система создаёт её копию.
Изоляция не равна полной безопасности
Разделение памяти не запрещает процессу обращаться к файлам, сети и другим разрешённым ресурсам. ОС дополнительно контролирует доступ с помощью учётных записей, прав доступа, списков ACL и механизмов разграничения полномочий.
Поэтому отдельное адресное пространство нельзя считать полноценной песочницей. Для более строгой изоляции применяют ограничения системных вызовов, файловой системы, сети и доступных ресурсов. Подробнее о таких механизмах рассказано в материале о песочницах и изолированном запуске приложений.
Изоляция процессов не защищает от уязвимостей ядра и привилегированных драйверов. Получив возможность выполнять произвольный код в режиме ядра, злоумышленник может обойти обычные границы между пользовательскими процессами.
Как ОС распределяет ресурсы
Все приложения используют общие физические ресурсы компьютера. Операционная система распределяет их с учётом приоритетов и доступных ограничений.
- Процессор. Планировщик распределяет время между потоками.
- Оперативная память. ОС управляет виртуальными адресными пространствами, физическими страницами и подкачкой.
- Накопители. Ядро управляет файловыми системами, буферами и операциями ввода-вывода.
- Сеть. ОС обрабатывает протоколы, соединения и очереди передачи данных.
- Устройства. Система контролирует доступ к видеокартам, USB-устройствам и другим компонентам.
В Linux для группировки процессов и ограничения потребления ресурсов используют cgroups. Механизм cgroup v2 позволяет контролировать процессорное время, память и операции ввода-вывода. Он особенно важен на серверах, где одновременно работают десятки приложений.
Изоляция не гарантирует каждому процессу нужную производительность. При нехватке памяти ОС может использовать подкачку или завершать процессы, а при перегрузке процессора задачи дольше ждут своей очереди.
Здесь начинается связь с контейнерами и виртуальными машинами. Контейнеры используют механизмы ядра для изоляции и ограничения процессов, сохраняя общее ядро хостовой ОС. Виртуальные машины предоставляют гостевой операционной системе собственное ядро и виртуальное оборудование.
Проверяем процессы и потоки
В Windows PowerShell покажет десять процессов с наибольшим количеством потоков
Get-Process |
Sort-Object { $_.Threads.Count } -Descending |
Select-Object -First 10 ProcessName, Id,
@{Name='Threads';Expression={$_.Threads.Count}}
В Linux используйте команду
ps -eo pid,ppid,nlwp,comm --sort=-nlwp | head
Для просмотра потоков конкретного процесса
ps -L -p 1234 -o pid,tid,stat,comm
Для просмотра виртуальной памяти процесса
cat /proc/1234/maps
Наконец, утилита strace позволяет увидеть системные вызовы программы
strace -e trace=openat,read,write,close /bin/cat /etc/hostname
В выводе появятся обращения к системным вызовам и возвращаемые значения. Для работы утилиты может потребоваться установка соответствующего пакета.
Что нужно запомнить
- Операционная система объединяет ядро, службы, библиотеки, драйверы и пользовательские инструменты.
- Ядро управляет памятью, процессами, потоками и доступом к оборудованию.
- User Space и Kernel Space разделяют пользовательский и привилегированный системный код.
- Системные вызовы обеспечивают контролируемое взаимодействие приложений с ядром.
- Процесс объединяет адресное пространство, ресурсы и потоки выполнения.
- Поток представляет собой последовательность инструкций, которую планировщик распределяет между процессорами.
- Виртуальная память обеспечивает изоляцию адресных пространств.
- Драйверы обеспечивают взаимодействие ОС с оборудованием.
- Планировщик и механизмы управления ресурсами позволяют приложениям совместно использовать компьютер.
Главный принцип заключается в том, что операционная система создаёт для приложений изолированные среды выполнения, но физические ресурсы компьютера остаются общими. Ядро контролирует доступ к ним и распределяет нагрузку.
Контейнеры используют механизмы изоляции существующего ядра и не запускают отдельную полноценную ОС для каждого приложения. Виртуальные машины предоставляют гостевой системе собственное ядро. Юникернелы объединяют приложение с необходимыми компонентами ОС в специализированный образ.
Следующий шаг в изучении этих технологий — аппаратная виртуализация, работа гипервизора и запуск нескольких независимых операционных систем на одной физической машине.
Часто задаваемые вопросы
Может ли приложение работать без операционной системы?
Да. Программы могут работать непосредственно на оборудовании. Такой подход используют во встроенных системах и микроконтроллерах, где приложение самостоятельно управляет ресурсами или обращается к возможностям прошивки.
Может ли один процесс использовать несколько ядер?
Да. Если процесс содержит несколько готовых к выполнению потоков, планировщик может распределить их между разными логическими процессорами. На многоядерном процессоре потоки способны выполняться параллельно.
Почему аварийное завершение программы обычно не перезагружает компьютер?
Пользовательские процессы изолированы друг от друга и от защищённых областей ядра. ОС завершает неисправный процесс и освобождает его ресурсы. Однако ошибка ядра или привилегированного драйвера может вызвать системный сбой.
Гарантирует ли изоляция защиту от вредоносных программ?
Нет. Изоляция ограничивает доступ к памяти других процессов, но не обязательно запрещает доступ к файлам и сети. Для защиты недоверенного кода нужны дополнительные ограничения полномочий и ресурсов.
Чем процесс отличается от контейнера?
Процесс представляет собой единицу выполнения программы. Контейнер объединяет процессы с механизмами изоляции, например пространствами имён и ограничениями ресурсов. Большинство контейнеров используют общее ядро хостовой ОС.
Почему многопоточная программа иногда работает медленнее?
Потоки требуют синхронизации и дополнительных ресурсов. Если они конкурируют за общие данные или слишком часто переключаются, накладные расходы могут превысить пользу от параллельного выполнения.