Материалы с тегом «Linux» ⋆ Clip-Clap Практические инструкции по Windows, Linux, 1С, сетям, серверам, смартфонам и технике: диагностика ошибок, настройка и безопасные решения. Fri, 02 Oct 2026 15:23:30 +0000 ru-RU hourly 1 https://wordpress.org/?v=7.1.4 https://clip-clap.ru/wp-content/uploads/2026/10/cropped-clip-clap-mark-512x512-1-32x32.png Материалы с тегом «Linux» ⋆ Clip-Clap 32 32 Как удалять файлы и каталоги в Linux: rm, rmdir и безопасные приёмы https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%ba%d0%b0%d0%ba-%d1%83%d0%b4%d0%b0%d0%bb%d1%8f%d1%82%d1%8c-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d0%ba%d0%b0%d1%82%d0%b0%d0%bb%d0%be%d0%b3%d0%b8-%d1%81-%d0%bf%d0%be%d0%bc%d0%be%d1%89%d1%8c%d1%8e/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%ba%d0%b0%d0%ba-%d1%83%d0%b4%d0%b0%d0%bb%d1%8f%d1%82%d1%8c-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d0%ba%d0%b0%d1%82%d0%b0%d0%bb%d0%be%d0%b3%d0%b8-%d1%81-%d0%bf%d0%be%d0%bc%d0%be%d1%89%d1%8c%d1%8e/#respond Wed, 30 Dec 2020 19:10:00 +0000 https://clip-clap.ru/?p=3217 Практическая инструкция по удалению файлов и каталогов в Linux: rm, rmdir, рекурсивное удаление, подтверждение, шаблоны и способы снизить риск ошибки.

Сообщение Как удалять файлы и каталоги в Linux: rm, rmdir и безопасные приёмы появились сначала на Clip-Clap.

]]>
В Linux удаление из терминала обычно выполняют командами rm и rmdir. Главное отличие от графического файлового менеджера: rm обычно не перемещает данные в корзину, поэтому ошибочный путь может сразу привести к потере файлов.

Удалить один файл

rm file.txt

Если в имени есть пробелы, заключите путь в кавычки:

rm "Мой файл.txt"

Удалить несколько файлов

rm file1.txt file2.txt file3.log

С шаблонами вроде *.log будьте особенно осторожны: их разворачивает оболочка. Перед удалением полезно сначала выполнить ls с тем же шаблоном и убедиться, что список правильный.

ls *.log
rm *.log

Удалить пустой каталог

rmdir old-folder

rmdir удаляет только пустые каталоги. Это удобно, когда нужно исключить случайное удаление вложенных файлов.

Удалить каталог вместе с содержимым

rm -r old-folder

Ключ -r включает рекурсивное удаление. Для заметно более безопасного варианта при массовом или рекурсивном удалении GNU rm поддерживает -I: команда один раз попросит подтверждение перед опасной операцией.

rm -rI old-folder

Почему не стоит бездумно использовать rm -rf

-f отключает запросы и игнорирует часть ошибок. В сочетании с -r команда становится удобной для скриптов, но крайне опасной при опечатке в пути или переменной. Для ручной работы сначала проверьте текущий каталог и целевой путь.

pwd
ls -la -- old-folder
rm -rI -- old-folder

Разделитель -- полезен, если имя файла начинается с дефиса: всё после него считается именами файлов, а не параметрами команды.

Если каталог содержит отдельную файловую систему

В GNU Coreutils есть параметр --one-file-system. Он не даёт рекурсивному удалению переходить на другую смонтированную файловую систему внутри удаляемого дерева. Это полезная дополнительная защита при работе с chroot, bind-mount и похожими структурами.

Короткий безопасный алгоритм

  1. Проверьте текущий каталог командой pwd.
  2. Посмотрите цель через ls.
  3. Для пустой папки используйте rmdir.
  4. Для непустой — сначала rm -rI, а не rm -rf.
  5. Не запускайте удаление с sudo, если повышенные права действительно не нужны.

Если удаляются важные данные, резервная копия надёжнее любых защитных ключей команды.

Сообщение Как удалять файлы и каталоги в Linux: rm, rmdir и безопасные приёмы появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%ba%d0%b0%d0%ba-%d1%83%d0%b4%d0%b0%d0%bb%d1%8f%d1%82%d1%8c-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d0%ba%d0%b0%d1%82%d0%b0%d0%bb%d0%be%d0%b3%d0%b8-%d1%81-%d0%bf%d0%be%d0%bc%d0%be%d1%89%d1%8c%d1%8e/feed/ 0
Как проверить диск на ошибки и bad sectors в Linux: SMART, dmesg и badblocks https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d1%80%d0%be%d0%b2%d0%b5%d1%80%d0%ba%d0%b0-%d0%b4%d0%b8%d1%81%d0%ba%d0%b0-%d0%bd%d0%b0-%d0%b1%d0%b8%d1%82%d1%8b%d0%b5-%d1%81%d0%b5%d0%ba%d1%82%d0%be%d1%80%d0%b0-%d0%b2-linux/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d1%80%d0%be%d0%b2%d0%b5%d1%80%d0%ba%d0%b0-%d0%b4%d0%b8%d1%81%d0%ba%d0%b0-%d0%bd%d0%b0-%d0%b1%d0%b8%d1%82%d1%8b%d0%b5-%d1%81%d0%b5%d0%ba%d1%82%d0%be%d1%80%d0%b0-%d0%b2-linux/#respond Sat, 05 Dec 2020 21:16:51 +0000 https://clip-clap.ru/?p=3074 Если Linux сообщает об ошибках ввода-вывода, система зависает при работе с диском или SMART показывает ухудшение состояния накопителя, не начинайте с длительного теста записи.…

Сообщение Как проверить диск на ошибки и bad sectors в Linux: SMART, dmesg и badblocks появились сначала на Clip-Clap.

]]>
Если Linux сообщает об ошибках ввода-вывода, система зависает при работе с диском или SMART показывает ухудшение состояния накопителя, не начинайте с длительного теста записи. Сначала сохраните важные данные и соберите диагностику, которая не изменяет содержимое диска.

Определите нужный накопитель

lsblk -o NAME,SIZE,MODEL,SERIAL,FSTYPE,MOUNTPOINTS

Особенно внимательно проверяйте имя устройства перед командами вида /dev/sda, /dev/nvme0n1 и похожими. Ошибка в имени диска при разрушающем тесте может уничтожить данные другого накопителя.

В исходной статье диск и разделы сначала определялись через fdisk. Скриншот оставляю как исторический пример, но сегодня удобнее начинать с lsblk, чтобы не перепутать целый диск и раздел.

Старый пример списка дисков и разделов через fdisk в Linux

Посмотрите ошибки ядра

dmesg -T | grep -Ei 'error|fail|ata|nvme|i/o'

Повторяющиеся I/O error, reset, timeout и ошибки интерфейса могут указывать как на сам накопитель, так и на кабель, питание или контроллер.

Проверьте SMART

sudo smartctl -a /dev/sdX

Для HDD обращайте внимание на переназначенные и ожидающие переназначения сектора, а также необрабатываемые ошибки. Для SSD и NVMe набор показателей другой, поэтому оценивайте отчёт целиком и учитывайте документацию производителя.

Старый материал также показывал краткую проверку SMART. Одного статуса HEALTH недостаточно для полного вывода о состоянии диска, поэтому смотрите весь отчёт и динамику атрибутов.

Старый пример проверки состояния диска через smartctl

Неразрушающая проверка badblocks

sudo badblocks -sv /dev/sdX

Режим только чтения не должен использоваться как единственный критерий исправности, но может помочь выявить нечитаемые блоки на HDD. Проверка большого диска занимает много времени.

Почему опасен badblocks -w

Не запускайте badblocks -w на диске с нужными данными. Режим записи записывает тестовые шаблоны в каждый блок и уничтожает существующее содержимое. Его применяют только к диску, данные на котором можно полностью потерять.

Если ошибки уже появились

При важных данных приоритет — резервная копия или создание образа, а не многократные стресс-тесты. Если SMART ухудшается, появляются новые нечитаемые сектора или диск периодически исчезает из системы, накопитель разумнее заменить. Для SSD/NVMe классический поиск bad sectors обычно менее полезен, чем SMART/health-данные и диагностика производителя.

Сообщение Как проверить диск на ошибки и bad sectors в Linux: SMART, dmesg и badblocks появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d1%80%d0%be%d0%b2%d0%b5%d1%80%d0%ba%d0%b0-%d0%b4%d0%b8%d1%81%d0%ba%d0%b0-%d0%bd%d0%b0-%d0%b1%d0%b8%d1%82%d1%8b%d0%b5-%d1%81%d0%b5%d0%ba%d1%82%d0%be%d1%80%d0%b0-%d0%b2-linux/feed/ 0
Linux: диски, разделы, точки монтирования и файловые системы — простое объяснение https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%b4%d0%b8%d1%81%d0%ba%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d0%be%d0%b2%d1%8b%d0%b5-%d1%81%d0%b8%d1%81/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%b4%d0%b8%d1%81%d0%ba%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d0%be%d0%b2%d1%8b%d0%b5-%d1%81%d0%b8%d1%81/#respond Fri, 06 Nov 2020 19:45:38 +0000 https://clip-clap.ru/?p=2524 Как Linux видит диски и разделы, чем отличаются /dev/sda, /dev/nvme0n1, mount point и filesystem. Базовый гид для перехода с Windows.

Сообщение Linux: диски, разделы, точки монтирования и файловые системы — простое объяснение появились сначала на Clip-Clap.

]]>
В Linux нет букв дисков C:, D: и E: как основной модели доступа. Накопители представлены устройствами в /dev, а их файловые системы подключаются в выбранные каталоги — точки монтирования.

Как увидеть диски и разделы

lsblk -f

Команда показывает устройства, разделы, файловые системы и точки монтирования. SATA-диск может называться /dev/sda, а NVMe — /dev/nvme0n1.

Что такое точка монтирования

Файловая система становится частью единого дерева каталогов. Например, системный раздел может быть смонтирован в /, отдельный диск с данными — в /srv/data, а EFI-раздел — в /boot/efi.

Популярные файловые системы

  • ext4 — распространённый универсальный вариант;
  • XFS — часто используется на серверах;
  • Btrfs — поддерживает snapshots и дополнительные функции управления данными;
  • FAT32/exFAT/NTFS — используются для совместимости с другими системами и внешними накопителями.

Как проверить свободное место

df -hT

df показывает использование смонтированных файловых систем, а lsblk — структуру устройств. Это разные задачи, и команды удобно использовать вместе.

Не форматируйте устройство по имени наугад

Перед mkfs, переразметкой или удалением разделов всегда перепроверяйте модель, размер и серийный номер накопителя. Ошибка в имени устройства может уничтожить данные без возможности простого отката.

Сообщение Linux: диски, разделы, точки монтирования и файловые системы — простое объяснение появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%b4%d0%b8%d1%81%d0%ba%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d1%8b-%d0%b8-%d1%84%d0%b0%d0%b9%d0%bb%d0%be%d0%b2%d1%8b%d0%b5-%d1%81%d0%b8%d1%81/feed/ 0
Командная строка Linux: базовые команды и безопасная работа в терминале https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%ba%d0%be%d0%bc%d0%b0%d0%bd%d0%b4%d0%bd%d0%b0%d1%8f-%d1%81%d1%82%d1%80%d0%be%d0%ba%d0%b0/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%ba%d0%be%d0%bc%d0%b0%d0%bd%d0%b4%d0%bd%d0%b0%d1%8f-%d1%81%d1%82%d1%80%d0%be%d0%ba%d0%b0/#respond Fri, 06 Nov 2020 18:37:05 +0000 https://clip-clap.ru/?p=2515 Практическое введение в терминал Linux: навигация, файлы, просмотр содержимого, права, поиск, конвейеры и базовые правила безопасной работы.

Сообщение Командная строка Linux: базовые команды и безопасная работа в терминале появились сначала на Clip-Clap.

]]>
Терминал в Linux — обычный интерфейс к системе. Через него удобно управлять файлами, пакетами, сервисами и удалёнными серверами. Для начала достаточно понять несколько базовых команд и то, как оболочка интерпретирует пути и параметры.

Где я нахожусь

pwd
ls -la

pwd показывает текущий каталог, а ls -la — его содержимое, включая скрытые элементы.

Переход между каталогами

cd /var/log
cd ..
cd ~

Путь, начинающийся с /, абсолютный. Относительный путь считается от текущего каталога. Символ ~ обозначает домашний каталог пользователя.

Копирование, перемещение и создание каталогов

mkdir project
cp file.txt project/
mv old.txt new.txt

Просмотр текстовых файлов

cat file.txt
less /var/log/syslog

Для коротких файлов удобен cat, для длинных — less, где можно прокручивать содержимое и искать текст.

Поиск текста и файлов

grep -i "error" app.log
find ~/Documents -type f -name "*.pdf"

Конвейеры

journalctl | grep -i error

Символ | передаёт вывод одной программы на вход другой.

Права и sudo

ls -l
sudo systemctl status ssh

sudo запускает конкретную команду с повышенными правами. Не добавляйте его автоматически ко всем командам.

Получить справку

man cp
rm --help

Перед незнакомой командой полезно открыть её руководство. Особенно внимательно проверяйте параметры удаления, перезаписи дисков, изменения разделов и прав доступа.

Сообщение Командная строка Linux: базовые команды и безопасная работа в терминале появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d0%bf%d0%b5%d1%80%d0%b5%d1%85%d0%be%d0%b4-%d0%bd%d0%b0-linux-%d0%ba%d0%be%d0%bc%d0%b0%d0%bd%d0%b4%d0%bd%d0%b0%d1%8f-%d1%81%d1%82%d1%80%d0%be%d0%ba%d0%b0/feed/ 0
Архивы в Linux: tar, gzip, xz, zip и распаковка файлов https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d0%bd%d0%b8%d0%b5-%d0%b8-%d1%80%d0%b0%d1%81%d0%bf%d0%b0%d0%ba%d0%be%d0%b2%d0%ba%d0%b0-%d0%b0%d1%80%d1%85%d0%b8%d0%b2%d0%be%d0%b2-%d0%b2-linux/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d0%bd%d0%b8%d0%b5-%d0%b8-%d1%80%d0%b0%d1%81%d0%bf%d0%b0%d0%ba%d0%be%d0%b2%d0%ba%d0%b0-%d0%b0%d1%80%d1%85%d0%b8%d0%b2%d0%be%d0%b2-%d0%b2-linux/#respond Sun, 04 Oct 2020 17:11:44 +0000 https://clip-clap.ru/?p=2250 Практическая шпаргалка по архивам Linux: tar.gz, tar.xz, zip, просмотр содержимого, создание, распаковка и безопасная работа с путями.

Сообщение Архивы в Linux: tar, gzip, xz, zip и распаковка файлов появились сначала на Clip-Clap.

]]>
В Linux архив и сжатие часто выполняют разные задачи. tar объединяет файлы и каталоги в один поток, а gzip или xz сжимают этот поток. Поэтому форматы .tar.gz и .tar.xz встречаются особенно часто.

В исходной статье был показан пример работы с архивом tar.gz. Возвращаю этот скриншот рядом с базовой схемой создания и распаковки.

Пример работы с tar.gz архивом в Linux

Создать tar.gz

tar -czf backup.tar.gz /path/to/data

c создаёт архив, z включает gzip, f задаёт имя файла. Для xz используйте J вместо z.

Распаковать архив

tar -xzf backup.tar.gz
tar -xJf backup.tar.xz

Чтобы распаковать в конкретный каталог, добавьте -C /target/path. Каталог назначения должен существовать заранее.

Посмотреть содержимое без распаковки

tar -tzf backup.tar.gz

ZIP

zip -r archive.zip folder/
unzip archive.zip -d target/

ZIP удобен для обмена файлами с Windows и macOS. Для серверных резервных копий чаще используют tar с gzip или xz.

Не распаковывайте неизвестные архивы от root без проверки

Перед распаковкой посмотрите список файлов и пути внутри архива. Недоверенный архив может содержать неожиданные абсолютные или относительные пути. Для автоматизации резервного копирования дополнительно проверяйте код возврата команды и свободное место.

Сообщение Архивы в Linux: tar, gzip, xz, zip и распаковка файлов появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/linux/%d1%81%d0%be%d0%b7%d0%b4%d0%b0%d0%bd%d0%b8%d0%b5-%d0%b8-%d1%80%d0%b0%d1%81%d0%bf%d0%b0%d0%ba%d0%be%d0%b2%d0%ba%d0%b0-%d0%b0%d1%80%d1%85%d0%b8%d0%b2%d0%be%d0%b2-%d0%b2-linux/feed/ 0
Как выбрать Linux для программирования: Ubuntu, Fedora, Debian, Arch и другие подходы https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bb%d1%83%d1%87%d1%88%d0%b8%d0%b5-%d0%b4%d0%b8%d1%81%d1%82%d1%80%d0%b8%d0%b1%d1%83%d1%82%d0%b8%d0%b2%d1%8b-linux-%d0%b4%d0%bb%d1%8f-%d0%bf%d1%80%d0%be%d0%b3%d1%80%d0%b0%d0%bc%d0%bc%d0%b8%d1%81/ https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bb%d1%83%d1%87%d1%88%d0%b8%d0%b5-%d0%b4%d0%b8%d1%81%d1%82%d1%80%d0%b8%d0%b1%d1%83%d1%82%d0%b8%d0%b2%d1%8b-linux-%d0%b4%d0%bb%d1%8f-%d0%bf%d1%80%d0%be%d0%b3%d1%80%d0%b0%d0%bc%d0%bc%d0%b8%d1%81/#respond Sun, 04 Oct 2020 17:02:51 +0000 https://clip-clap.ru/?p=2255 Какой Linux выбрать разработчику: сравниваем стабильные, свежие и rolling-release дистрибутивы по пакетам, драйверам, документации, контейнерам и удобству разработки.

Сообщение Как выбрать Linux для программирования: Ubuntu, Fedora, Debian, Arch и другие подходы появились сначала на Clip-Clap.

]]>
Для разработки важнее не «лучший Linux вообще», а сочетание стабильности, свежести пакетов, поддержки оборудования и привычного инструментария. Практически любой крупный дистрибутив подходит для Python, Go, Java, PHP, Node.js, Rust и контейнеров, но опыт эксплуатации будет разным.

Ubuntu и производные

Хороший выбор, если нужен предсказуемый рабочий стол, много документации и широкая поддержка стороннего ПО. Особенно удобно для начинающих и тех, кто работает с Docker, VS Code, JetBrains IDE и распространёнными SDK.

Fedora

Подходит тем, кому нужны сравнительно свежие ядро, компиляторы и пользовательские пакеты без перехода на rolling-release. Часто удобна для разработки под современные Linux-стэки и контейнерные технологии.

Debian

Сильная сторона Debian — консервативность и предсказуемость. Это полезно, если окружение разработчика должно быть близко к серверному и вы цените стабильность выше самых свежих версий инструментов.

Arch Linux и rolling-release

Rolling-release даёт быстрый доступ к новым версиям пакетов и высокий уровень контроля, но требует больше внимания к обновлениям. Такой вариант хорош для опытного пользователя, который не против самостоятельно разбираться с изменениями системы.

Что важнее самого дистрибутива

  • поддержка вашего GPU, Wi-Fi и другого оборудования;
  • доступность нужных IDE и SDK;
  • Docker/Podman и виртуализация;
  • наличие пакетов или удобной установки через официальные репозитории;
  • простота резервного копирования и восстановления окружения.

Как сделать выбор без переустановок

Сначала протестируйте систему в виртуальной машине или на отдельном накопителе. Для рабочего компьютера обычно разумнее выбрать дистрибутив с понятным циклом обновлений, а версии языков и инструментов управлять через контейнеры, virtualenv, SDKMAN, nvm, rustup и аналогичные инструменты.

Сообщение Как выбрать Linux для программирования: Ubuntu, Fedora, Debian, Arch и другие подходы появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bb%d1%83%d1%87%d1%88%d0%b8%d0%b5-%d0%b4%d0%b8%d1%81%d1%82%d1%80%d0%b8%d0%b1%d1%83%d1%82%d0%b8%d0%b2%d1%8b-linux-%d0%b4%d0%bb%d1%8f-%d0%bf%d1%80%d0%be%d0%b3%d1%80%d0%b0%d0%bc%d0%bc%d0%b8%d1%81/feed/ 0
CutiePi и Raspberry Pi: что представлял собой Linux-планшет и почему проект интересен сегодня https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/raspberry-pi/raspberry-pi-%d0%bf%d1%80%d0%b5%d0%b2%d1%80%d0%b0%d1%82%d0%b8%d0%bb%d0%b8-%d0%b2-%d1%83%d0%bd%d0%b8%d0%ba%d0%b0%d0%bb%d1%8c%d0%bd%d1%8b%d0%b9-%d0%bf%d0%bb%d0%b0%d0%bd%d1%88%d0%b5%d1%82-%d0%bd%d0%b0-li/ https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/raspberry-pi/raspberry-pi-%d0%bf%d1%80%d0%b5%d0%b2%d1%80%d0%b0%d1%82%d0%b8%d0%bb%d0%b8-%d0%b2-%d1%83%d0%bd%d0%b8%d0%ba%d0%b0%d0%bb%d1%8c%d0%bd%d1%8b%d0%b9-%d0%bf%d0%bb%d0%b0%d0%bd%d1%88%d0%b5%d1%82-%d0%bd%d0%b0-li/#respond Wed, 09 Sep 2020 21:45:04 +0000 https://clip-clap.ru/?p=1661 История CutiePi: открытый планшет на Raspberry Pi Compute Module, его аппаратная архитектура, CutiePi Shell, переход на Compute Module 4 и текущее состояние open-source проекта.

Сообщение CutiePi и Raspberry Pi: что представлял собой Linux-планшет и почему проект интересен сегодня появились сначала на Clip-Clap.

]]>
CutiePi — один из самых интересных проектов, пытавшихся превратить Raspberry Pi в законченный планшет, а не просто DIY-сборку. Проект начинался вокруг Compute Module 3+, а финальная открытая аппаратная платформа перешла на Raspberry Pi Compute Module 4.

Планшет CutiePi с ручкой-подставкой

Что было внутри

В опубликованной документации финального планшета указаны Compute Module 4, аккумулятор 5000 мА·ч и 8-дюймовый сенсорный дисплей 1280×800. В корпус были встроены камера, микрофон, динамик, гироскоп и ручка, которая одновременно служила подставкой.

Системная плата проекта CutiePi

CutiePi Shell

Для Raspberry Pi OS разработчики сделали собственную Qt-оболочку CutiePi Shell с экраном блокировки, экранной клавиатурой, браузером, терминалом, управлением Wi‑Fi и поворотом экрана.

Почему проект был необычным

  • открытая схема carrier board;
  • открытые файлы корпуса;
  • собственная мобильная оболочка;
  • возможность загрузки системы с microSD;
  • обычный Linux вместо закрытой мобильной ОС.
Корпус и ручка-подставка CutiePi

Что с CutiePi сейчас

Основные официальные репозитории CutiePi давно получают мало обновлений: документация в GitHub обновлялась в 2022 году, отдельные компоненты — в 2021–2023 годах. Поэтому рассматривать CutiePi как активно развиваемый массовый планшет в 2026 году уже не стоит.

При этом проект не исчез бесследно: аппаратные схемы, корпус и ПО остаются открытыми, а сторонняя экосистема ещё использует CutiePi как поддерживаемую платформу — например, openFyde публиковал для него актуальные build-артефакты и в 2026 году.

Почему он всё ещё интересен

CutiePi полезен как пример того, как из Compute Module построить законченный переносной Linux-девайс: с питанием, экраном, корпусом, сенсорами и собственной оболочкой. Для разработчика собственного терминала, панели или планшета его открытые материалы до сих пор могут быть хорошей точкой отсчёта.

Сообщение CutiePi и Raspberry Pi: что представлял собой Linux-планшет и почему проект интересен сегодня появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d1%81%d0%be%d1%84%d1%82-%d0%b8-%d0%be%d1%81/raspberry-pi/raspberry-pi-%d0%bf%d1%80%d0%b5%d0%b2%d1%80%d0%b0%d1%82%d0%b8%d0%bb%d0%b8-%d0%b2-%d1%83%d0%bd%d0%b8%d0%ba%d0%b0%d0%bb%d1%8c%d0%bd%d1%8b%d0%b9-%d0%bf%d0%bb%d0%b0%d0%bd%d1%88%d0%b5%d1%82-%d0%bd%d0%b0-li/feed/ 0
Как добавить произвольное поле в Elasticsearch: ingest pipeline, mapping и проверка https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%b4%d0%be%d0%b1%d0%b0%d0%b2%d0%bb%d0%b5%d0%bd%d0%b8%d0%b5-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%bb%d1%8c%d0%bd%d0%be%d0%b3%d0%be-%d0%bf%d0%be%d0%bb%d1%8f-%d0%b2-elastic-%d0%bd%d0%b0-%d0%bf/ https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%b4%d0%be%d0%b1%d0%b0%d0%b2%d0%bb%d0%b5%d0%bd%d0%b8%d0%b5-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%bb%d1%8c%d0%bd%d0%be%d0%b3%d0%be-%d0%bf%d0%be%d0%bb%d1%8f-%d0%b2-elastic-%d0%bd%d0%b0-%d0%bf/#respond Sun, 06 Sep 2020 19:11:27 +0000 https://clip-clap.ru/?p=1635 Пошаговое добавление собственных полей в Elasticsearch: component template, keyword mapping, ingest pipeline, _simulate, тестовый индекс, поиск и rollback.

Сообщение Как добавить произвольное поле в Elasticsearch: ingest pipeline, mapping и проверка появились сначала на Clip-Clap.

]]>
Ниже — рабочий пример добавления поля app.session_id на стороне Elasticsearch. Сначала задаём тип поля, затем создаём ingest pipeline, проверяем его через _simulate и только после этого отправляем реальные документы.

1. Проверяем доступ к Elasticsearch

export ES_URL=https://elasticsearch.example.com
export ES_API_KEY=CHANGE_ME

curl -sS -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/"
curl -sS -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/_cluster/health?pretty"

Исторический пример: session_id из PHPSESSID

В исходной статье задача была прикладной: достать из HTTP Cookie идентификатор сессии Bitrix PHPSESSID и сохранить его отдельным полем, чтобы потом группировать запросы одного посетителя. Ниже показан пример исходного заголовка Cookie.

Пример PHPSESSID в Cookie Bitrix

2. Создаём component template с mapping

curl -sS -X PUT "$ES_URL/_component_template/app-custom-fields" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{
    "template": {
      "mappings": {
        "properties": {
          "app": {
            "properties": {
              "session_id": { "type": "keyword" },
              "environment": { "type": "keyword" }
            }
          }
        }
      }
    }
  }'

3. Подключаем template к тестовым индексам

curl -sS -X PUT "$ES_URL/_index_template/app-logs-template" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{
    "index_patterns": ["app-logs-*"],
    "composed_of": ["app-custom-fields"],
    "priority": 200
  }'

4. Создаём ingest pipeline

В старом Filebeat 7.x Apache module нужный ingest pipeline сначала находили через API, затем изменяли grok/processors и заново загружали. Скриншоты ниже относятся именно к этой старой схеме; в современных integrations не редактируйте vendor pipeline без понимания того, как обновление integration его заменит.

Просмотр ingest pipeline Filebeat Apache в старом Elastic Stack
Удаление старого ingest pipeline перед повторной загрузкой в историческом сценарии
Проверка состояния Filebeat после загрузки pipeline
Проверка изменённого ingest pipeline в Kibana Dev Tools
curl -sS -X PUT "$ES_URL/_ingest/pipeline/app-add-fields" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{
    "description": "Add application fields",
    "processors": [
      {
        "set": {
          "field": "app.environment",
          "value": "production",
          "override": false
        }
      },
      {
        "rename": {
          "field": "session_id",
          "target_field": "app.session_id",
          "ignore_missing": true
        }
      }
    ]
  }'

5. Проверяем pipeline через _simulate

curl -sS -X POST "$ES_URL/_ingest/pipeline/app-add-fields/_simulate?pretty" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{
    "docs": [
      {
        "_source": {
          "message": "login ok",
          "session_id": "sess-123"
        }
      }
    ]
  }'

В результате должны появиться app.session_id и app.environment, а исходное поле session_id должно исчезнуть.

6. Отправляем тестовый документ

curl -sS -X POST "$ES_URL/app-logs-test/_doc?pipeline=app-add-fields&refresh=true" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{
    "@timestamp": "2026-08-02T06:30:00Z",
    "message": "login ok",
    "session_id": "sess-123"
  }'

7. Проверяем mapping и документ

После появления нового поля в документах старые версии Kibana требовали обновить field list у index pattern. До обновления рядом с полем мог отображаться предупреждающий значок.

Новое session_id в старом Kibana Discover до обновления field list
Refresh field list для старого index pattern filebeat-*
Проверка появления session_id в списке полей
Поиск и группировка событий по session_id в старой Kibana
curl -sS -H "Authorization: ApiKey $ES_API_KEY" \
  "$ES_URL/app-logs-test/_mapping/field/app.session_id?pretty"

curl -sS -H "Authorization: ApiKey $ES_API_KEY" \
  "$ES_URL/app-logs-test/_search?q=app.session_id:sess-123&pretty"

8. Проверяем конфликт типов до production

curl -sS -X POST "$ES_URL/app-logs-test/_doc?refresh=true" \
  -H "Authorization: ApiKey $ES_API_KEY" \
  -H 'Content-Type: application/json' \
  -d '{"app":{"session_id":123}}'

Запись должна завершиться ошибкой типа, потому что поле объявлено как keyword. Такую проверку лучше выполнить на тестовом индексе до подключения основного потока.

9. Пример Logstash

filter {
  if [session_id] {
    mutate {
      rename => { "session_id" => "[app][session_id]" }
      add_field => { "[app][environment]" => "production" }
    }
  }
}

10. Rollback

curl -sS -X DELETE -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/_ingest/pipeline/app-add-fields"
curl -sS -X DELETE -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/_index_template/app-logs-template"
curl -sS -X DELETE -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/_component_template/app-custom-fields"
curl -sS -X DELETE -H "Authorization: ApiKey $ES_API_KEY" "$ES_URL/app-logs-test"

Критерий успеха: _simulate формирует нужные поля, mapping показывает тип keyword, тестовый документ находится по точному значению, а конфликтующий тип отклоняется.

Сообщение Как добавить произвольное поле в Elasticsearch: ingest pipeline, mapping и проверка появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%b4%d0%be%d0%b1%d0%b0%d0%b2%d0%bb%d0%b5%d0%bd%d0%b8%d0%b5-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%bb%d1%8c%d0%bd%d0%be%d0%b3%d0%be-%d0%bf%d0%be%d0%bb%d1%8f-%d0%b2-elastic-%d0%bd%d0%b0-%d0%bf/feed/ 0
Elastic Cloud для логов: подключение Agent, data stream и проверка доставки https://clip-clap.ru/it/%d0%b1%d1%8b%d1%81%d1%82%d1%80%d0%b0%d1%8f-%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%be%d0%b9%d0%ba%d0%b0-elastic-stack-%d0%b2-elastic-cloud-%d0%b4%d0%bb%d1%8f-%d1%81%d0%b1%d0%be%d1%80%d0%b0-%d0%bb%d0%be/ https://clip-clap.ru/it/%d0%b1%d1%8b%d1%81%d1%82%d1%80%d0%b0%d1%8f-%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%be%d0%b9%d0%ba%d0%b0-elastic-stack-%d0%b2-elastic-cloud-%d0%b4%d0%bb%d1%8f-%d1%81%d0%b1%d0%be%d1%80%d0%b0-%d0%bb%d0%be/#respond Sun, 06 Sep 2020 19:05:50 +0000 https://clip-clap.ru/?p=1633 Пошаговое подключение Linux-хоста к Elastic Cloud: Fleet enrollment, установка Elastic Agent, тестовый лог, data stream, поиск через API и rollback.

Сообщение Elastic Cloud для логов: подключение Agent, data stream и проверка доставки появились сначала на Clip-Clap.

]]>
Ниже — минимальная рабочая схема подключения Linux-сервера к Elastic Cloud через Fleet и Elastic Agent. Цель — не просто установить Agent, а получить тестовое событие в data stream и найти его через Elasticsearch API.

1. Проверяем доступность Cloud

В старом интерфейсе Elastic Cloud первым шагом было создание Deployment с выбором облачной площадки и региона. Сегодня мастер выглядит иначе, но смысл тот же: после развёртывания вы получаете Elasticsearch и Kibana endpoints.

Создание Deployment в старом интерфейсе Elastic Cloud
Запущенный Elastic Cloud Deployment и переход в Kibana
Первый вход в старый интерфейс Kibana
curl -I https://YOUR-KIBANA-ENDPOINT
curl -I https://YOUR-ELASTICSEARCH-ENDPOINT

2. Создаём policy в Fleet

  1. Откройте Kibana → Management → Fleet.
  2. Создайте Agent policy, например linux-servers.
  3. Добавьте интеграцию System.
  4. Включите system logs и system metrics.
  5. Сохраните policy.

3. Устанавливаем Elastic Agent

Исторически в Elastic Cloud для Apache logs использовалась связка Filebeat + готовый module. В старой Kibana мастер Add log data показывал готовую инструкцию по установке и настройке. Сейчас этот сценарий в основном заменён Fleet/Elastic Agent, но старые экраны полезны для понимания эволюции процесса.

Раздел Add log data в старой Kibana
Старая инструкция Kibana по сбору Apache logs через Filebeat

Команду скачивания и enrollment-token копируйте из Fleet для своей версии и архитектуры. Типовой порядок:

tar -xzf elastic-agent-*.tar.gz
cd elastic-agent-*
sudo ./elastic-agent install \
  --url=https://YOUR-FLEET-SERVER:8220 \
  --enrollment-token=YOUR_ENROLLMENT_TOKEN

4. Проверяем службу

sudo systemctl status elastic-agent --no-pager
sudo elastic-agent status
sudo elastic-agent inspect

5. Генерируем тестовое событие

logger -p user.warning 'elastic-cloud-test-1633'
journalctl --since '5 min ago' | grep elastic-cloud-test-1633

6. Проверяем data streams

export ES_URL=https://YOUR-ELASTICSEARCH-ENDPOINT
export ES_API_KEY=YOUR_API_KEY

curl -sS -H "Authorization: ApiKey $ES_API_KEY" \
  "$ES_URL/_data_stream/logs-system.*?pretty"

7. Ищем тестовое событие через API

curl -sS -H "Authorization: ApiKey $ES_API_KEY" \
  "$ES_URL/logs-system.*/_search?q=message:elastic-cloud-test-1633&pretty"

8. Проверяем поля

После поступления событий проверьте их не только API-запросом, но и визуально в Discover. В старом Filebeat-сценарии там появлялся индекс filebeat-*; в современной схеме вместо него будут соответствующие data streams.

Просмотр Apache logs в старом Kibana Discover
Настройка отображаемых полей логов в старой Kibana

Готовые integrations также могут устанавливать преднастроенные dashboards. Старый Apache dashboard ниже — пример того, какой результат можно получить сразу после корректного ingest.

Готовый dashboard Apache logs в старой Kibana
  • @timestamp соответствует времени события;
  • host.name содержит имя сервера;
  • data_stream.dataset относится к System integration;
  • message содержит тестовую строку;
  • событие видно в Discover.

9. Диагностика

sudo elastic-agent status
sudo journalctl -u elastic-agent --since '15 min ago' --no-pager
sudo ss -ntp | grep elastic-agent
curl -vk https://YOUR-FLEET-SERVER:8220

10. Rollback

sudo elastic-agent uninstall

После удаления удалите неактивный Agent из Fleet и убедитесь, что policy больше не используется этим хостом.

Критерий успеха: Agent имеет статус Healthy, data stream создан, тестовое сообщение находится через API и Discover, а поля host и dataset заполнены корректно.

Сообщение Elastic Cloud для логов: подключение Agent, data stream и проверка доставки появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d0%b1%d1%8b%d1%81%d1%82%d1%80%d0%b0%d1%8f-%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%be%d0%b9%d0%ba%d0%b0-elastic-stack-%d0%b2-elastic-cloud-%d0%b4%d0%bb%d1%8f-%d1%81%d0%b1%d0%be%d1%80%d0%b0-%d0%bb%d0%be/feed/ 0
Мониторинг бэкенда в Elastic APM: установка агента, trace ID и проверка https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bc%d0%be%d0%bd%d0%b8%d1%82%d0%be%d1%80%d0%b8%d0%bd%d0%b3-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%b4%d0%b8%d1%82%d0%b5%d0%bb%d1%8c%d0%bd%d0%be%d1%81%d1%82%d0%b8-%d0%b1%d1%8d%d0%ba%d0%b5%d0%bd/ https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bc%d0%be%d0%bd%d0%b8%d1%82%d0%be%d1%80%d0%b8%d0%bd%d0%b3-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%b4%d0%b8%d1%82%d0%b5%d0%bb%d1%8c%d0%bd%d0%be%d1%81%d1%82%d0%b8-%d0%b1%d1%8d%d0%ba%d0%b5%d0%bd/#respond Sun, 06 Sep 2020 18:58:02 +0000 https://clip-clap.ru/?p=1631 Пошаговая настройка Elastic APM для бэкенда: APM endpoint, Python-агент, переменные окружения, тестовые запросы, поиск транзакций и trace ID, диагностика и rollback.

Сообщение Мониторинг бэкенда в Elastic APM: установка агента, trace ID и проверка появились сначала на Clip-Clap.

]]>
Ниже — практический пример подключения Python-бэкенда к Elastic APM. Тот же порядок подходит и для других языков: сначала проверяем APM endpoint, затем подключаем агент, создаём тестовую транзакцию и убеждаемся, что она появилась в Elasticsearch и Kibana.

1. Проверяем APM endpoint

export ELASTIC_APM_SERVER_URL=https://apm.example.com
curl -vk $ELASTIC_APM_SERVER_URL/

Ответ 200, 401 или 403 означает, что endpoint доступен. Timeout и connection refused указывают на DNS, firewall, proxy или неверный адрес.

2. Создаём тестовое Python-приложение

python3 -m venv /opt/apm-demo-venv
/opt/apm-demo-venv/bin/pip install flask elastic-apm
install -d -m 755 /opt/apm-demo

3. Добавляем приложение

cat > /opt/apm-demo/app.py <<'EOF'
from flask import Flask
from elasticapm.contrib.flask import ElasticAPM
import time

app = Flask(__name__)
app.config['ELASTIC_APM'] = {
    'SERVICE_NAME': 'apm-demo',
    'SERVER_URL': 'https://apm.example.com',
    'SECRET_TOKEN': 'CHANGE_ME',
    'ENVIRONMENT': 'test',
}
apm = ElasticAPM(app)

@app.get('/fast')
def fast():
    return {'status': 'ok'}

@app.get('/slow')
def slow():
    time.sleep(2)
    return {'status': 'slow'}

@app.get('/error')
def error():
    raise RuntimeError('APM test error')

app.run(host='127.0.0.1', port=5000)
EOF

4. Запускаем вручную

/opt/apm-demo-venv/bin/python /opt/apm-demo/app.py

В другом терминале отправьте тестовые запросы:

curl -sS http://127.0.0.1:5000/fast
curl -sS http://127.0.0.1:5000/slow
curl -i http://127.0.0.1:5000/error

5. Создаём systemd unit

cat > /etc/systemd/system/apm-demo.service <<'EOF'
[Unit]
Description=Elastic APM demo backend
After=network-online.target
Wants=network-online.target

[Service]
Type=simple
WorkingDirectory=/opt/apm-demo
ExecStart=/opt/apm-demo-venv/bin/python /opt/apm-demo/app.py
Restart=on-failure
RestartSec=5

[Install]
WantedBy=multi-user.target
EOF

systemctl daemon-reload
systemctl enable --now apm-demo
systemctl status apm-demo --no-pager
journalctl -u apm-demo -n 100 --no-pager

6. Проверяем данные через Elasticsearch API

curl -sS -u elastic:CHANGE_ME \
  'https://es.example.com/traces-apm*/_search?size=5&sort=@timestamp:desc' \
  -H 'Content-Type: application/json' \
  -d '{"query":{"term":{"service.name":"apm-demo"}},"_source":["@timestamp","service.name","transaction.name","transaction.duration.us","trace.id","error.exception.message"]}'

В выдаче должны появиться транзакции GET /fast, GET /slow и ошибка из /error.

7. Ищем trace ID в Kibana

service.name : "apm-demo"
trace.id : "TRACE_ID_FROM_EVENT"
transaction.name : "GET /slow"

Проверьте duration медленного запроса, stack trace ошибки и связанный trace ID.

8. Проверяем корреляцию логов и traces

Приложение должно писать trace.id и transaction.id в структурированные логи. После этого в Kibana можно перейти от медленной транзакции к связанным сообщениям приложения.

9. Исторический вариант: анализ времени ответа по Nginx-логам

До полноценного APM ту же практическую задачу часто решали по access log Nginx: добавляли request_time и upstream_response_time, разбирали строки через Logstash/grok и строили визуализации в Kibana. Это не заменяет traces и spans, но остаётся полезным дополнением к APM — особенно для проверки того, что видел reverse proxy.

Разобранные Nginx-логи с request_time и upstream_response_time в старой Kibana

В старом dashboard отдельно группировалось время ответа upstream, URI запросов, общее request_time и типы запросов.

Визуализация upstream_response_time в Kibana
Визуализация URI запросов к backend
Визуализация request_time в Kibana
Визуализация типов запросов в Kibana

Итоговый экран объединял эти графики с сырыми логами. В современной схеме такой dashboard логично использовать рядом с APM: APM показывает trace внутри приложения, а Nginx-лог подтверждает внешнее время запроса на границе веб-стека.

Старый Kibana dashboard анализа времени ответа backend

10. Диагностика

systemctl status apm-demo --no-pager
journalctl -u apm-demo --since '15 min ago' --no-pager
curl -vk https://apm.example.com/
ss -lntp | grep ':5000'
python3 -c 'import elasticapm; print(elasticapm.VERSION)'

Ошибки 401/403 означают неверный secret token или API key. Отсутствие событий при рабочем endpoint чаще связано с неправильным service name, environment, sampling или сертификатом.

11. Rollback

systemctl disable --now apm-demo
rm -f /etc/systemd/system/apm-demo.service
systemctl daemon-reload
rm -rf /opt/apm-demo /opt/apm-demo-venv

Критерий успеха: сервис запускается без ошибок, три тестовых endpoint создают транзакции, медленный запрос имеет ожидаемую duration, ошибка содержит stack trace, а trace ID находится через Elasticsearch и Kibana.

Сообщение Мониторинг бэкенда в Elastic APM: установка агента, trace ID и проверка появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d0%b0%d0%b4%d0%bc%d0%b8%d0%bd%d0%b8%d1%81%d1%82%d1%80%d0%b8%d1%80%d0%be%d0%b2%d0%b0%d0%bd%d0%b8%d0%b5/%d0%bc%d0%be%d0%bd%d0%b8%d1%82%d0%be%d1%80%d0%b8%d0%bd%d0%b3-%d0%bf%d1%80%d0%be%d0%b8%d0%b7%d0%b2%d0%be%d0%b4%d0%b8%d1%82%d0%b5%d0%bb%d1%8c%d0%bd%d0%be%d1%81%d1%82%d0%b8-%d0%b1%d1%8d%d0%ba%d0%b5%d0%bd/feed/ 0
Логи Windows Server в Elastic: установка Agent и проверка событий https://clip-clap.ru/it/%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%b0%d0%b8%d0%b2%d0%b0%d0%b5%d0%bc-%d1%81%d0%b1%d0%be%d1%80-%d0%bb%d0%be%d0%b3%d0%be%d0%b2-windows-server-%d0%b2-elk-stack/ https://clip-clap.ru/it/%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%b0%d0%b8%d0%b2%d0%b0%d0%b5%d0%bc-%d1%81%d0%b1%d0%be%d1%80-%d0%bb%d0%be%d0%b3%d0%be%d0%b2-windows-server-%d0%b2-elk-stack/#respond Sun, 06 Sep 2020 18:47:25 +0000 https://clip-clap.ru/?p=1629 Пошаговая отправка Windows Event Log в Elastic: проверка журналов, установка Elastic Agent, Windows integration, тестовое событие, поиск в Kibana и rollback.

Сообщение Логи Windows Server в Elastic: установка Agent и проверка событий появились сначала на Clip-Clap.

]]>
Ниже — рабочая настройка Elastic Agent на Windows Server для отправки журналов System, Application и Security в Elastic. Все команды PowerShell запускаются от администратора.

1. Проверяем журналы и время

Get-Date
w32tm /query /status
Get-WinEvent -ListLog System,Application,Security | Select LogName,RecordCount,IsEnabled
Get-WinEvent -LogName System -MaxEvents 5 | Format-Table TimeCreated,Id,LevelDisplayName,ProviderName

2. Проверяем доступ к Fleet

Test-NetConnection fleet.example.local -Port 8220
Test-NetConnection elastic.example.local -Port 443

3. Скачиваем и распаковываем Agent

New-Item -ItemType Directory -Force C:\Temp\ElasticAgent | Out-Null
Invoke-WebRequest -Uri "URL_ИЗ_FLEET" -OutFile C:\Temp\ElasticAgent\elastic-agent.zip
Expand-Archive C:\Temp\ElasticAgent\elastic-agent.zip -DestinationPath C:\Temp\ElasticAgent -Force
Get-ChildItem C:\Temp\ElasticAgent

4. Устанавливаем Agent

cd C:\Temp\ElasticAgent\elastic-agent-*
.\elastic-agent.exe install --url=https://fleet.example.local:8220 --enrollment-token=TOKEN_ИЗ_FLEET

5. Проверяем службу

Get-Service Elastic-Agent
& "C:\Program Files\Elastic\Agent\elastic-agent.exe" status
Get-WinEvent -LogName Application -MaxEvents 100 | Where-Object ProviderName -Match "Elastic"

6. Добавляем Windows integration

  1. Fleet → Agent policies → политика сервера.
  2. Add integration → Windows.
  3. Включите System, Application и Security.
  4. Сохраните policy и дождитесь статуса Healthy.

7. Генерируем тестовое событие

eventcreate /T INFORMATION /ID 100 /L APPLICATION /SO CLIP-CLAP-ELASTIC /D "ELASTIC-WINDOWS-TEST"
Get-WinEvent -FilterHashtable @{LogName='Application'; ProviderName='CLIP-CLAP-ELASTIC'} -MaxEvents 5

8. Ищем событие в Kibana

host.name : "SERVER01"
winlog.channel : "Application"
winlog.provider_name : "CLIP-CLAP-ELASTIC"
message : "ELASTIC-WINDOWS-TEST"

9. Визуализации и dashboard

После того как Windows Event Log стабильно поступает в Elastic, данные можно свести в отдельные визуализации. В старой Kibana ниже показан пример разбивки событий по рабочим станциям и общий dashboard Windows Server.

Пример визуализации Windows Server в Kibana
Пример dashboard Windows Server в Kibana

Для файлового сервера имеет смысл отдельно вывести пользователей, типы файловых операций и отфильтрованные события доступа. Старый пример такого dashboard сохранён ниже как ориентир состава данных.

Пример dashboard аудита Windows File Server в Kibana

10. Проверяем Security log

auditpol /get /category:*
Get-WinEvent -LogName Security -MaxEvents 20 | Select TimeCreated,Id,Message

Если Security пуст, проверьте audit policy и права службы. Не включайте все категории аудита без плана по объёму.

11. Диагностика Agent

& "C:\Program Files\Elastic\Agent\elastic-agent.exe" status
Get-Service Elastic-Agent
Get-ChildItem "C:\Program Files\Elastic\Agent\data" -Recurse -Filter *.log | Sort LastWriteTime -Descending | Select -First 10 FullName,LastWriteTime
Test-NetConnection fleet.example.local -Port 8220

12. Rollback

& "C:\Program Files\Elastic\Agent\elastic-agent.exe" uninstall
Get-Service Elastic-Agent -ErrorAction SilentlyContinue

Критерий успеха: Agent имеет статус Healthy, тестовое событие видно локально и в Kibana, timestamp совпадает, а System/Application/Security поступают без постоянных ошибок.

Сообщение Логи Windows Server в Elastic: установка Agent и проверка событий появились сначала на Clip-Clap.

]]>
https://clip-clap.ru/it/%d0%bd%d0%b0%d1%81%d1%82%d1%80%d0%b0%d0%b8%d0%b2%d0%b0%d0%b5%d0%bc-%d1%81%d0%b1%d0%be%d1%80-%d0%bb%d0%be%d0%b3%d0%be%d0%b2-windows-server-%d0%b2-elk-stack/feed/ 0