Библиотека знаний - system

Бэкап с помощью rsync на Debian

Anonymous (anonymous@undisclosed.example.com) — 2015-11-03T10:18:02+00:00

shell, utils, network, backup, rsync, ssh

Бэкап с помощью rsync на Debian

nano backup.sh

  #!/bin/sh
 
  current=`date "+%Y-%m-%d"`
 
  find /var/backups/system/ -maxdepth 1 -name "20*" -mtime +7 -exec rm -Rf {} \;
 
  /usr/bin/rsync -rlptgo --delete --stats --backup --backup-dir=/var/backups/system/$current --exclude-from='/etc/backup_system/backup_exclude.conf' / /var/backups/system/current
 
  wait

backup_exclude.conf

/mnt
/tmp
/dev
/proc
/sys
/run
/var
/media
/var/backups
**lost+found
/var/tmp
/var/log
/var/run
/var/lock
/var/spool
/var/cache
/var/lib
/var/local

Параметры:

-v: просмотр хода работы.
-a: указывает на то, что необходимо сохранить все атрибуты файлов.
-r: двигаться по каталогам рекурсивно.
–delete: файлы которые были удалены в источнике, будут удалены и в приемнике.
–stats: выводит подробную статистику по окончанию работы.

Восстановление

rsync -rlptgo /var/backups/system/ /restore/
mkdir /restore/tmp
mkdir /restore/dev

Кириллица и rsync под Windows

Anonymous (anonymous@undisclosed.example.com) — 2015-09-30T12:47:50+00:00

shell, utils, network, windows, rsync, ssh

Кириллица и rsync под Windows

В Руководстве пользователя FreeNAS для синхронизации с Windows-компьютерами через протокол RSYNC предлагается использовать программы DeltaCopy и NASBackup. Однако, при синхронизации файлов и каталогов с названиями на русском языке возникают проблемы. Ошибки вызваны тем, что для эмуляции UNIX-окружения в DeltaCopy и NASBackup используется библиотека “Cygwin”, не поддерживающая работу с кодировкой UTF-8.

Решение проблемы состоит в замене cygwin1.dll на версию с поддержкой UTF-8. Ее можно найти по адресу: http://www.oki-osk.jp/esc/utf8-cygwin/

Настройка RSYNC для точной синхронизации данных

Anonymous (anonymous@undisclosed.example.com) — 2015-09-30T12:46:30+00:00

shell, utils, network, rsync, ssh

Настройка RSYNC для точной синхронизации данных

Потребовалось синхронизировать данные на 2 машинах под управлением Red Hat 3. Для выполнения данной задачи использовалась утилита rsync. Ее основные характеристики:

$-a – архивный режим (включает рекурсивное копирование и сохранение прав и владельца)
$-t, --times – обновлять время модификации файла на приёмной стороне. При отсутствии этой опции или -a становиться неэффективной оптимизация передачи по времени изменения файлов
$-c, --checksum – использование сверки по контрольным суммам, а не по времени изменения и размеру
$--size-only – проверка только по размеру файлов
$-r – рекурсивный режим (копирование всех подпапок и файлов в них)
$-v – подробные вывод операций
$-z – компрессия данных при передачи
$-p – сохранять права
$--del – удалить файлы в папке назначения которых нет в источнике (точная копия)
$-R – использовать относительные пути при создании символических ссылок
$--numeric-ids – не транслировать имена владельца и группы в цифровые UID и GID, оставить на удалённой стороне номера как есть
$--size-only – использование для сверки только размер файлов
$--bwlimit=KBPS – ограничение пропускной способности, чтобы не забивать канал (Kbit/s)
$--ignore-errors – продолжать копирование и удаление после появления ошибок
$--delete - удалять файлы со стороны получателя, если их нет на отправителе(ТОЧНАЯ КОПИЯ)

Кроме того, передачу данных можно туннелировать через ssh, в нашем случае шифрование данных при передаче не требовалось. Для более подробной информации об утилите выполните

man rsync

Ниже перечислен порядок действий.

1. Устанавливаем rsync на обеих машинах:

yum install rsync

2. На машине-отправителе редактируем файл /etc/xinetd.d/rsync:

service rsync {
    disable = no
    socket_type     = stream
    wait            = no
    user            = root
    server          = /usr/bin/rsync
    server_args     = --daemon
    log_on_failure  += USERID
}

3. Перезапустим xinetd:

service xinetd restart

4. Изменим /etc/rsyncd.conf:

# Common
pid file = /var/run/rsyncd.pid
max connections = 5

# Security
use chroot = yes
uid = nobody
gid = nobody
hosts allow = 192.168.1.1
hosts deny  = *

# Logging
log file = /var/log/rsync.log
transfer logging = yes
log format = %t %a %m %f %b
syslog facility = local3
timeout = 300 

# Shares
[ftp]
path=/var/ftp/pub
comment=server's ftp

5. При необходимости, откроем на фаерволле машины-отправителя порт 873(rsync по умолчанию)

6. Протестируем:

# rsync rsync://127.0.0.1/
ftp             servers's ftp

7. Далее, отредактируем /etc/rsyncd.conf в соответствии с указанным в п.4 образцом:.

Получилось вот так:

# Common
pid file = /var/run/rsyncd.pid
max connections = 5

# Security
#use chroot = yes
uid=myuser
gid=mygroup
hosts allow = 192.168.0.14
hosts deny  = *


# Logging
log file = /var/log/rsync.log
transfer logging = yes
log format = %t %a %m %f %b
syslog facility = local3
timeout = 300 

# Shares
[test]
path=/home/myuser/test/
comment=test

[htdocs]
path=/usr/local/apache/htdocs/
comment=htdocs data


[data]
path=/home/myuser/data/
comment=data

8. На машине-получателе настраиваем скрипт запуска rsync по крону:

#!/bin/bash
#Copying of /home/myuser/data/
rsync -avz --delete 192.168.0.11::data /home/myuser/data/
#Copyint htdocs
#rsync -avz --delete 192.168.0.11::htdocs /usr/local/apache/htdocs/

Обновление mercurial на Ubuntu 10.04

Anonymous (anonymous@undisclosed.example.com) — 2011-10-31T22:32:15+00:00

Обновление mercurial на Ubuntu 10.04

Возникла проблема в Redmine при переключении с ветки на ветку. Python падал с невнятной ошибкой а в логах production redmie ничего толком небыло. Пришлось выцепить кусок кода и внести корректировки для отображения полного списка параметров. После ввел параметры в репе и увидел что данные с бранчей не идут. Те виноват не Redmine ни Python а всего навсего HG Mercurial (на серваке по умолчанию ставится 1.6.2).

Обновляем:

sudo add-apt-repository ppa:mercurial-ppa/releases
sudo apt-get update
sudo apt-get install mercurial

На данный момент ставится 1.9.1-1ppa2~lucid1

Примеры работы с данными на локальной машине

Anonymous (anonymous@undisclosed.example.com) — 2015-11-03T09:04:27+00:00

shell, utils, network, scp, rsync, ssh

Примеры работы с данными на локальной машине

Простое копирование файлов

В принципе, команда ср отлично выполняет свою функцию, за исключением небольшой прихоти – при копировании больших файлов хотелось бы знать сколько времени осталось до завершения операции (т.е. всего-навсего нужно вывести прогресс операции копирования). Данную задачу можно решить несколькими способами: 1) Использовать команду scp (потребует ввода пароля пользователя, а также ввода полного пути к каталогам):

scp -r <что копировать> localhost:<куда копировать>

2) Использовать команду rsync с ключом –progress:

rsync --progress -av <что копировать> <куда копировать>

При копировании каталогов (а не файлов) в последнем случае следует обратить внимание на знак "/" замыкающий имя каталога-источника, т.к. команда rsync будет интерпретировать результат по-разному:

rsync --progress -av <каталог-источник> <каталог-назначения/>
rsync --progress -av <каталог-источник/> <каталог-назначения/>

Наличие завершающих слешей "/" обязательно, иначе результат копирования будет содержать корневую папку <каталог-источник> внутри <каталога-назначения>.

Копирование файла а из dir1 в dir2:

scp  /home/dir1/a   localhost:/home/dir2/

Копирование каталога из dir1 в dir2:

scp  -r  /home/dir1/     localhost:/home/dir2/

Копирование файла а из dir1 в dir2:

rsync --progress -av   ~/dir1/a  ~/dir2/

Копирование файлов из dir1 в dir2:

rsync --progress -av   ~/dir1/    ~/dir2/

Копирование самой директории dir1 (со всем содержимым) в dir2:

rsync --progress -av   ~/dir1     ~/dir2/

Синхронизация каталогов

Точная копия каталогов (удаление всех файлов из dir2, которых нет в dir1):

rsync --delete -av   ~/dir1/  ~/dir2/

Исключить каталоги, синхронизация которых не требуется (например, каталог dir3 находящийся в dir1 при копировании последнего в dir2 будет пропущен):

rsync -av   ~/dir1/  --exclude="./~dir3/"   ~/dir2/

Двусторонняя синхронизация (объединить содержимое dir1 и dir2)

rsync -av ~/dir1/  ~/dir2/   &&   rsync -av  ~/dir2/  ~/dir1/

Работа с удаленной машиной

Скопировать полностью структуру фалов и папок из /home/data1/ в /home/other/data2/:

rsync -av /home/data1/ /home/other/data2/

Наличие завершающих слешей в /home/data1/ файла обязательно, иначе результат копирования будет содержать корневую папку data1/ в папке /home/other/data2/. Выполнить копирование на удалённую систему по ssh:

rsync -rvz /home/data1/ user@server.com:/home/data1/

Задать альтернативный порт ssh:

rsync -rvz -e 'ssh -p 10022' /home/data1/ user@server.com:/home/data1/

Исключить некоторые файлы:

rsync -rvz /home/data1/ --exclude="tmp/*" --exclude="*~" user@server.com:/home/data1/

Не учитывать пользователя, группу и права при передачи:

rsync -rvz --no-p --no-o --no-g /home/data1/ user@server.com:/home/data1/

Описание опций

$-a, --archive – архивный режим, включает рекурсивное копирование и сохранение прав и владельца (ключи rlptgoD)
$-t, --times – обновлять время модификации файла на приёмной стороне. При отсутствии этой опции или -a становиться неэффективной оптимизация передачи по времени изменения файлов
$-c, --checksum – использование сверки по контрольным суммам, а не по времени изменения и размеру
$--size-only – проверка только по размеру файлов
$-r – рекурсивный режим (копирование всех подпапок и файлов в них)
$-v – подробные вывод операций
$-z – компрессия данных при передачи
$-p – сохранять права
$--del – удалить файлы в папке назначения которых нет в источнике (точная копия)
$-R – использовать относительные пути при создании символических ссылок
$--numeric-ids – не транслировать имена владельца и группы в цифровые UID и GID, оставить на удалённой стороне номера как есть
$--size-only – использование для сверки только размер файлов
$--bwlimit=KBPS – ограничение пропускной способности, чтобы не забивать канал (Kbit/s)
$--ignore-errors – продолжать копирование и удаление после появления ошибок
$-h – вывод результатов с человеко-читаемом формате
$-A, --acls – сохранение списков ACL
$-H, --hard-links – сохранение жестких ссылок
$-S, --sparse – оптимизировать разреженные файлы
$-x, --one-file-system – не выходить за пределы текущей точки монтирования
$--exclude=

/etc/init.d/php-fastcgi

Anonymous (anonymous@undisclosed.example.com) — 2011-10-31T22:31:05+00:00

/etc/init.d/php-fastcgi

#!/bin/bash
BIND=127.0.0.1:9000
USER=www-data
PHP_FCGI_CHILDREN=1
PHP_FCGI_MAX_REQUESTS=1000
PHP_CGI=/usr/bin/php-cgi
PHP_CGI_NAME=`basename $PHP_CGI`
PHP_CGI_ARGS="- USER=$USER PATH=/usr/bin PHP_FCGI_CHILDREN=$PHP_FCGI_CHILDREN PHP_FCGI_MAX_REQUESTS=$PHP_FCGI_MAX_REQUESTS $P$
RETVAL=0

start() {
      echo -n "Starting PHP FastCGI: "
      start-stop-daemon --quiet --start --background --chuid "$USER" --exec /usr/bin/env -- $PHP_CGI_ARGS
      RETVAL=$?
      echo "$PHP_CGI_NAME."
}
stop() {
      echo -n "Stopping PHP FastCGI: "
      killall -q -w -u $USER $PHP_CGI
      RETVAL=$?
      echo "$PHP_CGI_NAME."
}

case "$1" in
    start)
      start
  ;;
    stop)
      stop
  ;;
    restart)
      stop
      start
  ;;
    *)
      echo "Usage: php-fastcgi {start|stop|restart}"
      exit 1
  ;;
esac
exit $RETVAL

Ace Stream

Anonymous (anonymous@undisclosed.example.com) — 2025-08-04T16:56:00+00:00

kodi, xbmc, streaming, acestream, ace, tv, hd

Ace Stream

Скачать

Проверка работоспособности

acestream настроен на IP: 192.168.1.131

http://192.168.1.131:6878/webui/api/service?method=get_version&format=jsonp&callback=mycallback

Подробнее...

Запуск из консоли

$ nohup acestreamengine --client-console --cache-dir /mnt/2/.cache --publish-dir /mnt/2/.ace --service-remote-access --bind-all --log-file /mnt/2/.log-ace-stream &

Advanced Linux Sound Architecture (ALSA)

Anonymous (anonymous@undisclosed.example.com) — 2012-10-31T23:20:40+00:00

Advanced Linux Sound Architecture (ALSA)

Архитектура звуковых драйверов, а также широкий их набор для Linux, призванная сменить OSS и обеспечивающая возможность обмена между приложениями звуковыми данными с гарантируемой предельно низкой задержкой. ALSA поддерживает широкий спектр как любительских, так и профессиональных звуковых интерфейсов (в том числе, многоканальных), а также совместима с OSS API и способна работать с большинством программ написанных только для OSS.

Утилиты

aplay -l выводит список устройств 
aplay -L расширенный список устройств
aplay -D (устройство) ( тестовый файл) --- производим тестирование
speaker-test -- из пакета alsa-utils выводит технические данные

Список звуковых карт

cat /proc/asound/cards

Проверка вывода звука

speaker-test -c4 -Dplug:surround51 -twav
speaker-test -Dplug:surround51
aplay -D plughw:1,3 Front_Center.wav

Заголовок

Anonymous (anonymous@undisclosed.example.com) — 2023-12-15T12:42:50+00:00

shell, utils, benchmark

Заголовок

Установка

aptitude install apache2-utils

Параметры

-A auth-username:password - передать данные для базовой аутентификации. То есть, фактически можно тестировать даже если доступ закрыт с помощью базовой аутентификации (htpasswd).
-c concurrency - количество параллельных запросов в единицу времени. По умолчанию, один реквест в единицу времени (можно считать, что в секунду).
-С cookie-name=value - добавлять куки. Задается в виде пары имя=значение. Это поле можно повторять.
-f protocol - задает SSL/TLS протокол (SSL2, SSL3, TLS1, or ALL).
-h - отобразить краткую справку по параметрам
-k - включить KeepAlive, то есть осуществлять множество запросов в течение одной HTTP-сессии. По умолчанию данная возможность отключена.
-n requests - количество запросов, которое необходимо выполнить в течение сессии тестирования. По умолчанию, выполняется только один запрос, что не дает общей картины.
-q - подавляет вывод некоторых сообщений о процессе тестирования.
-t timelimit - максимальное количество секунд, которое необходимо затратить на тестирование. Это подразумевает значание параметра -n равное 50000. По умолчанию временной лимит не установлен.
-v verbosity - устанавливает уровень "разговорчивости": 4 и выше отображает информацию о заголовках, 3 и выше - информацию о кодах ответа (404, 200 и т. д.), 2 и выше - выводить предупреждения и прочую информацию.
-V - отобразить версию и выйти.
-w - вывести результаты в виде HTML-таблицы. По умолчанию таблица состоит из двух колонок с белым фоном.
-x <table>-attributes - строка для использования в качестве атрибутов для <table>. Атрибуты вставляются <table СЮДА >.
-y <tr>-attributes - строка атрибутов для <tr>.
-z <td>-attributes - строка атрибутов для <td>.
-X proxy[:port] - использовать прокси-сервер для запросов.

Пример

ab -c 10 -n 6000 http://localhost:8080/

Apache

Anonymous (anonymous@undisclosed.example.com) — 2016-03-16T15:57:02+00:00

Apache

Программы

Anonymous (anonymous@undisclosed.example.com) — 2012-12-01T21:08:40+00:00

Программы

Cairo Dock

Менеджер пакетов APT: вопросы и ответы

Anonymous (anonymous@undisclosed.example.com) — 2024-02-23T01:51:30+00:00

shell, utils, system, apt, dpkg, NO PUBKEY

Менеджер пакетов APT: вопросы и ответы

aptitude - Утилита установки пакетов

Anonymous (anonymous@undisclosed.example.com) — 2015-10-21T23:58:27+00:00

utils, shell, system, command

aptitude - Утилита установки пакетов

Обновление дистрибутива

aptitude update
aptitude dist-upgrade
reboot
aptitude update
aptitude -f install
reboot

asdf

Anonymous (anonymous@undisclosed.example.com) — 2023-10-14T23:00:16+00:00

asdf

Install

$ git clone https://github.com/asdf-vm/asdf.git ~/.asdf --branch v0.12.0
$ echo . "$HOME/.asdf/completions/asdf.bash" >> ~/.bashrc
$ echo "[ -s \"$HOME/.asdf/asdf.sh\" ] && source \"$HOME/.asdf/asdf.sh\"" >> ~/.bashrc

Use it

$ asdf plugin list all | grep nodejs
$ asdf plugin add nodejs
$ asdf list all nodejs
$ asdf install nodejs latest
$ asdf global nodejs latest
$ asdf current
$ asdf plugin list --urls

global - Устанавливается глобально в домашнюю папку
local - Устанавливается в текущую папку

Update

$ asdf plugin update --all 
$ asdf update --head

awk

Anonymous (anonymous@undisclosed.example.com) — 2016-02-17T14:15:36+00:00

awk

AWS консольный клиент

Anonymous (anonymous@undisclosed.example.com) — 2025-12-15T22:55:42+00:00

aws, s3

AWS консольный клиент

Установка

Native

$ curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip"
$ unzip awscliv2.zip
$ sudo ./aws/install

Python

$ mkdir ~/.aws/
$ sudo pip3 install awscli
$ nano ~/.aws/credentials

Настройка

aws configure

AWS Access Key ID — идентификатор статического ключа, созданного при подготовке к работе.
AWS Secret Access Key — содержимое статического ключа.
Default region name — регион ru-central1.

~/.aws/credentials

[default]
  aws_access_key_id = id
  aws_secret_access_key = secretKey
  region=ru-central1

$ alias ycs3='aws s3 --endpoint-url=https://storage.yandexcloud.net'
$ aws s3 --endpoint-url=https://storage.yandexcloud.net ls
$ ycs3 ls

$ export PYTHONPATH=/Library/Python/2.7/site-packages; aws --endpoint-url=https://storage.yandexcloud.net s3 ls

Загрузить объекты

$ aws --endpoint-url=https://storage.yandexcloud.net \
  s3 cp --recursive local_files/ s3://bucket-name/path_style_prefix/

$ aws --endpoint-url=https://storage.yandexcloud.net \
  s3 cp --recursive --exclude "*" --include "*.log" \
  local_files/ s3://bucket-name/path_style_prefix/

$ screen aws --endpoint-url=https://storage.yandexcloud.net \
  s3 cp --recursive ci/ s3://pim-core-prod/ci/

Получить список объектов

$ aws --endpoint-url=https://storage.yandexcloud.net \
  s3 ls --recursive s3://bucket-name

Удалить объекты

$ aws --endpoint-url=https://storage.yandexcloud.net \
  s3 rm s3://bucket-name/path_style_prefix/ --recursive

Получить объект

$ aws --endpoint-url=https://storage.yandexcloud.net \
  s3 cp s3://bucket-name/textfile.txt textfile.txt

Examples

$ aws --endpoint-url=https://storage.yandexcloud.net s3 sync /mnt/files s3://s3corp-files/
$ aws s3 cp s3://src_bucket/file  s3://dst_bucket/file --source-region eu-west-1 --region ap-northeast-1
$ aws s3api get-bucket-location --bucket my_bucket
$ hdfs dfs -cp -f "s3://AccessKey:SecurityKey@ExternalBucket/SourceFoldername/*.*" "s3://AccessKey:SecurityKey@ExternalBucket/TargetFoldername"
$ aws s3 sync
$ aws cp --recursive s3://<source bucket> s3://<destination bucket>
$ aws s3 sync <source> <destination>
$ aws s3 sync <S3Uri> <LocalPath>
$ aws s3 sync <LocalPath> <S3Uri>
$ aws s3 sync <S3Uri> <S3Uri> 
$ s3cmd cp -r --acl-public s3://bucket1 s3://bucket2

AWStats - Сервер статистики

Anonymous (anonymous@undisclosed.example.com) — 2016-01-20T09:30:54+00:00

awstats, webstat, nginx

AWStats - Сервер статистики

Установка

Установка perl-fastcgi

$ apt-get install fcgiwrap spawn-fcgi

Проверка

$ service fcgiwrap status

Настройка Nginx

# Perl fastcgi
location ~ \.pl$ {
  gzip off;
  try_files $uri =404;
  root /var/www/;
  fastcgi_pass unix:/var/run/fcgiwrap.socket;
  include /etc/nginx/fastcgi_params;
  fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
  fastcgi_ignore_client_abort off;
}

Настройка AWStats

Настройка Nginx

server {
    location / {
        root   /home/vse2.reklamu.ru/awstats/;
        index  awstats.html;
        access_log off;
    }

    location  /awstats-icon/ {
        alias  /usr/share/awstats/icon/;
        access_log off;
    }

    location ~ ^/cgi-bin {
        fastcgi_pass   unix:/var/run/fcgiwrap.socket;
        include /etc/nginx/fastcgi_params;
        fastcgi_param  SCRIPT_FILENAME  /usr/lib$fastcgi_script_name;
        access_log off;
    }
}

Дальше натравим awstats на логи nginx. Приступаем к настройке парсера:

cp /etc/awstats/awstats.conf /etc/awstats/awstats.[host-name].conf

Если у Вас на одном сервере находится больше одного сайта, тогда лучше создавать для них отдельные конфигурационные файлы. Дальше приступаем к редактированию ново созданного файла:

/etc/awstats/awstats.[host-name].conf

Откройте его в Вашем любимом редакторе, затем найдите и отредактируйте следующие значения согласно конфигурации сервера:

LogFile="/var/log/nginx/site_access.log" #path to logfile;

LogFormat=1 #for full statistics;

SiteDomain="[host-name]” #domainname;

HostAliases="www.[host-name] [host-name]" #site aliases

Очищаем БД статистики

$ rm /var/lib/awstats/*

Создаем индексную страницу

$ /usr/lib/cgi-bin/awstats.pl -config=[host-name] -update -output > /home/[host-name]/awstats/awstats.html

Следующим шагом является создание задачи в crontab для регулярного парсинга лог файлов. Естественно хорошо было бы выполнять ее с правами суперпользователя (root) : crontab -e

*/20 * * * * /usr/lib/cgi-bin/awstats.pl -config=[host-name] -update -output > /home/[host-name]/awstats/awstats.html

Backup с помощью rsyncd

Anonymous (anonymous@undisclosed.example.com) — 2018-10-04T10:33:22+00:00

shell, utils, network, rsync, rsyncd, backup

Backup с помощью rsyncd

Решил настроить backup. Первая мысль была: ночью сжимать все в один большой архив и отправлять по сети с помощью scp, например.. Но этот вариант не устраивал меня как минимум по двум причинам:

- Копироваться будут абсолютно все файлы, даже которые не изменились - Для авторизации придется использовать ключи, что не есть хорошо для безопасности

Прогуглив этот вопрос нашел замечательную утилиту rsync ее и стал мучить. ))

Итак, работать все будет следующим образом: на компьютере, который мы будем бэкапить, ставим и настраиваем rsync сервер, на backup сервере настраиваем rsync клиент. После этого синхронизиркем данные на backup сервере с данными на других серверах. Для примера, имя бэкап сервера будет: backup, а имя машины с которой мы будем синхронизировать данные — mail:

Проверка

  mail# uname -rsn
  FreeBSD mail.teachers 6.1-RELEASE
  mail#

  /root/> uname -rsn
  FreeBSD backup 6.1-RELEASE-p6
  /root/>

Настройка

Сначала настроим rsync сервер. Идем в порты ставить:

# apt-get install rsync

nano rsyncd.conf

  # Файл приветствия
  motd file = /etc/new_motd
 
  # Лог файл
  log file = /var/log/rsyncd.log
 
  # Писать в лог о скачивание файлов
  transfer logging = true
 
  # Описание секции ETC
  [etc]
          # Путь к директории
          path = /etc/
 
          # Под каким uid'ом работать
          uid = root
 
          # Только чтение
          read only = yes
 
          # Разрешать просмотр файлов
          list = yes
 
          # Комментарий
          comment = ETC directory
 
          # Хосты, которым разрешен доступ
          hosts allow = 192.168.1.249
 
          # Разрешенные пользователи
          auth users = backup
 
          # Путь к файлу с паролями
          secrets file = /usr/local/etc/rsyncd.scrt
 
  # Далее может идти описание других секций(по аналогии с samba и шарами)
  Создаем необходимые файлы и директории

  mail# cat > /etc/new_motd
  HELLO FROM RSYNC
 
  mail# touch /var/log/rsyncd.log
  mail# chmod 0600 /var/log/rsyncd.log
  mail# chown root:wheel /var/log/rsyncd.log
  mail# cat > /usr/local/etc/rsyncd.scrt
  backup:123456
  mail# chown root:wheel /usr/local/etc/rsyncd.scrt
  mail# chmod 0600 /usr/local/etc/rsyncd.scrt
  mail# mv /usr/local/etc/rc.d/rsyncd /usr/local/etc/rc.d/rsyncd.sh
  mail# echo rsyncd_enable=\"YES\" >> /etc/rc.conf
  mail# /usr/local/etc/rc.d/rsyncd.sh start
  Starting rsyncd.
  mail# ps ax | grep rsyn
  97920  ??  Ss     0:00.00 /usr/local/bin/rsync --daemon
  97922  p0  S+     0:00.01 grep rsyn
  mail#

Теперь перейдем к настройке клинта, точнее настраивать там ничего не надо… Нужно просто проверить как все работает:

  /root/> cd /usr/ports/net/rsync/
  /usr/ports/net/rsync/> make install clean
  ... skipped ...
  /usr/ports/net/rsync/> rehash
  /usr/ports/net/rsync/>

Проверяем работу сервера:

  /root/> rsync mail::
  HELLO FROM RSYNC
 
 
  etc             ETC directory
  var             VAR directory
  /root/>

Теперь пробуем авторизоваться:

  /usr/ports/net/rsync/> rsync backup@mail::etc
  HELLO FROM RSYNC
 
 
  Password:
  @ERROR: auth failed on module etc
  rsync error: error starting client-server protocol (code 5)
   at main.c(1296) [receiver=2.6.8]
  /usr/ports/net/rsync/> rsync backup@mail::etc
  HELLO FROM RSYNC
 
 
  Password:
  drwxr-xr-x        2048 2006/10/05 21:27:03 .
  lrwxrwxrwx          12 2006/09/15 21:24:09 aliases
  -rw-r--r--       16384 2006/09/17 14:27:21 aliases.db
  -rw-r--r--         209 2006/05/07 08:00:23 amd.map
  -rw-r--r--        1234 2006/05/07 08:00:23 apmd.conf
  -rw-r--r--         231 2006/05/07 08:00:23 auth.conf
  -rw-r--r--         737 2006/05/07 08:00:23 crontab
  -rw-r--r--         108 2006/05/07 08:00:23 csh.cshrc
  -rw-r--r--         481 2006/05/07 08:00:23 csh.login
  -rw-r--r--         110 2006/05/07 08:00:23 csh.logout
  ... skipped ...
 
  /usr/ports/net/rsync/>

В первый раз я ввел неверный пароль. Все конечно хорошо, но если запускать бэкап по крону, то как вводить пароль? Для этого можно указать password-file:

  /usr/ports/net/rsync/> cat > /usr/local/etc/rsyncd.scrt
  123456
  /usr/ports/net/rsync/> chown root:wheel /usr/local/etc/rsyncd.scrt
  /usr/ports/net/rsync/> chmod 0600 /usr/local/etc/rsyncd.scrt
  /usr/ports/net/rsync/> rsync --password-file=/usr/local/etc/rsyncd.scrt \
  ? backup@mail::etc
  HELLO FROM RSYNC
 
  drwxr-xr-x        2048 2006/10/05 21:27:03 .
  lrwxrwxrwx          12 2006/09/15 21:24:09 aliases
  -rw-r--r--       16384 2006/09/17 14:27:21 aliases.db
  -rw-r--r--         209 2006/05/07 08:00:23 amd.map
  -rw-r--r--        1234 2006/05/07 08:00:23 apmd.conf
  -rw-r--r--         231 2006/05/07 08:00:23 auth.conf
  -rw-r--r--         737 2006/05/07 08:00:23 crontab
  -rw-r--r--         108 2006/05/07 08:00:23 csh.cshrc
  -rw-r--r--         481 2006/05/07 08:00:23 csh.login
  -rw-r--r--         110 2006/05/07 08:00:23 csh.logout
  ... skipped ...
  /usr/ports/net/rsync/>

На сервере, в логах будет примерно следующее:

  mail# tail -3 /var/log/rsyncd.log
  2006/10/05 21:53:21 [98220] connect from backup.teachers (192.168.1.249)
  2006/10/05 21:53:21 [98220] rsync on etc from backup@backup.teachers (192.168.1.249)
  2006/10/05 21:53:21 [98220] sent 1807 bytes  received 99 bytes  total size 411665
  mail#

На backup сервере создадим директорию, где будут храниться забэкаппенные файлы и начинаем backup:

  /root/> df -alh | grep backup
  /dev/ad1s1d    144G    2.0K    133G     0%    /backup
  /root/> mkdir -p /backup/mail.teachers/etc/
  /root/> chmod -R 0700 /backup/mail.teachers/
  /root/> ls -la /backup/mail.teachers/
  total 6
  drwx------  3 root  wheel  512 Oct  5 22:01 .
  drwxr-xr-x  3 root  wheel  512 Oct  5 22:01 ..
  drwx------  2 root  wheel  512 Oct  5 22:01 etc
  /root/> rsync --update --recursive \
  ? --password-file=/usr/local/etc/rsyncd.scrt backup@mail::etc \
  ? /backup/mail.teachers/etc/
  HELLO FROM RSYNC
 
 
  skipping non-regular file "aliases"
  skipping non-regular file "namedb"
  skipping non-regular file "rmt"
  skipping non-regular file "termcap"
  /root/>

Ссылочки rsync качать не стал. ;). Смотрим, что у нас получилось:

  /root/> ls -la /backup/mail.teachers/etc/
  total 528
  drwx------  18 root  wheel   2048 Oct  5 22:03 .
  drwx------   3 root  wheel    512 Oct  5 22:01 ..
  drwxr-xr-x   2 root  wheel    512 Oct  5 22:03 X11
  -rw-r--r--   1 root  wheel  16384 Oct  5 22:03 aliases.db
  -rw-r--r--   1 root  wheel    209 Oct  5 22:03 amd.map
  -rw-r--r--   1 root  wheel   1234 Oct  5 22:03 apmd.conf
  -rw-r--r--   1 root  wheel    231 Oct  5 22:03 auth.conf
  drwxr-xr-x   2 root  wheel    512 Oct  5 22:03 bluetooth
  -rw-r--r--   1 root  wheel    737 Oct  5 22:03 crontab
  -rw-r--r--   1 root  wheel    108 Oct  5 22:03 csh.cshrc
  -rw-r--r--   1 root  wheel    481 Oct  5 22:03 csh.login
  -rw-r--r--   1 root  wheel    110 Oct  5 22:03 csh.logout
  ... skipped ...
  /root/>

На сервере:

  mail# tail -3 /var/log/rsyncd.log
  2006/10/05 22:00:05 [98379] send backup.teachers 
  [192.168.1.249] etc (backup) ssh/sshd_config 3042
  2006/10/05 22:00:05 [98379] send backup.teachers 
  [192.168.1.249] etc (backup) ssl/openssl.cnf 7869
  2006/10/05 22:00:05 [98379] sent 1286010 bytes  
  received 7581 bytes  total size 1264419
  mail#

Как видите, у нас передалась вся директория etc и все поддиректории. Давайте добавим в файл /etc/hosts пробел и попробуем сделать бэкап:

mail# echo "" >> /etc/hosts
mail#

Теперь бэкапим:

  /root/> rsync --update --verbose --recursive \ 
  ? --password-file=/usr/local/etc/rsyncd.scrt \
  ? backup@mail::etc /backup/mail.teachers/etc/
  HELLO FROM RSYNC
 
 
  receiving file list ... done
  skipping non-regular file "aliases"
  skipping non-regular file "namedb"
  skipping non-regular file "rmt"
  skipping non-regular file "termcap"
  hosts
 
  sent 126 bytes  received 6567 bytes  4462.00 bytes/sec
  total size is 1264421  speedup is 188.92
  /root/>

Как видите, у нас передался только файл hosts, потому что изменился только он.

BackupPC

Anonymous (anonymous@undisclosed.example.com) — 2026-01-06T03:02:34+00:00

BackupPC

Install server

# https://github.com/adferrand/docker-backuppc
# cat /
#

version: "3.7"

services:
  service:
    image: adferrand/backuppc:latest
    restart: always
    environment:
      TZ: 'Europe/Moscow'
    ports:
      - "82:8080"
    volumes:
      - "backuppc-etc:/etc/backuppc"
      - "backuppc-home:/home/backuppc"
      - "backuppc-src:/usr/local/BackupPC"
      - "/mnt/BackupPC:/data/backuppc:rw"
#    networks: 
#      localnetwork:
#        ipv4_address: "192.168.1.10"

volumes:
  backuppc-etc: {}
  backuppc-home: {}
  backuppc-src: {}
 
#networks:
#  localnetwork:
#    name: localnetwork
#    driver: ipvlan
#    driver_opts:
#      parent: eno1
#      ipvlan_mode: l3
#    ipam:
#      config:
#        - subnet: "192.168.1.0/24"
#          ip_range: "192.168.1.1/24"
#          gateway: "192.168.1.1"

Добавление Backup client

client1:

$ ssh admin@client1
$ apt install rsync -y
$ adduser backuppc
$ echo "backuppc ALL=(ALL:ALL) NOPASSWD: $(which rsync)" | tee /etc/sudoers.d/backuppc

backup-server

backup-server: backuppc_server_ip

$ ssh admin@backuppc_server_ip
$ apt install rsync
$ su - backuppc
$ ssh-copy-id backuppc@client1

Настройка Buckup client

Для удаленного клиента

RsyncSshArgs

-e $sshPath -l backuppc

Для локального клиента

RsyncSshArgs

-e /usr/bin/sudo -p

Ошибки

bash: line 1: rsync: command not found

bash: line 1: rsync: command not found
rsync: connection unexpectedly closed (0 bytes received so far) [Receiver]
rsync error: error in rsync protocol data stream (code 12) at io.c(232) [Receiver=3.2.7]

Когда BackupPC (или вы вручную) инициирует rsync через SSH, он выполняет следующее:

  * Устанавливает SSH-соединение с клиентом.
  * Запускает на клиенте удаленную команду rsync --server.
  * Если rsync не найден в PATH пользователя backuppc на клиенте, возникает эта ошибка.

Исправление backuppc настроек

Исправление на хосте для бекапа

$ apt update && apt install -y rsync

nano /etc/sudoers.d/backuppc

backuppc ALL=NOPASSWD: /usr/bin/rsync

Bash

Anonymous (anonymous@undisclosed.example.com) — 2015-09-16T00:06:23+00:00

shell, system

Bash

Горячие клавиши

Редактирование

^ + y - Вставить
^ + u - Вырезать до начала строки
^ + k - Вырезать до конца строки
(M + BackSpace|^ + w) - Вырезать назад до след слова
M + d - Вырезать вперед до след слова
^ + d - Удаление (аналог кл. Delete)
^ + h - Удаление (аналог кл. BackSpace)
^ + _ - Отмена операций (Undo)

Работа с историей команд

^ + r - Поиск по истории введеных команд

Справка

Cotrol - ^
M - Meta (Alt)

Boot

Anonymous (anonymous@undisclosed.example.com) — 2019-08-24T17:59:14+00:00

boot, linux, macos, windos

Boot

Linux boot flash create on Mac OS

CCZE

Anonymous (anonymous@undisclosed.example.com) — 2015-09-16T00:00:47+00:00

shell, utils

CCZE

Вывод лог-файла в цветовом оформлении

-A

checkinstall

Anonymous (anonymous@undisclosed.example.com) — 2012-10-17T09:37:56+00:00

checkinstall

компьютерная программа для Unix-подобных операционных систем, созданная с целью облегчить установку и удаление программного обеспечения, скомпилированного из исходных кодов, используя при этом родную для дистрибутива систему управления пакетами. После компиляции программного обеспечения checkinstall может автоматически сгенерировать Slackware-, RPM- или Debian-совместимый пакет, который впоследствии может быть полностью удалён через соответствующий менеджер пакетов. Эта возможность является предпочтительной при установке любых пакетов.

Утилита checkinstall работает примерно следующим образом: вставая на место make install в указанной мантре (т.е. checkinstall должен применяться уже после собственно сборки софта, он не подменяет собой make или другие способы сборки), она отслеживает действия установочного скрипта (что копируется, куда, под каким именем, с какими правами и т.п.) и из них создает установочные инструкции для будущего пакета. Справедливости ради скажу, что checkinstall умеет работать не только с make install, но и с практически любым скриптом, который что-то куда-то будет копировать, включая scons и прочие варианты. Скажем, если некую программу предлагается устанавливать командой ./myowninstaller.pl —instl, то checkinstall поймет и это, нужно будет только указать нужную команду в конце строки, например:

checkinstall -R --install=yes ./myowninstaller.pl --instl

Checkinstall умеет собирать пакеты RPM (как в примере выше), DEB и TGZ, сразу устанавливать собираемые пакеты (конечно, тут вам скорее всего понадобятся права root), добавлять свежеиспеченные библиотеки в /etc/ld.so.conf и многое другое. Вот чего вы можете ожидать от checkinstall 1.6.1:

Ссылки

Chrome, Chromium, etc

Anonymous (anonymous@undisclosed.example.com) — 2024-04-30T15:49:32+00:00

Chrome, Chromium, etc

Скачать

Служебные страницы браузера

Адреса	Значение
chrome:/ /about	Список служебных страниц
chrome:/ /extensions	Список установленных расширений
chrome:/ /cache	Показать содержимое кеша
chrome:/ /crash	(устаревшая, не используется)
chrome:/ /credits	Разработки, применяемые в Chrome
chrome:/ /dns	Показывает записи DNS
chrome:/ /flags	Разблокировать скрытые (экспериментальные) возможности
chrome:/ /flash	Просмотр информации о Flash-плагине
chrome:/ /histograms	Графики различных статистических параметров
chrome:/ /inducebrowsercrashforrealz	Вызвать сбой Google Chrome. Для просмотра разработчиками процессов, происходящих в системе при сбое
chrome:/ /memory	Показывает информацию об используемой приложением и вкладками памяти
chrome:/ /plugins	Показать установленные плагины
chrome:/ /shorthang	Вызвать «зависание» вкладки. Для тестирования разработчиками защиты от зависания
chrome:/ /net-internals	Информация о соединениях
chrome:/ /terms	Условия предоставления услуг Google Chrome
chrome:/ /version	Номер версии и сборки. Аналог — about:
view-source:[URL] Просмотр исходного кода страницы

Расширения/Extensions и Плагины/Plugins

Расширения для Chrome/Chromium

Chroot-окружение SSH/SFTP

Anonymous (anonymous@undisclosed.example.com) — 2015-10-29T00:51:15+00:00

root, ssh, chroot, openssh, sftp, сhroot, subsystem

Chroot-окружение SSH/SFTP

С версии 4.8 OpenSSH нативно поддерживает установку chroot-окружения и для этого больше не нужны патчи. Эта статья описывает настройку chroot-окружения для ваших пользователей при использовании SSH/SFTP. Пользователь будет “заперт” в своем каталоге без возможности доступа к основной системе

Предисловие

Описывается настройка chroot-окружения для OpenSSH версии 4.8 для Debian Lenny Для примера я буду использовать пользователя boombick с домашней директорией /home/boombick. Пользователь boombick входит в группу users. Chroot-окружение будет ограничено директорией /home Установка OpenSSH Если OpenSSH-сервер еще не установлен в вашей системе, то установите его командой

# aptitude install ssh openssh-server

Настройка SFTP

Включить SFTP-доступ очень просто. Отредактируйте файл /etc/ssh/sshd_config следующим образом:

# vim /etc/ssh/sshd_config

[...]
Subsystem sftp /usr/lib/openssh/sftp-server
[...]

и добавьте в конец файла следующие строки (для каждого пользователя, которого вы хотите поместить в chroot):

[...]
Match User boombick
    ChrootDirectory /home
    AllowTCPForwarding no
    X11Forwarding no
    ForceCommand /usr/lib/openssh/sftp-server

… либо для группы пользователей:

[...]
Match Group users
    ChrootDirectory /home
    AllowTCPForwarding no
    X11Forwarding no
    ForceCommand /usr/lib/openssh/sftp-server

Последний вариант поместит всех пользователей, входящих в группу users, в chroot Перезапустите ssh-сервер

# /etc/init.d/ssh restart

Если вы настраиваете chroot для нескольких пользователей в одну директорию (/home в нашем примере) и не хотите, чтобы они просматривали личные директории друг друга, то не забудьте присвоить верные права для директорий:

chmod 700 /home/boombick

Теперь вы можете зайти на сервер при помощи SFTP-клиента и работать в chroot-окружении. SSH в chroot-окружении

Настройка chroot для SSH

Настройка chroot для SSH более трудоемка из-за того, что необходимо настроить еще и программное окружение, то есть поместить в chroot такие программы как /bin/bash, /bin/cp и т. д. Это значит, что мы должны будем скопировать эти программы и библиотеки, которые они используют, в наше chroot-окружение. Вы можете сделать это вручную, с помощью команды cp, а узнать список библиотек вам поможет команда ldd:

# ldd /bin/bash
  linux-gate.so.1 =>  (0xb7fbd000)
	libncurses.so.5 => /lib/libncurses.so.5 (0xb7f75000)
	libdl.so.2 => /lib/i686/cmov/libdl.so.2 (0xb7f71000)
	libc.so.6 => /lib/i686/cmov/libc.so.6 (0xb7e0f000)
	/lib/ld-linux.so.2 (0xb7fbe000)

Также надо создать системные устройства /dev/null, /dev/zero, /dev/tty и /dev/urandom. Это можно сделать командой mknod Но делать это вручную весьма утомительно :) Хорошо, что есть люди, которые помогли облегчить нам эту процедуру. Wolfgang Fuschlberger написал bash-скрипт, который позволяет автоматизировать процесс создания chroot-окружения. Для начала установим некоторые необходимые пакеты:

aptitutde install sudo debianutils coreutils

Затем скачаем скрипт, пометим его в /usr/local/sbin сделаем его исполняемым

chmod 700 /usr/local/sbin/make_chroot_jail.sh

Но перед стартом добавим некоторые приложения, которые мы хотим сделать доступными для использования в chroot, например, vim

vim /usr/local/sbin/make_chroot_jail.sh

[...]
elif [ "$DISTRO" = DEBIAN ]; then
  APPS="/bin/bash /bin/cp /usr/bin/dircolors /bin/ls /bin/mkdir /bin/mv /bin/rm /bin/rmdir /bin/sh /bin/su /usr/bin/groups /usr/bin/id /usr/bin/rsync /usr/bin/ssh /usr/bin/scp /sbin/unix_chkpwd /usr/bin/vim"
else
[...]

Затем создадим симлинк в /home, указывающий на сам /home

cd /home
ln -s . home

Теперь можно запускать скрипт. Его запускают со следующими параметрами

make_chroot_jail.sh username [/path/to/chroot-shell [/path/to/chroot]]

chroot-shell – это специальная оболочка для пользователей в chroot, которую создает скрипт. Но OpenSSH поддерживает chroot нативно, поэтому мы будем использовать обычный /bin/bash или /bin/sh Не имеет значения, существует ли пользователь в системе или нет. Если пользователя нет, то он будет создан. Если есть – его данные будут обновлены.

# make_chroot_jail.sh boombick /bin/bash /home

Эта команда создаст/обновит данные пользователя boombick для его работы в chroot Для обновления всех файлов/библиотек в chroot выполните

make_chroot_jail.sh update /bin/bash /home

Теперь немного подредактируем конфиг (примерно так же, как мы делали для SFTP)

vim /etc/ssh/sshd_config

И добавим следующие строки для каждого пользователя в chroot

[...]
Match User boombick
    ChrootDirectory /home
    AllowTCPForwarding no
    X11Forwarding no

Или для группы пользователей

[...]
Match Group users
    ChrootDirectory /home
    AllowTCPForwarding no
    X11Forwarding no

Разница в том, что мы не добавляем строку ForceCommand /usr/lib/openssh/sftp-server в выражение Match Таким образом пользователи могут использовать не только chroot-SFTP (убедитесь, что в /etc/ssh/sshd_config есть строка Subsystem sftp /usr/lib/openssh/sftp-server) Не забудьте перезапустить ssh-сервер

# /etc/init.d/ssh restart

Clonezilla

Anonymous (anonymous@undisclosed.example.com) — 2012-08-26T14:07:23+00:00

Clonezilla

Clonezilla — свободное программное обеспечение с открытым исходным кодом, предназначенное для клонирования дисков и отдельных разделов жёсткого диска, а также создания резервных копий и аварийного восстановления системы.

http://clonezilla.org/downloads.php

Установка на USB

insert usb
format usb
copy clonezilla files to usb
change directory to the tool/linux folder
run makeboot.sh /dev/sdxx ← usb device.

Ссылки

Контейнеры

Anonymous (anonymous@undisclosed.example.com) — 2024-08-26T21:54:39+00:00

Контейнеры

K3s является упрощенной версией Kubernetes, разработанной специально для сред с ограниченными ресурсами, таких как встраиваемые системы, переносные устройства или маломощные серверы. K3s предлагает уменьшенный объем и зависимости, что делает его легким в установке и эксплуатации без потери основных возможностей Kubernetes.
Docker — это инновационная платформа для контейнеризации приложений, предоставляющая простой и эффективный способ управления изолированными приложениями. Основанная на технологии контейнеризации, Docker позволяет запускать приложения в изолированной среде, упакованные в специальные контейнеры. Это ускоряет и автоматизирует процесс развертывания, доставки и масштабирования приложений. Docker позволяет управлять приложениями, запускать разные версии программ на одном компьютере и обеспечивает гибкость в развертывании приложений.
Kubernetes (или K8s) — это мощная система для автоматизации развертывания, масштабирования и управления контейнеризированными приложениями. Она поддерживает различные технологии контейнеризации, включая Docker и Rocket, и обеспечивает надежное и эффективное управление контейнерами на большом количестве хостов. Основные задачи Kubernetes включают развертывание контейнеров, масштабирование и управление ресурсами, а также балансировку нагрузки между различными контейнерами. Утилиты, такие как kubectl, kubelet и kubeadm, облегчают создание и управление кластером Kubernetes, делая его идеальным выбором для развертывания и управления масштабируемыми приложениями в облачной среде.
Podman — это инструмент с открытым исходным кодом, который предоставляет возможность поиска, сборки, передачи и запуска приложений в контейнерах. Он аналогичен Docker в использовании командной строки, но не требует дополнительного сервиса для работы и может функционировать без прав root. Поддержка работы с контейнерами без прав root открывает новые возможности для пользователей, позволяя им легче и безопаснее работать с контейнеризированными приложениями.
LXD — это инновационный системный менеджер контейнеров следующего поколения, который предоставляет пользовательский интерфейс, похожий на виртуальные машины, но использующий вместо них контейнеры Linux. Ядро LXD — это привилегированный демон, который обеспечивает REST API для управления контейнерами через командную строку или интерфейс пользователя. Это делает LXD удобным и эффективным инструментом для развертывания и управления контейнерами в различных средах.

Cron

Anonymous (anonymous@undisclosed.example.com) — 2020-03-01T00:56:42+00:00

utils, shell, system, command

Cron

Format / Crontab формат

# /etc/crontab: system-wide crontab
# Unlike any other crontab you don't have to run the `crontab'
# command to install the new version when you edit this file
# and files in /etc/cron.d. These files also have username fields,
# that none of the other crontabs do.

SHELL=/bin/sh
PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin

# m  h 	dom mon dow 	user  command
  17 *  *   * 	*	root    cd / && run-parts --report /etc/cron.hourly
  25 6  *   * 	*	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.daily )
  47 6  *   * 	7	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.weekly )
  52 6  1   * 	*	root	test -x /usr/sbin/anacron || ( cd / && run-parts --report /etc/cron.monthly )

Parametrs / Параметры

*/30 - Запускать каждые 30 минут
crontab -l - вывести список заданий
crontab -u - пользователь (root, somebody)
crontab -e - редактирование пользовательского расписания

ctop

Anonymous (anonymous@undisclosed.example.com) — 2025-03-26T22:56:13+00:00

ctop

Top-like interface for container metrics

ctop provides a concise and condensed overview of real-time metrics for multiple containers:

$ sudo apt install ca-certificates curl gnupg lsb-release
$ curl -fsSL https://azlux.fr/repo.gpg.key | sudo gpg --dearmor -o /usr/share/keyrings/azlux-archive-keyring.gpg
echo \
  "deb [arch=$(dpkg --print-architecture) signed-by=/usr/share/keyrings/azlux-archive-keyring.gpg] http://packages.azlux.fr/debian \
  $(lsb_release -cs) main" | sudo tee /etc/apt/sources.list.d/azlux.list >/dev/null
$ sudo apt update
$ sudo apt install docker-ctop

CURL

Anonymous (anonymous@undisclosed.example.com) — 2024-02-09T02:44:38+00:00

curl, fetch, wget, client, http client

CURL

Method	Command
curl	sh -c "$(curl -fsSL https://raw.site/install.sh)"
wget	sh -c "$(wget -O- https://raw.site/install.sh)"
fetch	sh -c "$(fetch -o - https://raw.site/install.sh)"

Options: (H) means HTTP/HTTPS only, (F) means FTP only
     --anyauth       Pick "any" authentication method (H)
 -a, --append        Append to target file when uploading (F/SFTP)
     --basic         Use HTTP Basic Authentication (H)
     --cacert FILE   CA certificate to verify peer against (SSL)
     --capath DIR    CA directory to verify peer against (SSL)
 -E, --cert CERT[:PASSWD]  Client certificate file and password (SSL)
     --cert-type TYPE  Certificate file type (DER/PEM/ENG) (SSL)
     --ciphers LIST  SSL ciphers to use (SSL)
     --compressed    Request compressed response (using deflate or gzip)
 -K, --config FILE   Read config from FILE
     --connect-timeout SECONDS  Maximum time allowed for connection
 -C, --continue-at OFFSET  Resumed transfer OFFSET
 -b, --cookie STRING/FILE  Read cookies from STRING/FILE (H)
 -c, --cookie-jar FILE  Write cookies to FILE after operation (H)
     --create-dirs   Create necessary local directory hierarchy
     --crlf          Convert LF to CRLF in upload
     --crlfile FILE  Get a CRL list in PEM format from the given file
 -d, --data DATA     HTTP POST data (H)
     --data-ascii DATA  HTTP POST ASCII data (H)
     --data-binary DATA  HTTP POST binary data (H)
     --data-urlencode DATA  HTTP POST data url encoded (H)
     --delegation STRING  GSS-API delegation permission
     --digest        Use HTTP Digest Authentication (H)
     --disable-eprt  Inhibit using EPRT or LPRT (F)
     --disable-epsv  Inhibit using EPSV (F)
     --dns-servers   DNS server addrs to use: 1.1.1.1;2.2.2.2
     --dns-interface  Interface to use for DNS requests
     --dns-ipv4-addr  IPv4 address to use for DNS requests, dot notation
     --dns-ipv6-addr  IPv6 address to use for DNS requests, dot notation
 -D, --dump-header FILE  Write the headers to FILE
     --egd-file FILE  EGD socket path for random data (SSL)
     --engine ENGINE  Crypto engine (use "--engine list" for list) (SSL)
 -f, --fail          Fail silently (no output at all) on HTTP errors (H)
 -F, --form CONTENT  Specify HTTP multipart POST data (H)
     --form-string STRING  Specify HTTP multipart POST data (H)
     --ftp-account DATA  Account data string (F)
     --ftp-alternative-to-user COMMAND  String to replace "USER [name]" (F)
     --ftp-create-dirs  Create the remote dirs if not present (F)
     --ftp-method [MULTICWD/NOCWD/SINGLECWD]  Control CWD usage (F)
     --ftp-pasv      Use PASV/EPSV instead of PORT (F)
 -P, --ftp-port ADR  Use PORT with given address instead of PASV (F)
     --ftp-skip-pasv-ip  Skip the IP address for PASV (F)
     --ftp-pret      Send PRET before PASV (for drftpd) (F)
     --ftp-ssl-ccc   Send CCC after authenticating (F)
     --ftp-ssl-ccc-mode ACTIVE/PASSIVE  Set CCC mode (F)
     --ftp-ssl-control  Require SSL/TLS for FTP login, clear for transfer (F)
 -G, --get           Send the -d data with a HTTP GET (H)
 -g, --globoff       Disable URL sequences and ranges using {} and []
 -H, --header LINE   Pass custom header LINE to server (H)
 -I, --head          Show document info only
 -h, --help          This help text
     --hostpubmd5 MD5  Hex-encoded MD5 string of the host public key. (SSH)
 -0, --http1.0       Use HTTP 1.0 (H)
     --http1.1       Use HTTP 1.1 (H)
     --http2         Use HTTP 2 (H)
     --ignore-content-length  Ignore the HTTP Content-Length header
 -i, --include       Include protocol headers in the output (H/F)
 -k, --insecure      Allow connections to SSL sites without certs (H)
     --interface INTERFACE  Use network INTERFACE (or address)
 -4, --ipv4          Resolve name to IPv4 address
 -6, --ipv6          Resolve name to IPv6 address
 -j, --junk-session-cookies  Ignore session cookies read from file (H)
     --keepalive-time SECONDS  Wait SECONDS between keepalive probes
     --key KEY       Private key file name (SSL/SSH)
     --key-type TYPE  Private key file type (DER/PEM/ENG) (SSL)
     --krb LEVEL     Enable Kerberos with security LEVEL (F)
     --libcurl FILE  Dump libcurl equivalent code of this command line
     --limit-rate RATE  Limit transfer speed to RATE
 -l, --list-only     List only mode (F/POP3)
     --local-port RANGE  Force use of RANGE for local port numbers
 -L, --location      Follow redirects (H)
     --location-trusted  Like '--location', and send auth to other hosts (H)
     --login-options OPTIONS  Server login options (IMAP, POP3, SMTP)
 -M, --manual        Display the full manual
     --mail-from FROM  Mail from this address (SMTP)
     --mail-rcpt TO  Mail to this/these addresses (SMTP)
     --mail-auth AUTH  Originator address of the original email (SMTP)
     --max-filesize BYTES  Maximum file size to download (H/F)
     --max-redirs NUM  Maximum number of redirects allowed (H)
 -m, --max-time SECONDS  Maximum time allowed for the transfer
     --metalink      Process given URLs as metalink XML file
     --negotiate     Use HTTP Negotiate (SPNEGO) authentication (H)
 -n, --netrc         Must read .netrc for user name and password
     --netrc-optional  Use either .netrc or URL; overrides -n
     --netrc-file FILE  Specify FILE for netrc
 -:  --next          Allows the following URL to use a separate set of options
     --no-alpn       Disable the ALPN TLS extension (H)
 -N, --no-buffer     Disable buffering of the output stream
     --no-keepalive  Disable keepalive use on the connection
     --no-npn        Disable the NPN TLS extension (H)
     --no-sessionid  Disable SSL session-ID reusing (SSL)
     --noproxy       List of hosts which do not use proxy
     --ntlm          Use HTTP NTLM authentication (H)
     --oauth2-bearer TOKEN  OAuth 2 Bearer Token (IMAP, POP3, SMTP)
 -o, --output FILE   Write to FILE instead of stdout
     --pass PASS     Pass phrase for the private key (SSL/SSH)
     --post301       Do not switch to GET after following a 301 redirect (H)
     --post302       Do not switch to GET after following a 302 redirect (H)
     --post303       Do not switch to GET after following a 303 redirect (H)
 -#, --progress-bar  Display transfer progress as a progress bar
     --proto PROTOCOLS  Enable/disable PROTOCOLS
     --proto-redir PROTOCOLS  Enable/disable PROTOCOLS on redirect
 -x, --proxy [PROTOCOL://]HOST[:PORT]  Use proxy on given port
     --proxy-anyauth  Pick "any" proxy authentication method (H)
     --proxy-basic   Use Basic authentication on the proxy (H)
     --proxy-digest  Use Digest authentication on the proxy (H)
     --proxy-negotiate  Use HTTP Negotiate (SPNEGO) authentication on the proxy (H)
     --proxy-ntlm    Use NTLM authentication on the proxy (H)
 -U, --proxy-user USER[:PASSWORD]  Proxy user and password
     --proxy1.0 HOST[:PORT]  Use HTTP/1.0 proxy on given port
 -p, --proxytunnel   Operate through a HTTP proxy tunnel (using CONNECT)
     --pubkey KEY    Public key file name (SSH)
 -Q, --quote CMD     Send command(s) to server before transfer (F/SFTP)
     --random-file FILE  File for reading random data from (SSL)
 -r, --range RANGE   Retrieve only the bytes within RANGE
     --raw           Do HTTP "raw"; no transfer decoding (H)
 -e, --referer       Referer URL (H)
 -J, --remote-header-name  Use the header-provided filename (H)
 -O, --remote-name   Write output to a file named as the remote file
     --remote-name-all  Use the remote file name for all URLs
 -R, --remote-time   Set the remote file's time on the local output
 -X, --request COMMAND  Specify request command to use
     --resolve HOST:PORT:ADDRESS  Force resolve of HOST:PORT to ADDRESS
     --retry NUM   Retry request NUM times if transient problems occur
     --retry-delay SECONDS  Wait SECONDS between retries
     --retry-max-time SECONDS  Retry only within this period
     --sasl-ir       Enable initial response in SASL authentication
 -S, --show-error    Show error. With -s, make curl show errors when they occur
 -s, --silent        Silent mode (don't output anything)
     --socks4 HOST[:PORT]  SOCKS4 proxy on given host + port
     --socks4a HOST[:PORT]  SOCKS4a proxy on given host + port
     --socks5 HOST[:PORT]  SOCKS5 proxy on given host + port
     --socks5-hostname HOST[:PORT]  SOCKS5 proxy, pass host name to proxy
     --socks5-gssapi-service NAME  SOCKS5 proxy service name for GSS-API
     --socks5-gssapi-nec  Compatibility with NEC SOCKS5 server
 -Y, --speed-limit RATE  Stop transfers below RATE for 'speed-time' secs
 -y, --speed-time SECONDS  Trigger 'speed-limit' abort after SECONDS (default: 30)
     --ssl           Try SSL/TLS (FTP, IMAP, POP3, SMTP)
     --ssl-reqd      Require SSL/TLS (FTP, IMAP, POP3, SMTP)
 -2, --sslv2         Use SSLv2 (SSL)
 -3, --sslv3         Use SSLv3 (SSL)
     --ssl-allow-beast  Allow security flaw to improve interop (SSL)
     --stderr FILE   Where to redirect stderr (use "-" for stdout)
     --tcp-nodelay   Use the TCP_NODELAY option
 -t, --telnet-option OPT=VAL  Set telnet option
     --tftp-blksize VALUE  Set TFTP BLKSIZE option (must be >512)
 -z, --time-cond TIME  Transfer based on a time condition
 -1, --tlsv1         Use => TLSv1 (SSL)
     --tlsv1.0       Use TLSv1.0 (SSL)
     --tlsv1.1       Use TLSv1.1 (SSL)
     --tlsv1.2       Use TLSv1.2 (SSL)
     --trace FILE    Write a debug trace to FILE
     --trace-ascii FILE  Like --trace, but without hex output
     --trace-time    Add time stamps to trace/verbose output
     --tr-encoding   Request compressed transfer encoding (H)
 -T, --upload-file FILE  Transfer FILE to destination
     --url URL       URL to work with
 -B, --use-ascii     Use ASCII/text transfer
 -u, --user USER[:PASSWORD]  Server user and password
     --tlsuser USER  TLS username
     --tlspassword STRING  TLS password
     --tlsauthtype STRING  TLS authentication type (default: SRP)
 -A, --user-agent STRING  Send User-Agent STRING to server (H)
 -v, --verbose       Make the operation more talkative
 -V, --version       Show version number and quit
 -w, --write-out FORMAT  Use output FORMAT after completion
     --xattr         Store metadata in extended file attributes
 -q                  Disable .curlrc (must be first parameter)

GET

$ curl -X GET -L http://

Бесшумное

$ curl -s -X GET -L http://

POST

$ curl -X POST -L http://

или

$ curl --request POST -L http://

Fields

$ curl -X POST --data "param1=value1&param2=value2" -L http://

Multipart (Fields + File)

$ curl -X POST --form "fileupload=@my-file.txt" --form param1=value1 --form param2=value2 -L http://

Multipart + progress

$ curl --tr-encoding -X POST -v -# -o output -T filename.dat -L http://file-download.dat

Proxy

$ curl -x my.proxy.com:3128 -O http://example.net/myfile.zip

Добавить header

Для открытия xml документа

$ curl -X POST --header "Content-Type:text/xml" -L http://

Для открытия json документа

$ curl -X POST --header "Content-Type:application/json" -L http://

Date

Anonymous (anonymous@undisclosed.example.com) — 2014-08-17T14:15:01+00:00

Date

Вычисление дат

Linux

date –date="1 days ago" "+%Y.%m.%d"

MacOs

date -v1d -v+1m -v-1d -v-fri

dd Клонирование жесткого диска в ОС Linux

Anonymous (anonymous@undisclosed.example.com) — 2015-10-29T00:52:22+00:00

shell, commands, unix, dd, fs

dd Клонирование жесткого диска в ОС Linux

У Вас в сервере есть 2 жестких диска IDE допустим /dev/hda и /dev/hdb или SCSI или SATA - тогда /dev/sda и /dev/sdb - неважно вообщем - применимо для любых жестких дисков и даже RAID массивов, если они видны для системы.
Если жесткие диски одной МОДЕЛИ, МАРКИ и ОБЪЕМА

Если жесткие диски одной МОДЕЛИ, МАРКИ и ОБЪЕМА

Жесткий диск на который будет производится клонирование, не должен быть примонтирован партициями к каталогу(ам).

dd if=/dev/hda of=/dev/hdb bs=1M 
(Клонирование будет производиться порциями по 1-му мегабайту)

Если жесткие диски неодинаковые и возможно разного объема

Допустим у Вас есть на 1-м жестком диске 3 партиции ext2fs, ext3fs, reiserfs - без разницы, и swap.

  /dev/hda1 - / (root партиция) объемом 12,066 GB - файловая система reiserfs
  /dev/hda5 - swap (swap партиция) объемом 1,024 GB - файловая система swap
  /dev/hda6 - /home (home партиция) объемом 50,043 GB - файловая система ext3fs

На втором жестком диске нет ничего, тогда: Есть утилита cfdisk - запускаем - по умолчанию она покажет /dev/hda с выше перечисленными партициями. Тогда запускаем так - cfdisk /dev/hdb - теперь она покажет /dev/hdb голый.

С ее помощью создаем точно такие же партиции (тип Linux и тип Linux swap для /dev/hdb5) такого же объема как и на /dev/hda .

Примечание: /dev/hda1 а потом сразу /dev/hda5 - все просто потому что /dev/hda1 - это Primary раздел, а /dev/hda5 и /dev/hda6 - Logical разделы, поэтому создается такая нумерация.

Создали, записали таблицу (Write функция в cfdisk).

Далее создаем файловые системы на /dev/hdb1 и /dev/hdb6 (на swap партиции ничего создавать не надо)

mkfs.reiserfs /dev/hdb1
mkfs.ext3 /dev/hdb6

А теперь все просто (Монтировать к каталогам НЕ НАДО только созданные партиции) :

dd if=/dev/hda1 of=/dev/hdb1 bs=1M
dd if=/dev/hda6 of=/dev/hdb6 bs=1M

Установка загрузчика lilo

lilo -M /dev/hdb

(lilo возьмет конфиг с 1-ого жесткого диска)

либо

mount -t reiserfs /dev/hdb1 /mnt/123
lilo -C /mnt/123/etc/lilo.conf -M /dev/hdb

(уже c 2-ого жесткого диска)

Вот и все - lilo взял ваш конфиг на /dev/hda1 из файла /etc/lilo.conf или же со 2-го жесткого диска и основываясь на нем проинсталлировал себя в MBR на 2-ой жесткий диск. Все - система полностью сдублирована и готова к старту со 2-го жесткого диска.

Примечание:

в /mnt/123/etc/lilo.conf и /mnt/123/etc/fstab указан жесткий диск и партиции /dev/hda (/dev/hda1) - поэтому, чтобы система все-таки стартовала при отказе 1-го жесткого диска - надо его сделать Primary Master, потому как во время клонирования он был Primary Slave (я надеюсь перемычки Вы менять на жестком диске умеете). Хотя можно перед установкой lilo просто отредактировать конфиг /mnt/123/etc/lilo.conf и конфиг /mnt/123/etc/fstab - заменив в них /dev/hda на /dev/hdb ,Естественно уже на втором жестком диске примонтировав его root партицию командой mount -t reiserfs /dev/hdb1 /mnt/123 к примеру

Dev - Устройства

Anonymous (anonymous@undisclosed.example.com) — 2019-10-23T13:42:45+00:00

fstab

Dev - Устройства

Просмотр HDD/SSD устройств

$ lsblk
NAME   MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
sda      8:0    0 232,9G  0 disk
├─sda1   8:1    0 223,4G  0 part /
├─sda2   8:2    0     1K  0 part
└─sda5   8:5    0   9,5G  0 part [SWAP]
sdd      8:48   0   1,8T  0 disk
sde      8:64   0 465,8G  0 disk

Список дисков с указанием UUID

$ blkid
/dev/sda1: UUID="dea7b137-e3a0-48fa-8363-5f654ed6d6f5" TYPE="ext4" PARTUUID="9e41fd98-01"
/dev/sda5: UUID="d7307b2f-6903-4193-8281-02c17d6aa42a" TYPE="swap" PARTUUID="9e41fd98-05"
/dev/sdd: UUID="833ad2a2-23ba-43ea-96bf-f5161b717034" TYPE="ext4"
/dev/sde: UUID="929a5b27-8dea-47b5-b6c9-ec90617b6ef2" TYPE="ext4"

fstab

Fstab

Dialog

Anonymous (anonymous@undisclosed.example.com) — 2016-02-17T01:13:44+00:00

bash, system, shell, script, scripting

Dialog

http://hightek.org/projects/dialog/screenshots

Установка

apt-get install dialog
brew install dialog
yum install dialog

Описание

dialog это утилита для построения консольных интерфейсов. Dialog входит в состав большинства дистрибутивов GNU/Linux. Если вы хотите собрать её из исходников, то архив можно найти на http://hightek.org/dialog/.

Эта программа являются свободными и работают на большом количестве платформ *nix. Большинство приведённых примеров в данном руководстве являются адаптацией примеров, поставляемых с исходными кодами программ.

Да / Нет

Вот первый скрипт, работу которого я проверил. Он просто выводит диалог с кнопками "Да" и "Нет".

#!/bin/bash
DIALOG=${DIALOG=dialog}
 
$DIALOG --title " Мой первый диалог" --clear \
        --yesno "Привет! Перед вами пример программы,\nиспользующей (X)dialog" 10 40
 
case $? in
    0)
        echo "Выбрано 'Да'.";;
    1)
        echo "Выбрано 'Нет'.";;
    255)
        echo "Нажата клавиша ESC.";;
esac

Применяемые опции:

–title задаёт заголовок диалога
–clear очищает экран перед отображением диалога
–yesno задаёт тип диалога и текст для отображения.

Ввод данных

Следующая программа ожидает ввода строку и затем отображает её на экране.

#!/bin/sh
DIALOG=${DIALOG=dialog}
tempfile=`tempfile 2>/dev/null` || tempfile=/tmp/test$$
trap "rm -f $tempfile" 0 1 2 5 15
 
$DIALOG --title "Ввод данных" --clear \
        --inputbox "Привет! Перед вами пример ввода даных\nВведите своё имя:" 16 51 2> $tempfile
 
retval=$?
 
case $retval in
  0)
    echo "Вы ввели `cat $tempfile`"
    ;;
  1)
    echo "Отказ от ввода.";;
  255)
    if test -s $tempfile ; then
      cat $tempfile
    else
      echo "Нажата клавиша ESC."
    fi
    ;;
esac

Организация меню

Следующая программа позволяет вам организовать список с возможностью выбора одного из элементов:

#!/bin/sh
DIALOG=${DIALOG=dialog}
tempfile=`mktemp 2>/dev/null` || tempfile=/tmp/test$$
trap "rm -f $tempfile" 0 1 2 5 15
 
$DIALOG --clear --title "Мои любимые исполнители" \
        --menu "Все любят песни хинди, поэтому выбирайте:" 20 51 4 \
        "Rafi"  "Mohammed Rafi" \
        "Mukesh" "Mukesh" \
        "Kishore" "Kishore Kumar" \
        "Saigal" "K L Saigal" \
        "Lata"  "Lata Mangeshkar" \
        "Yesudas"  "K J Yesudas" 2> $tempfile
 
retval=$?
 
choice=`cat $tempfile`
 
case $retval in
  0)
    echo "Да вы эстет! '$choice' -- это лучшее, что вы слышали в своей жизни!";;
  1)
    echo "Отказ от ввода.";;
  255)
    echo "Нажата клавиша ESC.";;
esac

#!/usr/bin/env bash
 
t(){ type "$1"&>/dev/null;}
 
function Menu.Show {
   local DIA DIA_ESC; while :; do
      t whiptail && DIA=whiptail && break
      t dialog && DIA=dialog && DIA_ESC=-- && break
      exec date +s"No dialog program found"
   done; declare -A o="$1"; shift
 
   $DIA --backtitle "${o[backtitle]}" --title "${o[title]}" \
      --menu "${o[text]}" 0 0 0 $DIA_ESC "$@"; 
}
 
Menu.Show '([backtitle]="Backtitle"
            [title]="Title"
            [question]="Please choose:")'          \
                                                   \
            "Option A"  "Stuff...."                \
            "Option B"  "Stuff...."                \
            "Option C"  "Stuff...."

$ dialog --checklist "Preferred Linux distros" 15 40 5\
               debian "Venerable Debian" off \
               ubuntu "Popular Ubuntu"   on  \
               fedora "Hackish Fedora"   off \
               centos "Stable Centos"    off \
               mint "Rising Star Mint"   off 2>distrochoice

$ dialog --title Habr --checklist «Simple checkbox menu» 12 35 3 $(echo {hello,habra,habr}" '' 0"

Списки зависимых кнопок (radiolist) и флажков (checklist)

Формирование таких списков аналогично организации меню, описанного в предыдущем разделе.

#! /bin/sh
DIALOG=${DIALOG=dialog}
tempfile=`mktemp 2>/dev/null` || tempfile=/tmp/test$$
trap "rm -f $tempfile" 0 1 2 5 15
 
$DIALOG --backtitle "Не стесняйтесь, выберите любимого певца" \
        --title "Выбор исполнителя" --clear \
        --radiolist "Мой любимый певец, это... " 20 61 5 \
        "Rafi"  "Mohammed Rafi" off \
        "Lata"    "Lata Mangeshkar" ON \
        "Hemant" "Hemant Kumar" off \
        "Dey"    "MannaDey" off \
        "Kishore"    "Kishore Kumar" off \
        "Yesudas"   "K. J. Yesudas" off  2> $tempfile
 
retval=$?
 
choice=`cat $tempfile`
case $retval in
  0)
    echo "Ого! Кто бы мог подумать, но выбор пал на '$choice'";;
  1)
    echo "Отказ от ввода.";;
  255)
    echo "Нажата клавиша ESC.";;
esac

Для того, чтобы использовать список флажков, вместо радиокнопок, замените в скрипте опцию –radiolist на –checklist.

Создание индикатора (прогрессбар)

Такой элемент позволяет визуализировать процесс выполнения вашего скрипта:

#!/bin/sh
DIALOG=${DIALOG=dialog}
 
COUNT=10
(
while test $COUNT != 110
do
echo $COUNT
echo "XXX"
echo "Новое сообщение ($COUNT процентов)"
echo "Строка 2"
echo "XXX"
COUNT=`expr $COUNT + 10`
sleep 1
done
) |
$DIALOG --title "Индикатор" --gauge "А вот пример простейшего индикатора" 20 70 0

#!/bin/sh
 
(
c=10
while [ $c -ne 110 ]
    do
        echo $c
        ((c+=10))
        sleep 1
done
) |
dialog --title " Тест диалога прогресса " --gauge "Please wait ...." 10 60 0
 
clear

Выбор файла

Вот пример простейшего диалога для выбора файла:

#!/bin/sh
DIALOG=${DIALOG=dialog}
 
FILE=`$DIALOG --stdout --title "Выберите файл" --fselect $HOME/ 10 60`
 
case $? in
    0)
        echo "Выбран \"$FILE\"";;
    1)
        echo "Отказ от ввода.";;
    255)
        echo "Нажата клавиша ESC.";;
esac

Календарь и настройка часов

Информация о годе, месяце и дне выводится на отдельных панелях. Если значение дня,месяца или года не указано, либо оно отрицательное, то используются системная дата. (Работает только в dialog. Указать в качестве начального значения , например, 1000-й год не получится – dialog воспринимает это как неверное значение и указывает текущую дату. Для изменения значений можно использовать стрелки управления курсором, либо воспользоваться горячими клавишами, используемыми в vi при навигации по тексту: h, j, k и l. Если год устанавливается равным 0, то по умолчанию используется значение текущего года. Результат выводится в формате день/месяц/год

#!/bin/sh
DIALOG=${DIALOG=dialog}
 
USERDATE=`$DIALOG --stdout --title "Календарь" --calendar "Выберите дату..." 00 7 7 1981`
 
case $? in
  0)
    echo "Выбрано: $USERDATE.";;
  1)
    echo "Отказ от ввода.";;
  255)
    echo "Нажата клавиша ESC.";;
esac

Настройка часов

Этот диалог позволяет вам выбирать время:

#!/bin/sh
 
DIALOG=${DIALOG=Xdialog}
USERTIME=`$DIALOG --stdout --title "Настройка часов" \
           --timebox "Укажите,пожалуйста, время..." 0 0 12 34 56`
 
case $? in
  0)
    echo "Указано время: $USERTIME.";;
  1)
    echo "Отказ от ввода.";;
  255)
    echo "Нажата клавиша ESC.";;
esac

Подсказки

Ваш скрипт сможет самостоятельно делать выбор между dialog и Xdialog, если в его начале дописать следующую конструкцию:

if [ -z $DISPLAY ]
then
    DIALOG=dialog
else
    DIALOG=Xdialog
fi

Примеры / Ствтьи

http://linoxide.com/linux-shell-script/bash-shell-script-show-dialog-box/

direnv

Anonymous (anonymous@undisclosed.example.com) — 2023-07-15T20:00:51+00:00

direnv

Дополняет существующие оболочки новой функцией, которая может загружать и выгружать переменные среды в зависимости от текущего каталога.

Установка

$ apt install direnv
echo "eval \"$(direnv hook bash)\"" >> ~/.bashrc

Настройка

$ # Create a new folder for demo purposes.
$ mkdir ~/my-project
$ cd ~/my-project
 
# Show that the FOO environment variable is not loaded.
$ echo ${FOO-nope}
nope
 
# Create a new .envrc. This file is bash code that is going to be loaded by
# direnv.
$ echo export FOO=foo > .envrc
.envrc is not allowed
 
# The security mechanism didn't allow to load the .envrc. Since we trust it,
# let's allow its execution.
$ direnv allow .
direnv: reloading
direnv: loading .envrc
direnv export: +FOO
 
# Show that the FOO environment variable is loaded.
$ echo ${FOO-nope}
foo
 
# Exit the project
$ cd ..
direnv: unloading
 
# And now FOO is unset again
$ echo ${FOO-nope}
nope

Docker-Compose

Anonymous (anonymous@undisclosed.example.com) — 2024-05-02T19:26:06+00:00

[docker, dockerfile]

Docker-Compose

Ссылки

Sonatype Nexus Repository	2023/06/18 17:49	docker, push, pull
Slurm	2025/02/26 19:57	hpc, slurm, container, docker
Мониторинг	2025/11/15 03:42	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
loki	2025/11/24 14:12	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
Docker Swarm + Loki + Fluent Bit + Fluentd + Grafana	2025/11/20 00:14	loki, docker, swarm, fluent-bit, fluentd, grafana
Docker Swarm + Fluent Bit + Loki + Grafana	2025/11/19 12:25	loki, docker, swarm, fluent-bit, grafana
Prometheus - Система мониторинга и оповещения с открытым исходным кодом.	2025/11/25 00:19	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
Docker Swarm + Promtail + Loki + Grafana	2025/11/19 11:12	loki, docker, swarm, promtail, grafana
Docker	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Docker-Compose	2024/05/02 19:24	docker, dockerfile
Docker Socket	2026/01/12 20:38	docker, swarm, api, socket
Docker Swarm	2025/02/10 11:29	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Dockerfile	2024/05/02 00:11	docker, dockerfile
Vagrant	2015/10/13 09:01	vagrant, chef, shell, puppet, salt, ansible, docker, virtual
Docker/Отладка	2019/07/30 10:46	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Ansible	2016/12/05 00:09	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Chef	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Puppet	2016/12/05 00:47	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Восстановление настроек коробочки	2018/02/28 22:23	vagrant, chef, shell, puppet, salt, ansible, docker, virtual

Docker Socket

Anonymous (anonymous@undisclosed.example.com) — 2026-01-12T20:50:22+00:00

[docker, swarm, api, socket]

Docker Socket

Вывод информации

$ curl --silent -XGET --unix-socket /run/docker.sock http://localhost/version | jq .

$ curl --silent -XGET --unix-socket /run/docker.sock http://localhost/info | jq .

$ curl --silent -XGET --unix-socket /run/docker.sock http://localhost/events | jq .

Список контейнеров

$ curl --silent -XGET --unix-socket /run/docker.sock http://localhost/containers/json | jq .

$ curl --silent -XGET --unix-socket /run/docker.sock -H 'Content-Type: application/json' http://localhost/containers/json | jq .

Вывод деталей контейнера

$ curl  --silent -XGET --unix-socket /run/docker.sock http://localhost/containers/baa54b9e178b88ec3d2f4eb4939ca4f59d6e5fc77515ebfbf5d8eec0a95aafcf/json | jq .

Список изображений

$ curl --silent -XGET --unix-socket /run/docker.sock http://localhost/images/json | jq .

Создание контейнера

CONTAINER_NAME="java-test"
$ curl \
  --silent \
  --unix-socket /var/run/docker.sock \
  "http:/containers/create?name=${CONTAINER_NAME}" \
  -X POST \
  -H "Content-Type: application/json" \
  -d '{ "Image": "openjdk:8u111-jre-alpine", "Cmd": [ "java", "-version" ] }' | jq '.'
 
  {
    "Id": "602995e0d277e67417d9ad142959db7853a788bcd079ac33a72e24fb2db2f33c",
    "Warnings": null
  }

Запуск контейнера

$ curl \
  --silent \
  --unix-socket /var/run/docker.sock \
  "http:/containers/${CONTAINER_NAME}/start" \
  -X POST \
  -H "Content-Type: application/json" \
  --output /dev/null \
  --write-out "%{http_code}"

Docker Swarm

Anonymous (anonymous@undisclosed.example.com) — 2025-02-10T11:31:35+00:00

vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine

Docker Swarm

Node - это наши виртуальные машины, на которых установлен docker. Есть manager и workers ноды. Manager нода управляет workers нодами. Она отвечает за создание/обновление/удаление сервисов на workers, а также за их масштабирование и поддержку в требуемом состоянии. Workers ноды используются только для выполнения поставленных задач и не могут управлять кластером.
Stack - это набор сервисов, которые логически связаны между собой. По сути это набор сервисов, которые мы описываем в обычном compose файле. Части stack (services) могут располагаться как на одной ноде, так и на разных.
Service - это как раз то, из чего состоит stack. Service является описанием того, какие контейнеры будут создаваться. Если вы пользовались docker-compose.yaml, то уже знакомы с этой сущностью. Кроме стандартных полей docker в режиме swarm поддерживает ряд дополнительных, большинство из которых находятся внутри секции deploy.
Task - это непосредственно созданный контейнер, который docker создал на основе той информации, которую мы указали при описании service. Swarm будет следить за состоянием контейнера и при необходимости его перезапускать или перемещать на другую ноду.

Master node

$ docker swarm init
$ docker node ls
$ docker node rm stage
$ docker stack deploy --with-registry-auth -c ./docker-compose.stage.yaml stage
$ docker stack ls
$ docker stack services stage
$ docker service ps --no-trunc stage_back
$ docker service inspect stage_back
$ docker stack rm stage
$ docker service create --name nginx --replicas 3 nginx:alpine
$ docker service ps nginx
$ docker node update --label-add TAG=stage stage-1
$ docker container ls
$ docker secret create back_config example.yaml 
$ docker secret ls

stage - HOSTNAME (из docker node ls)

nano ./docker-compose.stage.yaml

version: "3.9"

services:
  back:
    image: docker-registry.ru:5000/ptm:stage
    ports:
      - "4003:4003"
    environment:
      TZ: "Europe/Moscow"
    extra_hosts:
      - host.docker.internal:host-gateway
    command: make server_start
    volumes:
      - /p/ptm/config/config.yaml:/p/ptm/config/config.yaml
      - /p/ptm/stat/web:/p/ptm/stat/web

nano ./example.yaml

token: sfsjksajflsf_secret

Node

$ docker swarm join --token SWMTKN-1-...-... 172.31.245.104:2377
$ docker swarm leave

Docker

Anonymous (anonymous@undisclosed.example.com) — 2026-01-12T20:37:16+00:00

vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine

Docker

Установка

Ubuntu

$ apt update && \
apt install ca-certificates curl gnupg lsb-release -y && \
mkdir -p /etc/apt/keyrings && \
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | gpg --dearmor -o /etc/apt/keyrings/docker.gpg && \
echo "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable" | tee /etc/apt/sources.list.d/docker.list > /dev/null && \
apt update && \
apt install docker-ce docker-ce-cli containerd.io docker-compose-plugin -y

Debian

$ apt update && \
apt install ca-certificates curl gnupg lsb-release -y && \
mkdir -p /etc/apt/keyrings && \
curl -fsSL https://download.docker.com/linux/debian/gpg -o /etc/apt/keyrings/docker.asc && \
echo "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.asc] https://download.docker.com/linux/debian $(. /etc/os-release && echo "$VERSION_CODENAME") stable" | tee /etc/apt/sources.list.d/docker.list > /dev/null && \
apt update && \
apt install docker-ce docker-ce-cli containerd.io docker-buildx-plugin docker-compose-plugin -y

Docker

$ sudo groupadd docker
$ sudo usermod -aG docker $USER
$ newgrp docker

Docker Swarm

Если Docker Swarm создается

$ docker swarm init
# В вответ docker swarm join --token SWMTKN-1-54k2k418tw2j0juwm3inq6crp4ow6xogswihcc5azg7oq5qo7e-a3rfeyfwo7d93heq0y5vhyzod 172.31.245.104:2377
# Эту команду необходимо будет выполнить на каждой присоединяймой ноде

Если необходимо присоеденить к уже существующему

$ docker swarm join-token worker
# В вответ docker swarm join --token SWMTKN-1-54k2k418tw2j0juwm3inq6crp4ow6xogswihcc5azg7oq5qo7e-a3rfeyfwo7d93heq0y5vhyzod 172.31.245.104:2377
# Эту команду необходимо будет выполнить на каждой присоединяймой ноде

Настройки

Log drivers: управление логами

nano /etc/docker/daemon.json

{
  "log-driver": "local",
  "log-opts": {
    "max-size": "10m",
    "max-file": "3"
  }
}

API

Docker Socket

Мониторинг

Dockerfile

Anonymous (anonymous@undisclosed.example.com) — 2024-05-02T19:24:27+00:00

[docker, dockerfile]

Dockerfile

Инструкции

RUN: В основном используемый для создания образов и установки приложений и пакетов, создает новый слой поверх существующего образа, фиксируя результаты.
CMD: Устанавливает параметры по умолчанию, которые можно переопределить из интерфейса командной строки Docker (CLI) при запуске контейнера.
ENTRYPOINT: Параметры по умолчанию, которые нельзя переопределить, когда контейнеры Docker запускаются с параметрами CLI.

В общем случае у вас должен быть Dockerfile CMD, а не Compose command:. Если не определить ни одной из них, то получите сообщение об ошибке.
В идеале отдельно указывать исполяемый бинарник в ENTRYPOINT и отдельно команды к нему в CMD.

ENTRYPOINT / CMD

Режим	Пример	Формат запуска	Завершение работы	$PATH
SHELL	ENTRYPOINT ping www.ya.ru	/bin/sh -c ping www.ya.ru	-	[ ]
EXEC	ENTRYPOINT ["ping", "www.ya.ru"]	ping www.ya.ru	CTRL-C	[x]

Правила использования

Если используется режим shell для ENTRYPOINT, CMD игнорируется.
При использовании режима exec для ENTRYPOINT аргументы CMD добавляются в конце.
При использовании режима exec для инструкции ENTRYPOINT необходимо использовать режим exec и для инструкции CMD. Если этого не сделать, Docker попытается добавить sh -c в уже добавленные аргументы, что может привести к некоторым непредсказуемым результатам.
Инструкции ENTRYPOINT и CMD могут быть переопределены с помощью флагов командной строки.
Все вышеперечисленные факты справедливы, но разработчики имеют возможность переопределять флаги в команде docker run

Использование

Используйте ENTRYPOINT, если вы не хотите, чтобы разработчики изменяли исполняемый файл, который запускается при запуске контейнера. Вы можете представлять, что ваш контейнер – исполняемая оболочка.
Используйте только CMD (без определения ENTRYPOINT), если требуется, чтобы разработчики могли легко переопределять исполняемый файл. Если точка входа определена, исполняемый файл все равно можно переопределить, используя флаг –entrypoint.

command

В файле Compose переопределяет CMDDockerfile. Есть некоторые незначительные синтаксические различия (в частности, Compose никогда не будет автоматически вставлять sh -cза вас оболочку оболочки), но они контролируют одно и то же в метаданных контейнера.

Однако помните, что помимо Compose существуют и другие способы запуска контейнера. docker run не прочитает ваш docker-compose.yml файл и не увидит эту command: он также не читается такими инструментами, как Kubernetes. Если вы встроите Dockerfile CMD в, оно будет использовать во всех вариантах.

Переопределение действительно необходимо command:в том случае, если вам нужно запустить основной процесс, отличный от стандартного, для контейнера.

endpoint

Описание

FROM — указывает название образа (image), который будет взят за основу.
ENV — устанавливает переменную среды
RUN — запустить команду в контейнере (все команды исполняются с полными правами в пределах контейнера)
ADD — добавить файл в контейнер
VOLUME — указать монтируемые директории (их можно монтировать на хост машину или на другие контейнеры)
EXPOSE — указать транслируемые порты (их можно транслировать на хост машину или на другие контейнеры)
CMD — запустить процесс (это и будет процесс, вокруг которого построен контейнер)

# Используем за основу контейнера Ubuntu 14.04 LTS
FROM ubuntu:14.04
# Переключаем Ubuntu в неинтерактивный режим — чтобы избежать лишних запросов
ENV DEBIAN_FRONTEND noninteractive 
# Устанавливаем локаль
RUN locale-gen ru_RU.UTF-8 && dpkg-reconfigure locales 
 
# Добавляем необходимые репозитарии и устанавливаем пакеты
RUN apt-get install -y software-properties-common
RUN add-apt-repository -y ppa:ondrej/php5-5.6
RUN add-apt-repository -y ppa:nginx/stable
RUN sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 4F4EA0AAE5267A6C
RUN apt-get update
RUN apt-get upgrade -y
RUN apt-get install -y wget curl php5-fpm php5-mysql php5-gd php5-curl php-pear php-apc php5-mcrypt php5-imagick php5-memcache supervisor nginx
 
# Добавляем описание виртуального хоста
ADD astgo.ru /etc/nginx/sites-enabled/astgo.ru 
# Отключаем режим демона для Nginx (т.к. запускать будем сами) 
RUN echo "\ndaemon off;" >> /etc/nginx/nginx.conf 
# Отключаем режим демона для php-fpm
RUN sed -i -e "s/;daemonize\s*=\s*yes/daemonize = no/g" /etc/php5/fpm/php-fpm.conf 
# Добавляем конфиг supervisor (описание процессов, которые мы хотим видеть запущенными на этом контейнере)
ADD supervisord.conf /etc/supervisor/conf.d/supervisord.conf 
 
# Объявляем, какие директории мы будем подключать
VOLUME ["/var/www"] 
# Объявляем, какой порт этот контейнер будет транслировать
EXPOSE 80 
# Запускаем supervisor
CMD ["/usr/bin/supervisord"]

Ссылки

Sonatype Nexus Repository	2023/06/18 17:49	docker, push, pull
Slurm	2025/02/26 19:57	hpc, slurm, container, docker
Мониторинг	2025/11/15 03:42	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
loki	2025/11/24 14:12	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
Docker Swarm + Loki + Fluent Bit + Fluentd + Grafana	2025/11/20 00:14	loki, docker, swarm, fluent-bit, fluentd, grafana
Docker Swarm + Fluent Bit + Loki + Grafana	2025/11/19 12:25	loki, docker, swarm, fluent-bit, grafana
Prometheus - Система мониторинга и оповещения с открытым исходным кодом.	2025/11/25 00:19	loki, docker, swarm, promtail, grafana, monitoring, fluentd, fluent-bit, prometheus
Docker Swarm + Promtail + Loki + Grafana	2025/11/19 11:12	loki, docker, swarm, promtail, grafana
Docker	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Docker-Compose	2024/05/02 19:24	docker, dockerfile
Docker Socket	2026/01/12 20:38	docker, swarm, api, socket
Docker Swarm	2025/02/10 11:29	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Dockerfile	2024/05/02 00:11	docker, dockerfile
Vagrant	2015/10/13 09:01	vagrant, chef, shell, puppet, salt, ansible, docker, virtual
Docker/Отладка	2019/07/30 10:46	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Ansible	2016/12/05 00:09	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Chef	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Puppet	2016/12/05 00:47	vagrant, chef, shell, puppet, salt, ansible, docker, devops
Восстановление настроек коробочки	2018/02/28 22:23	vagrant, chef, shell, puppet, salt, ansible, docker, virtual

Exim4 + Dovecot2 + MySql + Roundcube

Anonymous (anonymous@undisclosed.example.com) — 2015-10-02T09:19:46+00:00

mail, exim4, smtp

Exim4 + Dovecot2 + MySql + Roundcube

Установка Exim

apt-get install exim4 exim4-daemon-heavy
dpkg-reconfigure exim4-config

internet site; mail is sent and received directly using SMTP
System mail name: server name
IP-addresses to listen on for incoming SMTP connections: 127.0.0.1 ; ::1; [IP сервера]
Other destinations for which mail is accepted: server name
Keep number of DNS-queries minimal (Dial-on-Demand)? No
Delivery method for local mail: mbox format in /var/mail/
Split configuration into small files? No

Конфигурация

primary_hostname = mail.ztc
 
#hide mysql_servers = localhost/mail/admin/my4sitecms
hide mysql_servers = 127.0.0.1/postfix/postfix/postfixadmin
 
domainlist local_domains = ${lookup mysql{SELECT `domain` \
            FROM `domain` WHERE \
            `domain`='${domain}' AND \
            `active`='1'}}
 
domainlist relay_to_domains = ${lookup mysql{SELECT `domain` \
            FROM `domain` WHERE \
            `domain`='${domain}' AND \
            `active`='1'}}
 
#domainlist local_domains = *.mail.ztc
#domainlist relay_to_domains = *.mail.ztc
hostlist relay_from_hosts = localhost:127.0.0.0/8:192.168.1.0/24
#av_scanner = clamd:/var/lib/clamav/clamd-socket
acl_smtp_rcpt = acl_check_rcpt
#acl_smtp_data = acl_check_virus
qualify_domain = mail.ztc
qualify_recipient = mail.ztc
allow_domain_literals = false
 
# Пользователь от которого работает exim
exim_user = mail
 
# группа в кторой работает exim
exim_group = mail
 
# запрещаем работу доставки под юзером root - в целях безопасности
never_users = root
rfc1413_query_timeout = 0s
sender_unqualified_hosts = +relay_from_hosts
recipient_unqualified_hosts = +relay_from_hosts
ignore_bounce_errors_after = 45m
timeout_frozen_after = 15d
helo_accept_junk_hosts = 192.168.100.0/24
auto_thaw = 1h
smtp_banner = "$primary_hostname, ESMTP EXIM $version_number"
smtp_accept_max = 50
smtp_accept_max_per_connection = 100
smtp_connect_backlog = 30
smtp_accept_max_per_host = 20
split_spool_directory = true
remote_max_parallel = 15
return_size_limit = 70k
message_size_limit = 64M
helo_allow_chars = _
smtp_enforce_sync = true
log_selector = \
+all_parents \
+connection_reject \
+incoming_interface \
+lost_incoming_connection \
+received_sender \
+received_recipients \
+smtp_confirmation \
+smtp_syntax_error \
+smtp_protocol_error \
+queue_run
syslog_timestamp = no
 
#hide mysql_servers = 127.0.0.1/mail/admin/my4sitecms
 
#
# ACL
#
### конфигурация ACL для входящей почты
begin acl
acl_check_rcpt:
# принимать сообщения которые пришли с локалхоста,
# не по TCP/IP
accept hosts = :
 
# Запрещаем письма содержащие в локальной части
# символы @; %; !; /; |. Учтите, если у вас было
# `percent_hack_domains` то % надо убрать.
# Проверяются локальные домены
deny message = "incorrect symbol in address"
domains = +local_domains
local_parts = ^[.] : ^.*[@%!/|]
 
# Проверяем недопустимые символы для
# нелокальных получателей:
deny message = "incorrect symbol in address"
domains = !+local_domains
local_parts = ^[./|] : ^.*[@%!] : ^.*/\\.\\./
 
# Принимаем почту для постмастеров локальных доменов без
# проверки отправителя (я закомментировал, т.к. это -
# основной источник спама с мой ящик).
accept local_parts = postmaster
domains = +local_domains
 
# Запрещщаем тех, кто не обменивается приветственными
# сообщениями (HELO/EHLO)
deny message = "HELO/EHLO require by SMTP RFC"
condition = ${if eq{$sender_helo_name}{}{yes}{no}}
 
# Принимаем сообщения от тех, кто аутентифицировался:
accept authenticated = *
 
# !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
# Рубаем нах, тех, кто подставляет свой IP в HELO
# deny message = "Your IP in HELO - access denied!"
# hosts = * : !+relay_from_hosts : !81-196.lissyara.su
# condition = ${if eq{$sender_helo_name}\
# {$sender_host_address}{true}{false}}
 
# Рубаем тех, кто в HELO пихает мой IP (2500 мудаков за месяц!)
# deny condition = ${if eq{$sender_helo_name}\
# {$interface_address}{yes}{no}}
# hosts = !127.0.0.1 : !localhost : *
# message = "main IP in your HELO! Access denied!"
 
# !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
# Рубаем тех, кто в HELO пихает только цифры
# (не бывает хостов ТОЛЬКО из цифр)
deny condition = ${if match{$sender_helo_name}\
{\N^\d+$\N}{yes}{no}}
hosts = !127.0.0.1 : !localhost : *
message = "can not be only number in HELO!"
 
 
# Рубаем тех, кто не пишет отправителя
# deny condition = ${if eq{$sender_address}{}{yes}{no}}
# hosts = !127.0.0.1 : !localhost : *
# message = "А какого HELO пустое?! Не по RFC..."
 
# Рубаем тех, кто не пишет отправителя (пробел)
# deny condition = ${if match{$sender_address}{\N^\s+$\N}{yes}{no}}
# hosts = !127.0.0.1 : !localhost : *
# message = "А какого HELO пустое (тока пробелы)?! Не по RFC..."
 
# Рубаем тех, кто не пишет отправителя
# deny condition = ${if eq{$sender_address}{}{yes}{no}}
# hosts = !127.0.0.1 : !localhost : *
# message = "Where sender of this mail?!"
 
# Рубаем хосты типа *adsl*; *dialup*; *pool*;....
# Нормальные люди с таких не пишут. Если будут
# проблемы - уберёте проблемный пункт (у меня клиенты
# имеют запись типа asdl-1233.zone.su - я ADSL убрал...)
deny message = "your hostname is bad (adsl, poll, ppp & etc)."
condition = ${if match{$sender_host_name} \
{adsl|dialup|pool|peer|dhcp} \
{yes}{no}}
warn
 
# ставим дефолтовую задержку в 0 секунд
set acl_m0 = 30s
warn
 
# ставим задержку в 0 секунд своим хостам и
# дружественным сетям (соседняя контора :))
hosts = +relay_from_hosts:192.168.1.0/29
set acl_m0 = 0s
warn
 
# пишем в логи задержку (если оно вам надо)
logwrite = Delay $acl_m0 for $sender_host_name \
[$sender_host_address] with HELO=$sender_helo_name. Mail \
from $sender_address to $local_part@$domain.
delay = $acl_m0
 
# Проверка получателя в локальных доменах.
# Если не проходит, то проверяется следующий ACL,
# и если непрошёл и там - deny
accept domains = +local_domains
endpass
message = "In my mailserver not stored this user"
verify = recipient
 
# Рубаем тех, кто в блэк-листах. Серваки перебираются
# сверху вниз, если не хост не найден на первом, то
# запрашивается второй, и т.д. Если не найден ни в одном
# из списка - то почта пропускается.
deny message = "you in blacklist - $dnslist_domain \n $dnslist_text"
dnslists = opm.blitzed.org : \
cbl.abuseat.org : \
bl.csma.biz : \
dynablock.njabl.org
 
# Разрешаем почту от доменов в списке relay_from_hosts
accept hosts = +relay_from_hosts
 
# Если неподошло ни одно правило - чувак явно ищет
# открытый релей. Пшёл прочь. :)
deny message = "Homo hominus lupus est"
 
# ACL проверяющие содержимое (тело) письма.
acl_check_data:
# Проверяем письмо на вирусы
deny malware = *
message = "In e-mail found VIRUS - $malware_name"
# Если есть необходимость - тут проверки на спам
 
# Пропускаем остальное
accept
 
#
# чё делаем с почтой
#
begin routers
# Поиск маршрута к хосту в DNS. Если маршрут не найден в DNS -
# то это `унроутабле аддресс`. Не проверяются локальные
# домены, 0.0.0.0 и 127.0.0.0/8
dnslookup:
driver = dnslookup
domains = ! +local_domains
transport = remote_smtp
ignore_target_hosts = 0.0.0.0 : 127.0.0.0/8 : 195.151.216.193
#no_more
 
# смотрим альясы
system_aliases:
driver = redirect
allow_fail
allow_defer
data = ${lookup mysql{SELECT `goto` FROM `alias` WHERE \
`address`='${quote_mysql:$local_part@$domain}' OR \
`address`='${quote_mysql:@$domain}'}}
 
# Доставляем почту в dovecot
dovecot_user:
driver = accept
condition = ${lookup mysql{SELECT `goto` FROM \
`alias` WHERE \
`address`='${quote_mysql:$local_part@$domain}' OR \
`address`='${quote_mysql:@$domain}'}{yes}{no}}
transport = dovecot_delivery
 
# начинаются транспорты - как доставляем почту
begin transports
# Доставка на удалённые хосты - по SMTP
remote_smtp:
driver = smtp
# Доставка локальным адресатам - в dovecot.
dovecot_delivery:
driver = pipe
command = /usr/lib/dovecot/deliver -d $local_part@$domain
message_prefix =
message_suffix =
delivery_date_add
envelope_to_add
return_path_add
log_output
user = mail
 
# Имя программы
address_pipe:
driver = pipe
return_output
 
# Транспорт для автоответов
address_reply:
driver = autoreply
 
# Начинаются повторы недоставленных писем.
begin retry
* * F,2h,15m; G,16h,1h,1.5; F,4d,6h
 
# преобразование адресов. У меня такого нету.
begin rewrite
 
# Секция авторизации при отправке писем.
begin authenticators
 
# Oутглюк
auth_plain:
driver = plaintext
public_name = PLAIN
server_condition = ${lookup mysql{SELECT `username` FROM \
`mailbox` WHERE `username` = \
'${quote_mysql:$2}' AND `password` = \
'${quote_mysql:$3}'}{yes}{no}}
server_prompts = :
server_set_id = $auth2
 
# Вроде по этому оутглюк, а по предыдущему нетскейп.
auth_login:
driver = plaintext
public_name = LOGIN
server_condition = ${lookup mysql{SELECT `username` FROM \
`mailbox` WHERE `username` = \
'${quote_mysql:$auth1}' AND `password` = \
'${quote_mysql:$auth2}'}{yes}{no}}
server_prompts = Username:: : Password::
server_set_id = $auth1
 
# А так авторизуется "Летучая Мышь" - TheBat!
auth_cram_md5:
driver = cram_md5
public_name = CRAM-MD5
server_secret = ${lookup mysql{SELECT `password` FROM \
`mailbox` WHERE `username` \
= '${quote_mysql:$auth1}'}{$value}fail}
server_set_id = $auth2!

Установка Dovecot2

apt-get install dovecot-common dovecot-imapd dovecot-mysql dovecot-pop3d

dovecot.conf

nano /etc/dovecot/dovecot.conf

nano /etc/dovecot/dovecot-mysql.conf

# Database driver: mysql, pgsql, sqlite
driver = mysql

# Database connection string. This is driver-specific setting.
connect = host=localhost dbname=users user=dovecot password=password

# Default password scheme.
default_pass_scheme = MD5

# passdb query to retrieve the password. It can return fields:
password_query = \
  SELECT username, domain, password \
  FROM users WHERE username = '%n' AND domain = '%d'

# userdb query to retrieve the user information. It can return fields:
user_query = \
  SELECT home, uid, gid \
  FROM users WHERE username = '%n' AND domain = '%d'

# If you wish to avoid two SQL lookups (passdb + userdb), you can use
# userdb prefetch instead of userdb sql in dovecot.conf. In that case you'll
# also have to return userdb fields in password_query prefixed with "userdb_"
# string. For example:
password_query = \
  SELECT userid AS user, password, \
    home AS userdb_home, uid AS userdb_uid, gid AS userdb_gid \
  FROM users WHERE userid = '%u'

# Query to get a list of all usernames.

SQL

 CREATE TABLE users (
     username VARCHAR(128) NOT NULL,
     DOMAIN VARCHAR(128) NOT NULL,
     PASSWORD VARCHAR(64) NOT NULL,
     home VARCHAR(255) NOT NULL,
     uid INTEGER NOT NULL,
     gid INTEGER NOT NULL,
     active CHAR(1) DEFAULT 'Y' NOT NULL
 );

Проверка

exim -bd -d+all

Установка почтового сервера Postfix(MTA) + Dovecot(POP3) + MYSQL и виртуальных доменов

Anonymous (anonymous@undisclosed.example.com) — 2016-08-20T18:37:31+00:00

server, mail, mta, pop3, smtp, postfix, dovecot

Установка почтового сервера Postfix(MTA) + Dovecot(POP3) + MYSQL и виртуальных доменов

Данное руководство описывает установку почтового сервера Postfix в связке с dovecot и базой данных mysql для хранения данных. По окончанию настройки мы получим почтовый сервер с поддержкой SMTP, POP3, IMAP, поддержку SSL, TLS, работу с виртуальными доменами. Так же данное руководство не является исчерпывающим, и может быть трудным для понимания новичкам, так как описано конкретно как настроить сервисы, но не описано как оно работает и так далее. Конфигурация была проверена и отлично работает на серверах с установленным Linux Ubuntu и Debian GNU Linux, но я думаю она подойдет и для других дистрибутивов. Описание установки приведено на примере Ubuntu, все пакеты взяты из стандартных репозиториев.

При настройке нашего нового сервиса я буду использовать примеры команд, обратите внимание на интерпритатор, их будет использоваться два, обычная командная строка (bash) и mysql, выглядит это так:

bash: $>
mysql: mysql>

Так же все действия производятся от имени пользователя root. На этом вступительную часть можно закончить и давайте приступим к установке и настройке нашего почтовика.

Установим все необходимые пакеты

Код:

aptitude install postfix-mysql mysql-server dovecot-pop3d dovecot-mysql dovecot-imapd openssl

Так же в дальнейшем вам может понадобится phpmyadmin и простой веб интерфейс squirrelmail для работы с почтовым ящиком, установить все это можно командой

Код:

aptitude install phpmyadmin squirrelmail

Создадим базу данных для почтового сервера

Код:

mysql>
create database mailserver;
mysql>
grant all on mailserver.* to mailuser@localhost identified by 'mailuser2007';
exit

Затем создайте таблицы в базе данных

Код:

CREATE TABLE `virtual_domains` (
id INT NOT NULL AUTO_INCREMENT PRIMARY KEY,
name VARCHAR(50) NOT NULL
) ENGINE = InnoDB;

CREATE TABLE `virtual_users` (
id int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY,
domain_id INT(11) NOT NULL,
user VARCHAR(40) NOT NULL,
password VARCHAR(32) NOT NULL,
CONSTRAINT UNIQUE_EMAIL UNIQUE (domain_id,user),
FOREIGN KEY (domain_id) REFERENCES virtual_domains(id) ON DELETE CASCADE) ENGINE = InnoDB;

CREATE TABLE `virtual_aliases` (
id int(11) NOT NULL AUTO_INCREMENT PRIMARY KEY,
domain_id INT(11) NOT NULL,
source VARCHAR(40) NOT NULL,
destination VARCHAR(80) NOT NULL,
FOREIGN KEY (domain_id) REFERENCES virtual_domains(id) ON DELETE CASCADE
) ENGINE = InnoDB;

Дальше необходимо создать файлы конфигурации для Postfix'a с информацией о базе данных. Создадим файл /etc/postfix/mysql-virtual-mailbox-domains.cf и впишем в него следующее содержание

Код:

user = mailuser
password = mailuser2007
hosts = 127.0.0.1
dbname = mailserver
query = SELECT 1 FROM virtual_domains WHERE name='%s'

Этот файл содержит запрос к базе данных из которого сервер извлекает виртуальный домен.

Теперь внесем изменения в конфигурацию самого сервера Postfix

Код:

$>
postconf -e virtual_mailbox_domains=mysql:/etc/postfix/mysql-virtual-mailbox-domains.cf

Внесем в нашу базу данных запись о виртуальном домене, в примере указан домен example.com

Код:

$>
mysql -p mailserver
mysql>
INSERT INTO virtual_domains (id, name) VALUES (1, 'example.com');
exit

Венитесь в обратно в шелл bash и проверьте правильность настроек виртуального домена командой, не забудьте сменить домен с example.com на свой.

Код:

$>
postmap -q example.com mysql:/etc/postfix/mysql-virtual-mailbox-domains.cf

Вы должны увидеть цифру 1 если все правильно настроено.

Перейдем к настройке почтовых ящиков, за них у нас будет отвечать отдельный пользователь и группа, давайте создадим их

Код:

$>
groupadd -g 5000 vmail
$>
useradd -g vmail -u 5000 vmail -d /home/vmail -m

Внесем изменения в конфигурацию Postfix'a

Код:

$>
postconf -e virtual_uid_maps=static:5000
$>
postconf -e virtual_gid_maps=static:5000

Создадим первый тестовый почтовый ящик, например john@example.com с паролем summersun

Код:

mysql>
INSERT INTO virtual_users (id, domain_id, user, password)
VALUES (1, 1, 'john', MD5('summersun'));

Потом нам необходимо создать view в базе данных для нормальной работы сервера Postfix

Код:

mysql>
CREATE VIEW view_users AS
SELECT CONCAT(virtual_users.user, '@', virtual_domains.name) AS email,
virtual_users.password
FROM virtual_users
LEFT JOIN virtual_domains ON virtual_users.domain_id=virtual_domains.id;

Проверим результат командой

Код:

mysql>
SELECT * FROM view_users;

Вы должны увидеть это:

+------------------+----------------------------------+
| email | password |
+------------------+----------------------------------+
| john@example.com | 14cbfb845af1f030e372b1cb9275e6dd |
+------------------+----------------------------------+

Создадим еще один файл конфигурации для Postfix'a в котором укажем даные для работы с почтовыми ящиками нащих юзеров, создайте файл /etc/postfix/mysql-virtual-mailbox-maps.cf и впишите в него это

Код:

user = mailuser
password = mailuser2007
hosts = 127.0.0.1
dbname = mailserver
query = SELECT 1 FROM view_users WHERE email='%s'

Внесем измения в главный файл конфига Postfix

Код:

$>
postconf -e virtual_mailbox_maps=mysql:/etc/postfix/mysql-virtual-mailbox-maps.cf

Проверьте результат командой

Код:

$>
postmap -q john@example.com mysql:/etc/postfix/mysql-virtual-mailbox-maps.cf

Вы должны увидеть цифру 1 если все правильно настроено.

Настроим альясы (для пересылки почты с одного ящика на другой, или с нескольких на один)

Добавим в базу данных тестовый алиас для нашего польователя john@example.com, вся почта пришедшая на его ящик будет дополнительно пересылаться на ящик jmiller@gmail.com

Код:

mysql>
INSERT INTO virtual_aliases (id, domain_id, source, destination)
VALUES (1, 1, 'john', 'john@example.com'),
(2, 1, 'john', 'jmiller@gmail.com');

Создадим view для алиасов по аналогии с view для пользователей

Код:

mysql>
CREATE VIEW view_aliases AS
SELECT CONCAT(virtual_aliases.source, '@', virtual_domains.name) AS email,
destination
FROM virtual_aliases
LEFT JOIN virtual_domains ON virtual_aliases.domain_id=virtual_domains.id;

Проверим результат

Код:

mysql>
SELECT * FROM view_aliases;

Вы должны увидеть это

+------------------+-------------------+
| email | destination |
+------------------+-------------------+
| john@example.com | john@example.com |
| john@example.com | jmiller@gmail.com |
+------------------+-------------------+

Дополним конфигурацию Postfix, создайте файл /etc/postfix/mysql-virtual-alias-maps.cf и впишите в него

Код:

user = mailuser
password = mailuser2007
hosts = 127.0.0.1
dbname = mailserver
query = SELECT destination FROM view_aliases WHERE email='%s'

Проверим правильность настроек

Код:

$>
postmap -q john@example.com mysql:/etc/postfix/mysql-virtual-alias-maps.cf

Вы увидите это

john@example.com,jmiller@gmail.com

Создадим следующий файАл, /etc/postfix/mysql-email2email.cf впишем в него

Код:

user = mailuser
password = mailuser2007
hosts = 127.0.0.1
dbname = mailserver
query = SELECT email FROM view_users WHERE email='%s'

Запишем настройки в главный файл конфига Postfix

Код:

$>
postconf -e virtual_alias_maps=mysql:/etc/postfix/mysql-virtual-alias-maps.cf,mysql:/etc/postfix/mysql-email2email.cf

Выставим правильные права доступа на файлы конфигурации почтового сервера, ведь в них хранятся пароли от базы данных

Код:

$>
chgrp postfix /etc/postfix/mysql-*.cf
$>
chmod u=rw,g=r,o= /etc/postfix/mysql-*.cf

Далее настроим dovecot в качестве локального агента доставки писем, для этого отредактируйте файл /etc/postfix/master.cf добавив в конец это

Код:

dovecot unix - n n - - pipe
  flags=DRhu user=vmail:vmail argv=/usr/lib/dovecot/deliver -d ${recipient}

Перезагрузите Postfix командой postfix reload, и добавьте информацию о виртуальном транспорте в главный конфиг Postfix

Код:

$>
postconf -e virtual_transport=dovecot
$>
postconf -e dovecot_destination_recipient_limit=1

Перейдем к настройкам dovecot, все файлы его конфигурации хранятся в папке /etc/dovecot, начнем настройку с файла /etc/dovecot/dovecot.conf

Найдите строку protocols и смените на

Код:

protocols = imap imaps pop3 pop3s

Так же найдите и измените строку disable_plaintext_auth до состояния disable_plaintext_auth = no

Далее измените параметр mail_location

Код:

mail_location = maildir:/home/vmail/%d/%n

Найдите строку namespace private и измените до

Код:

namespace private {
  separator = .
  prefix = INBOX.
  inbox = yes
}

Перейдите к секции "auth default" и отредактируйте разрешенные механизмы аутентификации

Код:

mechanisms = plain login

В этой же секции измените

Код:

passdb sql {
  args = /etc/dovecot/dovecot-sql.conf
}

Измените так же параметр userdb static

Код:

userdb static {
  args = uid=5000 gid=5000 home=/home/vmail/%d/%n allow_all_users=yes
}

Перейдите к секции socket listen сдесь мы укажем файлы сокета для аутентификации dovecot

Код:

socket listen {
  master {
    path = /var/run/dovecot/auth-master
    mode = 0600
    user = vmail
  }
  client {
    path = /var/spool/postfix/private/auth
    mode = 0660
    user = postfix
    group = postfix
  }
}

Перейдите к секции protocol lda, не забудьте сменить адрес постмастера на реальный

Код:

protocol lda {
  log_path = /home/vmail/dovecot-deliver.log
  auth_socket_path = /var/run/dovecot/auth-master
  postmaster_address = postmaster@example.com
  mail_plugins = cmusieve
  global_script_path = /home/vmail/globalsieverc
}

Сортировщик писем

mail_plugins

cmusieve - устаревший плпгин
sieve

На этом файл можно сохранить. Отредактируйте файл /etc/dovecot/dovecot-sql.conf, измените настройки на приведенные ниже

Код:

driver = mysql
connect = host=127.0.0.1 dbname=mailserver user=mailuser password=mailuser2007
default_pass_scheme = PLAIN-MD5
password_query = SELECT email as user, password FROM view_users WHERE email='%u';

Перезапустите dovecot командой /etc/init.d/dovecot restart и загляните в лог файл /var/log/mail.log, там вы должны увидеть

Код:

dovecot: Dovecot v1.0.rc15 starting up
dovecot: auth-worker(default): mysql: Connected to 127.0.0.1 (mymailserver)

Теперь выставим права доступа к файлам конфигурации dovecot

Код:

$>
chgrp vmail /etc/dovecot/dovecot.conf
$>
chmod g+r /etc/dovecot/dovecot.conf

Настроим TLS/SSL

Код:

$>
openssl req -new -x509 -days 3650 -nodes -out /etc/ssl/certs/dovecot.pem \
-keyout /etc/ssl/private/dovecot.pem

Ответьте на несколько вопросов и сертификат будет создан, не забудьте указать правильно все параметры вместо примеров приведённых ниже

Код:

Generating a 1024 bit RSA private key
.........++++++
............................++++++
writing new private key to '/etc/ssl/certs/dovecot.pem'
-----
You are about to be asked to enter information that will be incorporated
into your certificate request.
What you are about to enter is what is called a Distinguished Name or a DN.
There are quite a few fields but you can leave some blank
For some fields there will be a default value,
If you enter '.', the field will be left blank.
-----
**Country Name (2 letter code) [AU]**:RU
**State or Province Name (full name) [Some-State]**:Russia
**Locality Name (eg, city) []**:Russia
**Organization Name (eg, company) [Internet Widgits Pty Ltd]**:example.com
**Organizational Unit Name (eg, section)** []:
**Common Name (eg, YOUR name) []**:mail.example.com
**Email Address []**:postmaster@example.com

Выставим права доступа на файл

Код:

$>
chmod o= /etc/ssl/private/dovecot.pem

Создадим еще один сертификат по аналогии с предыдущим

Код:

$>
openssl req -new -x509 -days 3650 -nodes -out /etc/ssl/certs/postfix.pem \
-keyout /etc/ssl/private/postfix.pem

Сменим права доступа

Код:

chmod o= /etc/ssl/private/postfix.pem

Внесите изменения в конфиг Postfix'a

Код:

$>
postconf -e smtpd_tls_cert_file=/etc/ssl/certs/postfix.pem
$>
postconf -e smtpd_tls_key_file=/etc/ssl/private/postfix.pem
$>
postconf -e smtpd_use_tls=yes

Теперь настроим аутентификацию SMTP, внесите следующие изменения в конфиг Postfix'a, не забудьте сменить примеры на реальные адреса сетей! В примере используется сеть 192.168.50.0/24 ей разрешено отправлятиь почту без SMTP авторизации.

Код:

$>
postconf -e mynetworks=192.168.50.0/24
$>
postconf -e smtpd_sasl_type=dovecot
$>
postconf -e smtpd_sasl_path=private/auth
$>
postconf -e smtpd_sasl_auth_enable=yes
$>
postconf -e smtpd_recipient_restrictions=permit_mynetworks,permit_sasl_authenticated,reject_unauth_destination

Отредактируйте файл /etc/postfix/main.cf изменив параметр размера почтового ящика, например, на 100 мегабайт

Код:

mailbox_size_limit = 102400

На этом настройка нашего почтового сервера закончена, перезапустите сервисы postfix и dovecot, выполните команду

Код:

postfix check

для проверки правильности настроек и прав доступа на файлы, команда должна отдать пустой результат.

Все ошибки и прочие события из жизни вашего почтовика вы можете найти в логах

/var/log/mail.log
/var/log/mail.err
/var/log/mail.warn
/var/log/mail.info

Конфигурации

dovecot.conf
dovecot-sql.conf
managesieve/sieve - Сортировщик почты

dpkg - Пакетный менеджер

Anonymous (anonymous@undisclosed.example.com) — 2022-02-12T23:57:18+00:00

linux, dpkg, system, packages

dpkg - Пакетный менеджер

Продолжение настройки пакетов

$ dpkg --configure -a

Переустановка пакетов / Восстановдение пакетов

Восстановдение пакетов

Исправить ошибки

apt-get clean
apt-get -f install
dpkg –configure -a

Список установленных пакетов

dpkg --get-selections

Список установленных PHP 7.0

$ dpkg --get-selections | grep -v "deinstall" |grep php7.0| cut -f1

в строчку

$ dpkg --get-selections | grep -v "deinstall" |grep php7.0| cut -f1 | tr '\n' ' '

Поиск пакета, которому принадлежит конкретный файл.

Иногда не понятно какому пакету принадлежит данный файл в системе. Будь то исполняемый файл, библиотека и тп.

Для этого существует команда dpkg -S чего_ищем, но здесь есть маленькая хитрость:

Если указать просто имя програмки (к примеру ssh), то выдастся много ненужного мусора. Чтобы этого не происходило, нужно указывать полный путь к данной программе:

  $ which ssh
  
  /usr/bin/ssh
  
  $ dpkg -S /usr/bin/ssh
  
  openssh-client: /usr/bin/ssh

или проще:

  $ dpkg -S `which ssh`

openssh-client: /usr/bin/ssh

Здесь видно что программа ssh входит в пакет openssh-client.

Удаление группы пакетов по признаку в названии.

Иногда хочется удалить группу пакетов содержащих что-то общее в названии (к примеру kde или x-server).

Для этого поможет команда dpkg -l 'чего_ищем' - показывает все пакеты удовлетворяющие запросу.

К примеру: удалить все что содержит kde:

dpkg -P `dpkg -l '*kde*' | awk '{ print $2 }' | sed '1,6d'`

здесь конвеер в подоболочке:

dpkg -P пакет(ы) - удалить пакет(ы) вместе с конфигурационными файлами
dpkg -l '*kde*' - показать все пакеты содержащие слово kde в любой части слова
awk '{ print $2 }' - печатать только второй столбик (содержащий имена пакетов)
sed '1,6d' - удалить первые 6 строк (мусор)

У данного конвеера есть маленький недочет: dpkg пытается удалить даже не установленные пакеты в системе. Скриптик работающий более правильно пусть будет домашним заданием!

Прочие вкусности.

dpkg -r имя_пакета - удалить пакет
dpkg -P имя_пакета - удалить пакет вместе с конфигурационными файлами;
dpkg -s имя_пакета - показать подробную информацию о пакете;
dpkg -L имя_пакета - показать список файлов содержащихся в пакете.
dpkg –get-selections - Показывает список установленных пакетов

Убрать варнинги dpkg

У меня при работе с dpkg и apt-get появились такие сообщения

  dpkg: warning: parsing file '/var/lib/dpkg/status' near line 25810 package 'kernel-source-2.4.18':
   error in Version string 'linex3': version number does not start with digit
  dpkg: warning: parsing file '/var/lib/dpkg/available' near line 48390 package 'am-utils':
   'Replaces' field, reference to 'amd': error in version: version number does not start with digit
  dpkg: warning: parsing file '/var/lib/dpkg/available' near line 48393 package 'am-utils':
   'Conflicts' field, reference to 'amd': error in version: version number does not start with digit
   ...

Сообщение в которых фигурирует /var/lib/dpkg/available чистятся командой

$ sudo dpkg –clear-avail

Те пакеты, в варнингах которых находится /var/lib/dpkg/status, удалены, но их настройки остались. Для того что бы окончательно почистить на ними можно применить команду apt-get purge

$ apt-get purge kernel-source-2.4.18

Заморозить пакет

aptitude -t squeeze install php
aptitude hold php

Установка и конфигурирование драйверов

Anonymous (anonymous@undisclosed.example.com) — 2017-11-02T18:48:27+00:00

Установка и конфигурирование драйверов

$ lsmod

To show information about a module:

$ modinfo module_name

To list the options that are set for a loaded module:

$ systool -v -m module_name

To display the comprehensive configuration of all the modules:

$ modprobe -c | less

To display the configuration of a particular module:

$ modprobe -c | grep module_name

List the dependencies of a module (or alias), including the module itself:

$ modprobe --show-depends module_name

Загрузка/Тест

$ modprobe module_name

Выгрузка

$ modprobe -r module_name
$ rmmod module_name

Настройка

Папка с настройками /etc/modprobe.d/

Пример:

/etc/modprobe.d/myfilename.conf
options modname parametername=parametercontents

Пример:

/etc/modprobe.d/thinkfan.conf
#On Thinkpads, this lets the 'thinkfan' daemon control fan speed.
options thinkpad_acpi fan_control=1

Символические ссылки

nano /etc/modprobe.d/myalias.conf

alias mymod really_long_module_name

nano /etc/modprobe.d/modprobe.conf

#Prevent Bluetooth autoload.

alias net-pf-31 off

Черный список

Драйвера которые необходимо пропустить при загрузке

nano /etc/modprobe.d/nobeep.conf

#Do not load the 'pcspkr' module on boot.

blacklist pcspkr

Драйверы

firmware-bnx2 - Драйвер для сетевой платы HP

Du (Размер каталога)

Anonymous (anonymous@undisclosed.example.com) — 2012-12-10T09:51:17+00:00

Du (Размер каталога)

du -shc /* 2>/dev/null

флаги:

s - Выводить размеры только для указанных явно аргументов, а не для их подкаталогов.
h - Добавлять букву размерности (двоичного), к каждому размеру. (Kb, Mb, etc)
c - Итого.

e2fsprogs

Anonymous (anonymous@undisclosed.example.com) — 2012-08-18T20:56:33+00:00

e2fsprogs

e2fsprogs (иногда называемая e2fs programs) -это набор утилит для поддержания файловых систем ext2, ext3 и ext4. Эти файловые системы обычно по умолчанию входят в дистрибутивы Linux.

e2fsck, fsck-программа, проверяющая и корректирующая несоответствия.
mke2fs, используемая для создания файловых систем ext2, ext3 и ext4.
resize2fs, которая может расширять и сжимать файловые системы ext2, ext3 and ext4.
tune2fs, используемая для модифицирования параметров файловой системы.
dumpe2fs, которая печатает superblock and block group information.
debugfs, используется для ручного просмотра и изменения внутренней структуры файловой системы.

Elasticsearch - поисковая система

Anonymous (anonymous@undisclosed.example.com) — 2019-07-15T19:12:13+00:00

search, indexer, elasticsearch, indexer

Elasticsearch - поисковая система

Документация

Установка

Установка и настройка Elasticsearch

Установите максимальный размер открытых дескрипторов файла для пользователя от 32k до 64k

nano /etc/sysctl.conf

vm.max_map_count = 262144

Если возможно, отключите свопинг памяти для процессов Elasticsearch. Обратите внимание, что в виртуальных средах это может привести к неожиданным результатам.
Установите значение -Xms равным -Xmx (то же самое что установить значение переменной среды ES_HEAP_SIZE).
Оставьте некоторое количество памяти, чтобы кеш операционной системы мог использовать его для Lucene.

Elasticsearch JVM не должен занимать больше половины всего объема памяти.

nano /etc/elasticsearch/jvm.options

-Xms2g
-Xmx2g

Проверка работоспособности сервера

$ curl -XGET http://localhost:9200/_stats/?pretty
$ curl -XGET http://localhost:9200/_nodes/?pretty
$ curl --silent -XGET "http://localhost:9200/_snapshot/_all"

$ curl --silent -XGET  "http://localhost:9200/_cat/nodes?pretty"
mbp-mirocow 192.168.1.147 11 78 6.88 d * Mirocow

Статьи / Документация / Примеры индексов / Примеры запросов

Документация

Уроки

Статьи / Дискуссии

Индексы

Mapping

Запросы

https://www.found.no/play/#

Примеры

Библиотеки

Расширения для Frameworks

Yii2 framework

PHP

Программное обеспечение

Logstash
Kibana
Beats
- Filebeat
- metricbeat
- packetbeat
- winlogbeat
- auditbeat
- heartbeat

etckeeper

Anonymous (anonymous@undisclosed.example.com) — 2015-10-22T00:04:46+00:00

backup

etckeeper

etckeeper позволяет легко сохранять содержимое каталога /etc в хранилище системы контроля версий (VCS). Он отслеживает когда apt автоматически сохраняет изменения в /etc при установке или обновлении пакетов. Помещение /etc под контроль версий сейчас рассматривается как лучшая практика в индустрии, и преимуществом etckeeper является то, что он делает этот процесс безболезненным насколько это возможно. Установите etckeeper, ведя следующее в терминале:

sudo apt-get install etckeeper

Основной файл конфигурации, /etc/etckeeper/etckeeper.conf, достаточно простой. Основной опцией является выбор какую VSC использовать. По умолчанию etckeeper настроен на использование в качестве системы контроля версий bzr. Хранилище автоматически инициализируется (и сохраняет начальное состояние) в процессе установки. Есть возможность отменить это, выполнив следующую команду:

sudo etckeeper uninit

По умолчанию etckeeper будет сохранять незафиксированные изменения в /etc ежедневно. Это может быть отменено использованием опции настройки AVOID_DAILY_AUTOCOMMITS. Он также будет автоматически сохранять изменения до и после установки пакетов. Для более точного отслеживания изменений рекомендуется фиксировать изменения вручную, добавляя описание фиксации следующим образом:

sudo etckeeper commit "..Reason for configuration change.."

Используя команды VCS, вы можете просматривать информацию в журнале по поводу файлов в /etc:

sudo bzr log /etc/passwd

Для демонстрации интеграции с системой управления пакетами, установим postfix:

sudo apt-get install postfix

Когда установка завершится, все конфигурационные файлы postfix будут переданы в хранилище:

Committing to: /etc/
added aliases.db
modified group
modified group-
modified gshadow
modified gshadow-
modified passwd
modified passwd-
added postfix
added resolvconf
added rsyslog.d
modified shadow
modified shadow-
added init.d/postfix
added network/if-down.d/postfix
added network/if-up.d/postfix
added postfix/dynamicmaps.cf
added postfix/main.cf
added postfix/master.cf
added postfix/post-install
added postfix/postfix-files
added postfix/postfix-script
added postfix/sasl
added ppp/ip-down.d
added ppp/ip-down.d/postfix
added ppp/ip-up.d/postfix
added rc0.d/K20postfix
added rc1.d/K20postfix
added rc2.d/S20postfix
added rc3.d/S20postfix
added rc4.d/S20postfix
added rc5.d/S20postfix
added rc6.d/K20postfix
added resolvconf/update-libc.d
added resolvconf/update-libc.d/postfix
added rsyslog.d/postfix.conf
added ufw/applications.d/postfix

Committed revision 2. В качестве примера, как etckeeper отслеживает изменения вручную, добавьте новую систему в /etc/hosts. Используя bzr вы сможете увидеть какие файлы были изменены:

sudo bzr status /etc/

modified:

hosts

Теперь зафиксируем изменения:

sudo etckeeper commit "new host"

Exim4 - Тестирование

Anonymous (anonymous@undisclosed.example.com) — 2018-06-01T11:49:45+00:00

exim4, testing, mail, smtp, pop3

Exim4 - Тестирование

PHP

sendmail_path = "/usr/sbin/exim4 -t"

Тестирование

apt-get install mailutils

$ echo "This is a test." | mail -s Testing someone@somedomain.com
$ exim -d+all -bt someone@somedomain.com

smtp-client.pl - Консольный клиент для отправки почты

Ошибки и их решения

/var/log/exim4/mainlog:2013-10-17 00:23:42 1VWXd4-0001Rk-PG ** some-mail@gmail.com R=dnslookup T=remote_smtp: SMTP error from remote mail server after end of data: host gmail-smtp-in.l.google.com [2a00:1450:4008:c01::1a]: 550-5.7.1 [2a00:ab00:106:37:200:69:218:0      16] Our system has detected that
550-5.7.1 this message does not meet IPv6 sending guidelines regarding PTR
550-5.7.1 records and authentication. Please review
550-5.7.1 https://support.google.com/mail/?p=ipv6_authentication_error for more
550 5.7.1 information. dx8si12019086bkc.176 - gsmtp

Решение в данном случае простое. Или прописать PTR на IPv6 или отключить поддержку IPv6 в Exim4. Для этого нада поместить disable_ipv6 до begin acl

Ссылки

http://sadmin.pp.ua/pochtovaya-sistema-na-baze-exim-dovecot-ssl-clamav-auto-white-list-postfixadmin-roundcube-autoreply.html

Exim4 Smtp Server / Установка и настройка

Anonymous (anonymous@undisclosed.example.com) — 2018-05-15T22:55:34+00:00

mail, exim4, smtp, exim4-config, dpkg-reconfigure

Exim4 Smtp Server / Установка и настройка

aptitude install exim4
dpkg-reconfigure exim4-config

Debian

nano /etc/exim4/update-exim4.conf.conf

Настройка

Или запустить

$ dpkg-reconfigure exim4-config

Mail Server configuration: internet site; mail is sent and received directly using SMTP
System mail name: желательно вписываем сюда обратную зону для вашего IP интерфейса eth0. Либо просто full hostname сервера (mail.debian.pro, например)
IP-addresses to listen on for incoming SMTP connections: 127.0.0.1 (нам же не нужен open relay?)
Other destinations for which mail is accepted: вписываем через пробел домены, от имени которых нам нужно отправлять письма с этого сервера.
Domains to relay mail for: если не знаете зачем оно, то оставляйте пустое поле
Machines to relay mail for: аналогично, если не знаем — оставляем пустым
Keep number of DNS-queries minimal (Dial-on-Demand)? No
Delivery method for local mail: Maildir
Split configuration into small files? По желанию. Я ставлю No.
Root and postmaster mail recipient: Вбиваем email, если желаем на него перенаправлять почту адресованную postmaster и root

Статьи / Настройки / Документация

Команды

Информация по очередям (Queue)

Вывести информацию по колличеству писем в очереди

exim -bpc

Вывести список сообщений в очереди (время в очереди, размер, идентификатор сообщения, отправитель, получатель)

exim -bp

 1m  3.4K 1avKHb-0000RN-3n <> *** frozen ***
          noreply@host.ru

 1m  3.4K 1avKHb-0000RU-HJ <> *** frozen ***
          noreply@host.ru

 0m   555 1avKKR-0000Vl-Gq <my-email@yandex.ru>
          my-email@yandex.ru

Отображение всех сообщений в очереди (количество, объем, старых, новых, области, и итоги)

exiwhat

50591 daemon: -q30m, listening for SMTP on [127.0.0.1]:25 [62.210.189.100]:25 [::1]:25

Отображает текущую очередь, с группировкой по имени хоста

exim -bp | exiqsumm

Показывает что делаю процессы сервера exim

  
Count  Volume  Oldest  Newest  Domain
-----  ------  ------  ------  ------

1    3481      3d      3d  altaiautoservice.ru
2    2560     19h     19h  jmail.com
8    27KB      7m      7m  mail.ru
1    5427      3d      3d  meil.ru
1    3481      4d      4d  motortula.ru
1    3481      3d      3d  razvalanet.ru
1    5427      4d      4d  tandex.ru
2    6963      7m      7m  yandex.ru
---------------------------------------------------------------
17    57KB      4d      7m  TOTAL

Поиск сообщений в очереди exiqgrep

Поиск в очереди сообщения от определенного отправителя

exiqgrep -f [user]@example.com

Поиск в очереди сообщений для конкретного получателя/домена

exiqgrep -r [user]@example.com

Вывод только Message-ID, как результат одного из двух поисковых запросов выше

exiqgrep -i [ -r | -f ] ...

Вывод количества сообщений, как результат одного из поисковых запросов выше

exiqgrep -c [ -r | -f ] ...

Вывод только Message-ID очереди

exiqgrep -i

Для поиска только среди заблокированных( замороженных ) сообщений, используйте ключ -z, или -x для поиска только среди не заблокированных. Еще несколько ключей отвечающих за вывод результатов поиска

Ключи

-f Поиск в очереди сообщений для конкретного отправителя
-z Поиск в очереди замороженных сообщений
-x Поиск в очереди только не замороженных сообщений
-r Поиск сообщений для определенного адресата
-o Поиск сообщений, старее, указанного количества секунд.

Флаги exiqgrep

Просмотр сообщений в очереди

Просмотр заголовков сообщения в очереди

exim -Mvh

Просмотр тела сообщения в очереди

exim -Mvb

Просмотр лога сообщения

exim -Mvl

Управление очередью exim

Начать процесс выполнения очереди

exim -q -v

Начать процесс выполнения только для локальных получателей

exim -ql -v

Удалить сообщение из очереди

exim -Mrm

Удалить все сообщения, которые старше, чем Х секунд из очереди (например, 5 дней будет 432 000 секунд)

exiqgrep -o 432000 -i | xargs exim -Mrm

Удалить все сообщения поподающие под выражение

exiqgrep -i -f sdmo-generators.com | xargs exim -Mrm

Заморозить все сообщения в очереди от отправителя

exiqgrep -i -f email@example.com | xargs exim -Mf

Разморозить сообщения

exim -Mt <message id> <message id> ...

Просмотр заголовков сообщения в очереди

exim -Mvh <message id>

Просмотр тела сообщения в очереди

exim -Mvb <message id>

Просмотр лога сообщения

exim -Mvl <message id>

Удалить все сообщения из очереди

exiqgrep -i | xargs exim -Mrm

Утилиты

“exiwhat” - список, что делают процессы exim'a
“exiqgrep” - выбор из очереди
“exiqsumm” - суммирование очереди
“exigrep” - поиск по главному логу
“exipick” - выбор сообщений по различным критериям
“exicyclog” - ротация лог-файлов
“eximstats” - выбор статистики из логов
“exim_checkaccess” - проверка приёма адреса с данного IP
“exim_dbmbuild” - сборка файла DBM
“exinext” - извлечение информации повторов
“exim_dumpdb” - дамп БД подсказок
“exim_tidydb” - очистка БД подсказок
“exim_fixdb” - правка БД подсказок
“exim_lock” - блокировка файла почтового ящика (mailbox)

Аунтефикация / SPAM

Сервис проверки почтового сервера

http://mxtoolbox.com/SuperTool.aspx

Сервис проверки наличия в Blacklist

fail2ban

Anonymous (anonymous@undisclosed.example.com) — 2016-05-21T13:42:31+00:00

network, demon, server, shell, software, service, iptables, utils

fail2ban

Fail2ban — простой в использовании локальный сервис, который отслеживает log–файлы запущенных программ, и на основании различных условий блокирует по IP найденных нарушителей.

Программа умеет бороться с различными атаками на все популярные *NIX–сервисы, такие как Apache, Nginx, ProFTPD, vsftpd, Exim, Postfix, named, и т.д.

Но в первую очередь Fail2ban известен благодаря готовности «из коробки» к защите SSH–сервера от атак типа «bruteforce», то есть к защите SSH от перебора паролей.

Настройка Fail2ban для защиты SSH Установка Fail2ban

Готовые пакеты Fail2ban можно найти в официальных репозиториях всех популярных Linux дистрибутивов.

Установка Fail2ban на Debian/Ubuntu:

apt-get install fail2ban
Установка Fail2ban на CentOS/Fedora/RHEL:

yum install fail2ban

Конфигурация Fail2ban

На данном этапе Fail2ban уже готов к работе, базовая защита SSH сервера от перебора паролей будет включена по умолчанию. Но лучше всё-же внести некоторые изменения следуя рекомендациям ниже.

У программы два основных файла конфигурации:

/etc/fail2ban/fail2ban.conf — отвечает за настройки запуска процесса Fail2ban. /etc/fail2ban/jail.conf — содержит настройки защиты конкретных сервисов, в том числе sshd. Файл jail.conf поделён на секции, так называемые «изоляторы» (jails), каждая секция отвечает за определённый сервис и тип атаки:

[DEFAULT]
ignoreip = 127.0.0.1/8
bantime  = 600
maxretry = 3
banaction = iptables-multiport

[ssh]
enabled  = true
port     = ssh
filter   = sshd
logpath  = /var/log/auth.log
maxretry = 6

Параметры из секции [DEFAULT] применяются ко всем остальным секциям, если не будут переопределены.

Секция [ssh] отвечает за защиту SSH от повторяющихся неудачных попыток авторизации на SSH–сервере, проще говоря, «brute–force».

Подробнее по каждому из основных параметров файла jail.conf:

ignoreip — IP–адреса, которые не должны быть заблокированы. Можно задать список IP-адресов разделённых пробелами, маску подсети, или имя DNS–сервера.
bantime — время бана в секундах, по истечении которого IP–адрес удаляется из списка заблокированных.
maxretry — количество подозрительных совпадений, после которых применяется правило. В контексте [ssh] — это число неудавшихся попыток логина, после которых происходит блокировка.
enabled — значение true указывает что данный jail активен, false выключает действие изолятора.
port — указывает на каком порту или портах запущен целевой сервис. Стандартный порт SSH–сервера — 22, или его буквенное наименование — ssh.
filter — имя фильтра с регулярными выражениями, по которым идёт поиск «подозрительных совпадений» в журналах сервиса. Фильтру sshd соответствует файл /etc/fail2ban/filter.d/sshd.conf.
logpath — путь к файлу журнала, который программа Fail2ban будет обрабатывать с помощью заданного ранее фильтра. Вся история удачных и неудачных входов в систему, в том числе и по SSH, по умолчанию записывается в log–файл /var/log/auth.log.

Ссылки

fetch

Anonymous (anonymous@undisclosed.example.com) — 2023-12-14T23:11:08+00:00

curl, fetch, wget

fetch

Method	Command
curl	sh -c "$(curl -fsSL https://raw.site/install.sh)"
wget	sh -c "$(wget -O- https://raw.site/install.sh)"
fetch	sh -c "$(fetch -o - https://raw.site/install.sh)"

Fierwalls

Anonymous (anonymous@undisclosed.example.com) — 2014-05-20T08:25:17+00:00

Fierwalls

Shorewall - это инструмент конфигурирования шлюза/фаервола для GNU/Linux. Обычно применяется в качестве скриптовой обертки для iptables , выполненная в виде сервиса.

flock

Anonymous (anonymous@undisclosed.example.com) — 2016-01-27T10:46:09+00:00

system, bash

flock

Простая защита от двойного запуска заданий cron. Эта комманда запустит /root/myscript.sh и создаст lock-файл для данного процесса. Пока он активен, новый вызов данного скрипта не произойдет. После завершения программы, блокировка файла снимается и процесс может быть снова запущен. Параметр -w 600 определяет время ожидания комманды flock на освобождение lock-файла. Для моментальной отмены выполнения процесса используйте параметр -w 0, для ожидания же бесконечно долгого времени параметр нужно опустить.

Принимаются следующие параметры:

-s –shared Устанавливает общую блокировку
-x –exclusive Устанавливает эксклюзивную блокировку
-u –unlock Снимите блокировку
-n –nonblock
-w –timeout Время ожидания блокировки
-o –close Закрывет дескриптор файла перед запуском команд
-c –command Запуск командной строки одного через оболочки

Пример использования:

crontab

* * * * * /usr/bin/flock --lockfile=/tmp/myapp.locked -- /path/to/myapp

Создание файловой системы OS Linux

Anonymous (anonymous@undisclosed.example.com) — 2014-04-04T13:53:05+00:00

Создание файловой системы OS Linux

mkfs /dev/hda1 создать linux-файловую систему на разделе hda1
mke2fs /dev/hda1 создать файловую систему ext2 на разделе hda1
mke2fs -j /dev/hda1 создать журналирующую файловую систему ext3 на разделе hda1
mkfs -t vfat 32 -F /dev/hda1 создать файловую систему FAT32 на разделе hda1
fdformat -n /dev/fd0 форматирование флоппи-диска без проверки
mkswap /dev/hda3 создание swap-пространства на разделе hda3

FSCK - Восстановление после сбоя

Anonymous (anonymous@undisclosed.example.com) — 2015-10-22T00:05:45+00:00

fsck, fs

FSCK - Восстановление после сбоя

После сбоя системы иногда происходит крах файловой системы.

shutdown -Fr now

Команда shutdown выключает систему, -F запускает Fsck при загрузке, -r указывает на то, что вместо полного выключения питания необходима перезагрузка, и now указывает на то, что перезагрузка будет выполнена немедленно.

Gala WM - Менеджер окон

Anonymous (anonymous@undisclosed.example.com) — 2015-04-24T10:41:02+00:00

Gala WM - Менеджер окон

Собственный git-сервер с нуля

Anonymous (anonymous@undisclosed.example.com) — 2015-09-25T09:24:08+00:00

git, server, scm

Собственный git-сервер с нуля

gitosis

Обновленная статья доступна на английском. Возможно, позже я приведу русский вариант в соответствие с ней.

Если вы активно программируете, то наверняка пользуетесь какой-либо системой контроля версий. Возможно, вы уже задумывались о том, чтобы перенести все свои репозитории с локальной машины/github/gitorious; на выделенный сервер или VPS. Причины могут быть разные: не доверяете публичным серверам, нужна серьезная площадка для проектов или просто хочется сделать дополнительное зеркало для надежности.

В любом случае, будем считать, что у вас уже есть свой Linux-сервер, и дело за малым — настроить его. Я сам недавно столкнулся с этой задачей, и в процессе ее решения я делал для себя записи, чтобы не забыть последовательность действий. А когда все настроил — подумал, что кому-то мой опыт может оказаться полезным. Для новичков в nix-мире (вроде меня), чем больше разнообразных HowTo, тем проще подобрать что-то под свою задачу; так что, хотя на хабре и на других сайтах есть схожие мануалы, моя статья все-таки копипастой не является, а значит — пусть будет.

Стенд

Все нижеприведенные манипуляции производились на машине с Ubuntu 10.04. Но, думаю, знающие люди смогут перенести эти инструкции на другие системы. Кое-где в статье будет упоминаться клиентская машина; будем считать, что на ней тоже запущено что-то nix-подобное.

Так как я лично ориентировался на VPS, для сервера была выбрана связка из быстрого веб-сервера nginx; и не менее быстрой веб-морды сgit;. Хотя, наверное, я бы сделал тот же выбор, будь у меня в распоряжении выделенный сервер — я испытываю иррациональную неприязнь к apache и gitweb.

В качестве имени сервера я буду использовать git.example.com. Тем не менее, при желании достаточно легко изменить инструкции так, чтобы держать все не в отдельном домене, а в поддиректории основного.

Фундамент: gitosis

Все репозитории на сервере будут управляться при помощи gitosis. Устанавливаем:

$ sudo aptitude install git-core gitosis

Создаем юзера для работы с репозиториями:

$ sudo adduser --system --shell /bin/sh --gecos 'git version control'
    --group --disabled-password --home /home/git git

Теперь нужно проинициализировать gitosis своим публичным ключом. Если его у вас еще нет, создайте его на клиентской машине при помощи ssh-keygen, затем скопируйте на сервер и скормите gitosis'у:

client$ scp ~/.ssh/id_rsa.pub user@git.example.com:/home/user
  $ sudo -H -u git gitosis-init < /home/user/id_rsa.pub

Если у post-update хука не стоит execution bit, то надо его проставить:

$ sudo chmod +x /home/git/repositories/gitosis-admin.git/hooks/post-update

Репозитории gitosis хранит в поддиректории repositories домашней папки юзера git. Все настройки и ключи хранятся в отдельном репозитории gitosis-admin. Вы можете работать с ним напрямую на сервере или же создать локальную копию на клиентской машине:

client$ git clone git@git.example.com:gitosis-admin.git

На данный момент в репозитории лежит файл настроек gitosis.conf и ключ, заданный при установке, в поддиректории keydir. Имя ключа — это имя пользователя, который этим ключом будет пользоваться. Так что если вам не нравится длинное имя, которое ему назначил gitosis, его можно сменить — но осторожно, если вы работаете с клиентской машины, потому что, если вдруг имя вашего ключа не будет совпадать с именем в конфиге, gitosis не позволит вам сделать push. Так что имя ключа в keydir и значение members в группе [gitosis-admin] файла gitosis.conf надо менять в одном коммите. В качестве примера для настройки gitosis создадим два репозитория: публичный и скрытый. Названия — задел на будущее: для gitosis категории публичности не существует, он лишь оперирует списком допущенных к редактированию людей. Итак, пусть ваш юзер зовется user (и, соответственно, ключ с вашего клиента лежит в keydir/user.pub). Тогда gitosis.conf выглядит следующим образом:

[gitosis]
 
[group gitosis-admin]
writable = gitosis-admin
members = user
 
[group myrepos]
writable = publicrepo privaterepo
members = user

Не забываем закоммитить изменения в файле:

client$ git commit -a -m "Create test repos"
client$ git push

Создаем репозитории на клиентской машине:

client$ cd gitrepos
client$ mkdir publicrepo
client$ cd publicrepo
client$ git init
client$ git remote add mysrv git@git.example.com:publicrepo.git
client$ touch test.txt
client$ echo "first commit" > test.txt
client$ git add test.txt
client$ git commit -a -m "First commit"
client$ git push mysrv master

То же самое проделываем для privaterepo.

Публичный доcтуп к репозиториям: git-daemon

Доступ с авторизацией настроен, теперь нужно настроить и git:// доступ только для чтения. Естественно применить для этого git-daemon, который уже установился вместе с git-core. Теоретически, для его запуска существует отдельный пакет git-daemon-run, но у него есть один, с моей точки зрения, серьезный недостаток: он использует не service, а sv. Такой непорядок я не терплю, поэтому предпочитаю создать init.d скрипт вручную.

Создайте файл /etc/init.d/git-daemon со следующим содержимым:

#! /bin/sh
PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin
NAME=git-daemon
PIDFILE=/var/run/$NAME.pid
DESC="git daemon"
DAEMON=/usr/lib/git-core/git-daemon
DAEMON_OPTS="--base-path=/home/git/repositories/ --syslog --detach --pid-file=$PIDFILE --user=git --group=git"
 
test -x $DAEMON || exit 0
 
[ -r /etc/default/git-daemon ] && . /etc/default/git-daemon
 
. /lib/lsb/init-functions
 
start_git() {
  start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON -- $DAEMON_OPTS || true
}
 
stop_git() {
  start-stop-daemon --stop --quiet --pidfile $PIDFILE --retry 5 --exec $DAEMON || true
  rm -f $PIDFILE
}
 
status_git() {
  status_of_proc -p $PIDFILE "$DAEMON" $NAME && exit 0 || exit $?
}
 
case "$1" in
  start)
    log_begin_msg "Starting $DESC"
    start_git
    log_end_msg 0
    ;;
  stop)
    log_begin_msg "Stopping $DESC"
    stop_git
    log_end_msg 0
    ;;
  status)
    status_git
    ;;
  restart|force-reload)
    log_begin_msg "Restarting $DESC: "
    stop_git
    sleep 1
    start_git
    log_end_msg 0
    ;;
  *)
    echo "Usage: $NAME {start|stop|restart|force-reload|status}" >&2
    exit 1
    ;;
esac
 
exit 0

Не забываем разрешить его выполнение:

$ sudo chmod +x /etc/init.d/git-daemon

и добавить в автозагрузку, например, при помощи sysv-rc-conf (проставьте runlevels с 3 по 5). Теперь осталось только пометить все публичные репозитории при помощи специального файла:

$ sudo -H -u git touch /home/git/repositories/publicrepo.git/git-daemon-export-ok

После запуска сервиса вы сможете клонировать помеченные репозитории через git протокол.

Веб-интерфейс: nginx и cgit

Подготовительные меры

Первым делом, конечно, надо установить собственно веб-сервер:

$ sudo aptitude install nginx

Небольшая проблема с cgit состоит в том, что он поддерживает только CGI, а nginx поддерживает только FastCGI. Иногда для обхода этого ограничения используется второй веб-сервер специально для cgit, а в nginx прописывается перенаправление запросов. Мне же больше нравится подход с FCGI-оберткой для CGI: spawn-fcgi и fcgiwrap. Последняя утилита, к сожалению, отсутствует в репозитории, поэтому ее придется компилировать на месте. Желающие могут сделать из нее пакет сами, я же просто приведу простейший вариант установки. Итак:

$ sudo aptitude spawn-fcgi libfcgi-dev
$ git clone git://github.com/gnosek/fcgiwrap.git
$ cd fcgiwrap
$ autoreconf -i
$ ./configure
$ make
$ sudo make install

Создаем скрипт /etc/init.d/spawn-fcgi для сервиса spawn-fcgi, аналогично тому, как мы делали это для git-daemon:

#! /bin/sh
PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin
NAME=spawn-fcgi
PIDFILE=/var/run/$NAME.pid
DESC="spawn-fcgi daemon"
DAEMON=/usr/bin/spawn-fcgi
 
DAEMON_OPTS="-f /usr/local/sbin/fcgiwrap -s /var/run/spawn-fcgi -u www-data -g www-data -P $PIDFILE"
 
test -x $DAEMON || exit 0
 
set -e
 
. /lib/lsb/init-functions
 
start_spawn_fcgi() {
  start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON -- $DAEMON_OPTS || true
}
 
stop_spawn_fcgi() {
  start-stop-daemon --stop --quiet --pidfile $PIDFILE --retry 5 || true
  rm -f $PIDFILE
}
 
status_spawn_fcgi() {
    status_of_proc -p $PIDFILE "$DAEMON" $NAME && exit 0 || exit $?
}
 
 
case "$1" in
  start)
    log_begin_msg "Starting $DESC: "
    start_spawn_fcgi
    log_end_msg 0
 
    ;;
  stop)
    log_begin_msg "Stopping $DESC: "
    stop_spawn_fcgi       
    log_end_msg 0
    ;;
  status)
    status_spawn_fcgi
    ;;
  restart|force-reload)
 
    log_begin_msg "Restarting $DESC: "
    stop_spawn_fcgi
    sleep 1
    start_spawn_fcgi
    log_end_msg 0
    ;;
  *)
    echo "Usage: $NAME {start|stop|restart|force-reload|status}" >&2
    exit 1
    ;;
esac
 
exit 0

Так же, как и в случае git-daemon, скрипту надо проставить execution bit и добавить его в автозагрузку для runlevel-ов с 3 по 5.

Установка cgit

Cgit тоже придется устанавливать из исходников. Если вы клонируете его репозиторий, не забудьте выбрать нужную версию перед компиляцией (если вы не знаете, какая версия вам нужна, то выбирайте последнюю стабильную). Кроме того, стоит также выбрать версию исходников git соответствующую той, которая у вас установлена.

$ git clone git://hjemli.net/pub/git/cgit
$ cd cgit
$ git submodule init
$ git submodule update
$ git checkout v0.8.3.3
$ cd git
$ git checkout v1.7.0.4
$ cd ..
$ sudo aptitude install libcurl4-openssl-dev build-essential
$ make

При компиляции будет создан исполняемый файл cgit. Его, а также файл стилей и логотип cgit надо скопировать в предназначенную для них директорию.

$ sudo mkdir /var/www/cgit
$ sudo mkdir /var/www/cgit/static
$ sudo mkdir /var/www/cgit/cgi-bin
$ sudo cp cgit /var/www/cgit/cgi-bin/
$ sudo cp cgit.png /var/www/cgit/static/
$ sudo cp cgit.css /var/www/cgit/static/
$ sudo chown -R www-data:www-data /var/www/cgit

Cgit'у нужен конфиг, шаблон для которого с комментариями ко всем опциям лежит в директории компиляции (cgitrc.5.txt). Примерный конфиг выглядит следующим образом:

/etc/cgitrc:

virtual-root=/
 
# enable caching of up to 1000 output entries
cache-size=1000
 
# page title for the root page (repo listing)
root-title=Insert title here
 
# description for the root page
root-desc=Insert description here
 
# link to css file
css=/cgit.css
 
# link to logo file
logo=/cgit.png
 
# Enable statistics per week, month and quarter
max-stats=quarter
 
# Specify some default clone prefixes
clone-prefix=git://git.example.com ssh://git@git.example.com http://git.example.com/http
 
# Show extra links for each repository on the index page
enable-index-links=1
 
# Show number of affected files per commit on the log pages
enable-log-filecount=1
 
# Show number of added/removed lines per commit on the log pages
enable-log-linecount=1
 
# Caching disabled. We will use nginx's caching mechanisms
 
# time-to-live settings: specify how long (in minutes) different pages should
# be cached. specify 0 for instant expiration and -1 for immortal pages
 
# ttl for root page (repo listing)
cache-root-ttl=0
 
# ttl for repo summary page
cache-repo-ttl=0
 
# ttl for other dynamic pages
cache-dynamic-ttl=0
 
# ttl for static pages (addressed by SHA-1)
cache-static-ttl=0
 
# allow download of zip, tar.gz and tar.bz2 files
snapshots=tar.gz tar.bz2 zip
 
# repository settings
include=/etc/cgitrepos

/etc/cgitrepos:

repo.url=publicrepo
repo.desc=Public repository test
repo.path=/home/git/repositories/publicrepo.git
repo.owner=user

Cобираем все вместе

Теперь осталось только настроить nginx. Сначала укажем параметры кеширования для FastCGI (не забудьте, мы запретили его в настройках cgit). Вставьте следующую строку в секцию http файла /etc/nginx/nginx.conf:

http{
fastcgi_cache_path /var/cache/nginx levels=1:2 keys_zone=code:10m inactive=1h max_size=100m;
...
}

Для удобства информацию о поддомене с cgit мы будем хранить в отдельном конфиге /etc/nginx/sites-available/cgit:

server {
    listen 80;
    server_name git.example.com;
 
    # Serve static files
    location ~* ^.+\.(css|png|ico)$ {
        root /var/www/cgit/static;
        expires 30d;
    }
 
    location / {
        rewrite ^/([^?/]+/[^?]*)?(?:\?(.*))?$ /cgit?url=$1&$2 last;
 
        fastcgi_cache  code;
        fastcgi_cache_valid  200 5m;
        fastcgi_cache_use_stale  off;
 
        fastcgi_pass  unix:/var/run/spawn-fcgi;
        fastcgi_read_timeout  5m;
        fastcgi_index  /;
 
        fastcgi_param    DOCUMENT_ROOT    /var/www/cgit;
        fastcgi_param    SCRIPT_FILENAME  /var/www/cgit/cgi-bin/cgit;
        fastcgi_param    QUERY_STRING  $query_string;
        fastcgi_param    REQUEST_METHOD  $request_method;
        fastcgi_param    CONTENT_TYPE  $content_type;
        fastcgi_param    CONTENT_LENGTH  $content_length;
        fastcgi_param    GATEWAY_INTERFACE  CGI/1.1;
 
        fastcgi_param    SERVER_SOFTWARE  nginx;       
        fastcgi_param    SCRIPT_NAME  $fastcgi_script_name;
        fastcgi_param    REQUEST_URI  $request_uri;
        fastcgi_param    DOCUMENT_URI  $document_uri;
        fastcgi_param    DOCUMENT_ROOT  $document_root;
        fastcgi_param    SERVER_PROTOCOL  $server_protocol;
        fastcgi_param    REMOTE_ADDR  $remote_addr;
        fastcgi_param    REMOTE_PORT  $remote_port;
        fastcgi_param    SERVER_ADDR  $server_addr;
        fastcgi_param    SERVER_PORT  $server_port;
        fastcgi_param    SERVER_NAME  $server_name;
    }
 
    access_log /var/log/nginx/git.example.com/access.log combined;
    error_log /var/log/nginx/git.example.com/error.log warn;
}

Не забудьте создать директорию для логов /var/log/nginx/git.example.com и ссылку на конфиг в /etc/nginx/sites-enabled:

$ ln -s /etc/nginx/sites-available/cgit /etc/nginx/sites-enabled/cgit

Теперь после рестарта nginx при коннекте на http://git.example.com вы должны увидеть стартовую страницу cgit.

Веб-интерфейс в поддиректории

Как я говорил в начале статьи, переход от поддомена к поддиректории не очень сложен. Но, тем не менее, когда мне это вдруг понадобилось, я некоторое время буксовал на конфиге nginx'а. Так что опишу это тоже.

Предположим, мы хотим разместить веб-интерфейс в example.com/git (заметьте, что git- и ssh- доступ по-прежнему указывает на корень сервера; в принципе, можно перенаправить и его, но это создаст избыточность в пути и нужно только если вы используете несколько разных версий git одновременно).

Итак, вносим в конфиги следующие изменения:

/etc/cgitrc:

virtual-root=/git/

...

# link to css file
css=/git/cgit.css

# link to logo file
logo=/git/cgit.png

...

# Specify some default clone prefixes
clone-prefix=git://example.com ssh://git@example.com http://example.com/git/http

…

/etc/nginx/sites-available/cgit:

server {
    listen 80;
    server_name example.com;
 
    location ^~ /git/http/ {
        rewrite ^/git/http/(.*)$ /$1 break;
        ...
    }
 
    # Serve static files
    location ~* ^/git/.+\.(css|png|ico)$ {
        rewrite ^/git/(.*)$ /$1 break;
        ...
    }
 
    location /git {
        rewrite ^/git/([^?/]+/[^?]*)?(?:\?(.*))?$ /cgit?url=$1&$2 break;
        ...
    }
 
    access_log /var/log/nginx/example.com/git/access.log combined;
    error_log /var/log/nginx/example.com/git/error.log warn;
}

Заметьте, что: 1. В конфиг nginx'a я добавил исправленный location для http-клонирования из пункта 5.1. 2. В последнем location'е last сменился на break (так как иначе путь /cgit не будет совмещен ни с одним из location'ов). И не забудьте проверить, что пути к логам существуют и имеют нужный доступ.

Бонус-трек

HTTP-клонирование

Чтобы позволить бедным корпоративным пользователям за файрволами клонировать ваш замечательный код по http, надо рассказать nginx-у, где лежат репозитории. Здесь есть два варианта — либо расшарить сразу все, либо только выбранные репозитории. Я расскажу про второй вариант, но отличие первого только в том, что вам надо будет создать одну ссылку вместо нескольких (и настроить rewrite rule, если вам не нравятся постфиксы .git).

Итак, нам надо дать read-only доступ к репозиториям для пользователя www-data. Для этого мы добавим его в группу git и создадим ссылки на публичные репозитории в /var/www:

$ sudo usermod -G git www-data
$ sudo mkdir /var/www/git-http
$ sudo ln -s /home/git/repositories/publicrepo.git /var/www/git-http/publicrepo
$ sudo chown -R www-data:www-data /var/www/git-http

Теперь скажем nginx-у, что он должен перенаправлять пользователя к репозиториям в ответ на запрос к папке http. Добавляем следующие строки в /etc/nginx/sites-available/cgit внутрь блока server (все равно куда, порядок следования location'ов для nginx'a роли не играет):

location ^~ /http/ {
    rewrite ^/http/(.*)$ /$1 break;
    root /var/www/git-http;
    expires 30d;
}

Чтобы git при клонировании забирал всегда свежую версию репозитория, необходимо добавить хук для каждого публичного репозитория: /home/git/repositories/publicrepo.git/hooks/post-update:

#!/bin/sh
exec git update-server-info

Проверьте, что у хука стоит execution bit и его владельцем является юзер git. Перед первым клонированием хук должен выполниться хотя бы один раз; для этого вы можете сделать push в репозиторий или просто выполнить "git update-server-info" в директории репозитория на сервере.

HTTPS-доступ

Что же делать если нашим гипотетическим пользователям за файрволом недостаточно read-only доступа, а нужна еще и возможность push'а? Те, кто пользуется github'ом, наверняка знают про ssh.github.com, к которому можно обращаться по 443 порту. Признаюсь честно, я не знаю, как именно они это сделали, но мое решение тоже работает.

Итак, нам понадобится маленькая утилитка sslh;, которая будет висеть на 443 порту и распознавать ssh-запросы. Идея состоит в том, что при HTTPS запросе первым должен послать данные клиент, а при SSH запросе — сервер. Поэтому утилитка ждет данных в течение таймаута, и если получает их — отдает соединение веб-серверу, а если нет — ssh-серверу. Установить ее очень просто:

$ sudo aptitude install sslh

Разрешаем ей выполняться, добавив "RUN=yes" в /etc/default/sslh и запускаем сервис (если он уже не запущен):

$ sudo service start sslh

Теперь на клиенте нужно добавить в настройки ~/.ssh/config наш сервер:

Host https.example
User git
Port 443
Hostname git.example.com
PreferredAuthentications publickey
# if you use proxy, uncomment this and set proxy address and port:
# ProxyCommand corkscrew   %h %p

Чтобы использовать туннель, нужно сменить адрес remote'а в настройках существующей локальной копии репозитория на https.example, или склонировать новый репозиторий с использованием нового адреса:

$ git clone git@https.example:publicrepo

Обратите внимание на 2-х секундную задержку при коннекте — это sslh думает, куда направить ваш запрос.

Зеркалирование на github

Свой git-сервер — это, конечно, хорошо, но что делать, если вам нравится github (будь то социальные возможности, интерфейс или статистика)? Или вам нужен HTTPS-доступ, но не хочется покупать платный аккаунт? Не проблема — настроим автоматическое зеркалирование репозиториев с нашего сервера. Для начала, создайте публичный SSH-ключ на сервере и добавьте его к своему аккаунту в github. Затем создайте директорию с нужным репозиторием на сервере: либо склонировав его с github под пользователем git:

$ cd /home/git/repositories
$ git clone git@github.com:Username/reponame --bare

либо добавив нужный remote в уже существующий репозиторий:

$ cd /home/git/repositories/reponame
$ git remote add github git@github.com:Username/reponame

Также возможны и другие варианты, в зависимости от того, создан ли уже репозиторий на github, существует ли он уже на сервере или на клиенте, но я не буду все их рассматривать, так как приведенной информации достаточно, чтобы все настроить. Не забудьте добавить репозиторий в gitosis.conf (и в /etc/cgitrepos, если необходимо). Чтобы репозиторий зеркалировал себя на github после каждого коммита, добавьте в уже знакомый вам post-update хук строчку "git push –mirror github". Будьте внимательны, по дефолту в этом хуке стоит "exec git update-server-info", где команда exec подменяет существующий процесс — то есть после нее никакие команды исполняться не будут. Если вам хочется оставить и ее, и зеркалирование, то хук будет выглядеть так:

#!/bin/sh
git update-server-info
git push --mirror github

Все, теперь после push'а клиент увидит, как репозиторий копирует себя на github.

GPG and git on macOS

Anonymous (anonymous@undisclosed.example.com) — 2018-06-08T11:48:16+00:00

GPG and git on macOS

Install https://gpgtools.org – I'd suggest to do a customized install and deselect GPGMail.
Create or import a key – see below for https://keybase.io
Run gpg –list-secret-keys and look for sec, use the key ID for the next step
Configure git to use GPG – replace the key with the one from gpg –list-secret-keys

$ git config --global gpg.program /usr/local/MacGPG2/bin/gpg2
$ git config --global user.signingkey A6B167E1 
$ git config --global commit.gpgsign true

Документация / Статьи

https://gist.github.com/danieleggert/b029d44d4a54b328c0bac65d46ba4c65

gzip

Anonymous (anonymous@undisclosed.example.com) — 2017-01-05T17:32:16+00:00

shell, utils, gzip, bash

gzip

hddtemp

Anonymous (anonymous@undisclosed.example.com) — 2025-04-21T23:10:25+00:00

hddtemp

Helm

Anonymous (anonymous@undisclosed.example.com) — 2024-08-23T09:55:15+00:00

Helm

$ curl -fsSL -o get_helm.sh https://raw.githubusercontent.com/helm/helm/main/scripts/get-helm-3
$ chmod 700 get_helm.sh
$ ./get_helm.sh

Htop

Anonymous (anonymous@undisclosed.example.com) — 2016-03-18T19:13:37+00:00

Htop

https://github.com/hishamhm/htop

ifconfig

Anonymous (anonymous@undisclosed.example.com) — 2017-11-28T14:49:04+00:00

ifconfig

Статический IP

Console

ifconfig eth0 down
ifconfig eth0 inet [IP]
ifconfig eth0 netmask [MASK]
route add [GW] gw [IP]
ifconfig eth0 up

Scripts

nano /etc/network/interfaces

DHCP

Scripts

nano /etc/network/interfaces

# This file describes the network interfaces available on your system
# and how to activate them. For more information, see interfaces(5).

# The loopback network interface
auto lo
iface lo inet loopback

# The primary network interface
allow-hotplug eth0
iface eth0 inet dhcp

Eror: bash: ifconfig: command not found

The ifconfig command has been deprecated and thus missing by default on Debian Linux, starting from Debian stretch.

# ifconfig
-bash: ifconfig: command not found

The new and recommended alternative for examining a network configuration on Debian Linux is ip command. For example to use ip command to display a network configuration run the following:

# ip address

The above ip command can be abbreviated to:

# ip a

If you still prefer to use ifconfig as part of your daily sys admin routine, you can easily install it as part of the net-tools package.

iotop

Anonymous (anonymous@undisclosed.example.com) — 2015-09-16T00:00:38+00:00

shell, utils

iotop

iotop -b -P -o -d 1

Total DISK READ :      19.57 K/s | Total DISK WRITE :       8.44 M/s
Actual DISK READ:      19.57 K/s | Actual DISK WRITE:      14.10 M/s
  PID  PRIO  USER     DISK READ  DISK WRITE  SWAPIN      IO    COMMAND
  230 be/4 root        0.00 B/s   19.57 K/s  0.00 % 54.53 % [kjournald]
16850 be/4 mysql      19.57 K/s    8.42 M/s  0.00 %  2.84 % mysqld --basedir=/usr --datadir=/var/lib/mysql --plugin-dir=/usr/lib/mysql/plugin --user=mysql --pid-file=/var/run/mysqld/mysqld.pid --socket=/var/run/mysqld/mysqld.sock --port=3306

ip

Anonymous (anonymous@undisclosed.example.com) — 2017-11-28T14:50:39+00:00

networks, networking, network

ip

Показать список доступных IP адресов

$ ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 08:00:27:8d:c0:4d brd ff:ff:ff:ff:ff:ff
    inet 10.0.2.15/24 brd 10.0.2.255 scope global eth0
       valid_lft forever preferred_lft forever
    inet6 fe80::a00:27ff:fe8d:c04d/64 scope link
       valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 08:00:27:6c:87:01 brd ff:ff:ff:ff:ff:ff
    inet 192.168.83.137/24 brd 192.168.83.255 scope global eth1
       valid_lft forever preferred_lft forever
    inet6 fe80::a00:27ff:fe6c:8701/64 scope link
       valid_lft forever preferred_lft forever

$ ip a|grep inet
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host
    inet 10.0.2.15/24 brd 10.0.2.255 scope global eth0
    inet6 fe80::a00:27ff:fe8d:c04d/64 scope link
    inet 192.168.83.137/24 brd 192.168.83.255 scope global eth1
    inet6 fe80::a00:27ff:fe6c:8701/64 scope link

ipset - Блокируем много IP адресов с помощью ipset и iptables

Anonymous (anonymous@undisclosed.example.com) — 2014-08-14T12:20:16+00:00

ipset - Блокируем много IP адресов с помощью ipset и iptables

Скрипты

https://github.com/trick77/ipset-blacklist/blob/master/update-blacklist.sh

Статьи / Ссылки

http://linuxru.org/linux/324

Iptables

Anonymous (anonymous@undisclosed.example.com) — 2014-03-28T07:25:53+00:00

Iptables

iptables -n -L -v -t nat -
iptables -n -L -v -t filter -

Port mapping

echo 1 > /proc/sys/net/ipv4/ip_forward
iptables -t nat -A PREROUTING -i ethX -p tcp --dport 21 -j DNAT --to-destination WIN_IP:3389
iptables -t nat -A POSTROUTING -o ethX -j MASQUERADE

IPTraf - IP Network Monitoring Software

Anonymous (anonymous@undisclosed.example.com) — 2016-05-21T13:51:23+00:00

shell, networks, networking, network, utils

IPTraf - IP Network Monitoring Software

Java

Anonymous (anonymous@undisclosed.example.com) — 2018-10-24T19:12:06+00:00

Java

C:\java -X

    -Xmixed           mixed mode execution (default)
    -Xint             interpreted mode execution only
    -Xbootclasspath:<directories and zip/jar files separated by ;>
                      set search path for bootstrap classes and resources
    -Xbootclasspath/a:<directories and zip/jar files separated by ;>
                      append to end of bootstrap class path
    -Xbootclasspath/p:<directories and zip/jar files separated by ;>
                      prepend in front of bootstrap class path
    -Xnoclassgc       disable class garbage collection
    -Xincgc           enable incremental garbage collection
    -Xloggc:<file>    log GC status to a file with time stamps
    -Xbatch           disable background compilation
    -Xms<size>        set initial Java heap size
    -Xmx<size>        set maximum Java heap size
    -Xss<size>        set java thread stack size
    -Xprof            output cpu profiling data
    -Xfuture          enable strictest checks, anticipating future default
    -Xrs              reduce use of OS signals by Java/VM (see documentation)
    -Xcheck:jni       perform additional checks for JNI functions
    -Xshare:off       do not attempt to use shared class data
    -Xshare:auto      use shared class data if possible (default)
    -Xshare:on        require using shared class data, otherwise fail.

Установка 8 версии

$ brew tap caskroom/versions
$ brew cask install java8

Запуск / Execute

java -jar jar-file

Journalctl

Anonymous (anonymous@undisclosed.example.com) — 2023-12-15T00:24:39+00:00

system, journal, journalctl

Journalctl

Централизованное ведение журнала

Система systemd и менеджер служб внесли значительные изменения в способ сбора системных журналов. Журналы раньше располагались в разных местах файловой системы в соответствии с сервисом или демоном, который их создавал. Но у них всех было одно общее. Это были простые текстовые файлы.

С помощью systemd все файлы журналов системны, загрузки и ядра собираются и управляются центральным специализированным решением для ведения журнала. Формат, в котором они хранятся, является двоичным. Как мы убедимся далее, это облегчает возможность извлечения данных в разные форматы, такие как JSON.

Это также может упростить перекрёстную ссылку на связанную информацию, которая ранее была бы записана в отдельных файлах журнала. Поскольку данные теперь хранятся в одном журнале, данные из нескольких источников, представляющих интерес, могут быть выбраны и отображены в одном переплетённом списке записей.

journalctl — это инструмент, используемый для работы с журналом.

journalctl без излишеств

Вы можете вызвать journalctl без параметров командной строки:

journalctl Команда journalctl отобразит весь журнал, с самыми старыми записями вверху списка. Список отображается с использованием команды less, что позволяет просматривать страницы и осуществлять поиск с использованием обычных функций навигации команды less. Вы также можете использовать клавиши «Стрелка влево» и «Стрелка вправо» для боковой прокрутки и чтения широких записей журнала.

Нажатие клавишу End для перехода к нижней части списка, чтобы увидеть самые новые записи в журнале.

Для выхода нажмите клавишу q или Ctrl+c.

journalctl можно запустить без использования sudo, но если использовать sudo, то вы гарантированно увидите все подробности в журнале.

sudo journalctl

Если вы хотите, чтобы все данные были просто выведены в окно терминала без использования программы less, то запустите journalctl с опцией –no-pager:

sudo journalctl --no-pager

Будет выведено много информации, вы окажитесь в конце журнала и вам будет доступно приглашении командной строки.

Чтобы ограничить количество строк, которые возвращает journalctl, используйте опцию -n ЧИСЛО. Допустим, нужно вывести только десять строк:

sudo journalctl -n 10

Постоянное обновление выводимой информации

Вы можете сделать так, что journalctl будет постоянно выводить новые записи журнала в реальном времени по мере их появления. Для этого используйте опцию -f.

sudo journalctl -f

Обновление происходит практически в реальном времени, в зависимости от количества событий, выводимых записей может быть много.

Изменение формата отображения

Поскольку журнал представляет собой двоичный файл, данные в нем должны быть переведены или разобраны в текст, прежде чем он может быть отображён для вас. При использовании разных парсеров разные форматы вывода могут быть созданы из одних и тех же двоичных исходных данных. Journalctl может использовать несколько разных форматов.

По умолчанию выводится короткий формат, который очень похож на классический формат системного журнала. Чтобы явно запросить короткий формат, используйте опцию -o с модификатором short:

sudo journalctl -n 10 -o short

Поля слево-направо:

Время создания сообщения по местному времени. Имя хоста. Название процесса. Это процесс, который сгенерировал сообщение. Сообщение для записи. Чтобы получить полную дату и время, используйте модификатор short-full:

sudo journalctl -n 10 -o short-full

Обратите на формат даты и времени в этих выходных данных — чуть позже мы будем использовать эти форматы при выводе сообщений журнала по периодам.

Чтобы увидеть все метаданные, которые сопровождают каждое сообщение журнала, используйте модификатор для увеличения подробности.

sudo journalctl -n 10 -o verbose

В выводимой информации много различных полей, но обычно в одном сообщении они представлены не все.

Одно из полей, которое следует обсудить особо, это поле Priority. Значение поля указывает на важность сообщения. Могут быть следующие варианты:

0: Emergency (чрезвычайная ситуация). Систему невозможно использовать.
1: Alert (тревога). Было помечено условие, которое должно быть немедленно исправлено.
2: Critical (критическая ситуация). Это охватывает сбои и существенные нарушения работы в главных приложениях.
3: Error (ошибка). Было сообщено об ошибке, но она не рассматривается как тяжёлая.
4: Warning (предупреждение). Обращает ваше внимание на условие, которое, если его игнорировать, может стать ошибкой.
5: Notice (уведомление). Используется для сообщения о необычных событиях, но не об ошибках.
6: Information (информация). Регулярные оперативные сообщения. Это не требует действий.
7: Debug (отладочная информация). Сообщения помещаются в приложения, чтобы облегчить их отладку.

Если вы хотите, чтобы вывод был представлен как правильно сформированные объекты JavaScript Object Notation (JSON), используйте модификатор json:

sudo journalctl -n 10 -o json

Каждое сообщение должным образом упаковывается как правильно сформированный объект JSON и отображает одно сообщение на строку вывода.

Чтобы вывод JSON был напечатан в удобном для восприятия человеком виде, используйте модификатор json-pretty.

sudo journalctl -n 10 -o json-pretty

Каждый объект JSON разбит на несколько строк, каждая пара имя-значение находится на новой строке.

Чтобы видеть только сообщения записей журнала без меток времени или других метаданных, используйте модификатор cat:

sudo journalctl -n 10 -o cat

Этот формат отображения может затруднить определение того, какой процесс вызвал событие журнала, хотя некоторые сообщения содержат подсказку.

Выбор сообщений журнала по периоду времени

Чтобы ограничить вывод из journalctl интересующим вас периодом времени, используйте опции -S (с) и -U (до).

Чтобы просмотреть записи журнала с определённого времени и даты, используйте эту команду:

sudo journalctl -S "2020-02-13 07:00:00"

Вывод содержит только те сообщения, которые поступили после указанных в команде даты и времени.

Чтобы установить период времени, из которого вы хотите получить данные, используйте вместе опции -S (с) и -U (до). Эта команда просматривает сообщения журнала за 15 минут.

sudo journalctl -S "2020-02-13 07:00:00" -U "2020-02-13 07:15:00"

Это отличная комбинация, если вы знаете, что в вашей системе произошло что-то странное, и примерно когда это произошло.

Использование относительных периодов времени

Вы можете использовать относительную адресацию при выборе периода времени. Это означает, что вы можете дать указание вроде таких, как «показать мне все события за один день до настоящего момента». Это именно то, что означает следующая команда. В ней «d» означает «день», а «-1» означает один день в прошлом.

sudo journalctl -S -1d

Будут выведены сообщения журнала с 00:00:00 вчера до «сейчас».

Если вы хотите исследовать что-то, что произошло в недавнем прошлом, вы можете указать относительный период времени, измеряемый в часах. Здесь мы просматриваем сообщения журнала за последний час:

sudo journalctl -S -1h

Отобразятся сообщения за последний час. Вы также можете использовать «m» для установки относительных периодов времени, измеряемых в минутах, и «w» для недель.

journalctl понимает today (сегодня), yesterday (вчера) и tomorrow (завтра). Эти модификаторы предоставляют удобный способ задания общих периодов времени. Чтобы увидеть все события, которые произошли вчера, используйте эту команду:

sudo journalctl -S yesterday

Все события журнала журнала, которые произошли вчера, до полуночи 00:00:00, извлекаются и отображаются для вас.

Чтобы увидеть все сообщения журнала, полученные сегодня, используйте эту команду:

sudo journalctl -S today

Отобразится всё с 00:00:00 до момента ввода команды.

Вы можете смешивать различные модификаторы периода времени. Чтобы увидеть все от двух дней назад до сегодняшнего дня, используйте эту команду:

sudo journalctl -S -2d -U today

Эта команда покажет все сообщения системного журнала с позавчера до сегодняшнего дня (не включая сегодня).

Выбор сообщений журнала по полям данных

Вы можете искать сообщения журнала, которые соответствуют широкому диапазону полей, присутствующих в записях логов. Эти фильтры пытаются найти совпадения в метаданных, прикреплённых к каждому сообщению. Рекомендуется обратиться к списку полей и выбрать те, которые будут наиболее полезными для вас:

man systemd.journal-fields

Имейте в виду, заполняет ли приложение каждое поле или нет, полностью зависит от авторов приложения. Вы не можете быть уверенным, что каждое поле будет заполнено.

Все модификаторы полей журнала используются одинаково. Мы будем использовать несколько в наших примерах ниже. Чтобы найти сообщения журнала из определённого приложения, используйте модификатор _COMM (команда). Если вы также используете опцию -f (рассмотрена ранее, означает обновлять данные в реальном времени), journalctl будет отслеживать новые сообщения из этого приложения по мере их поступления.

sudo journalctl -f _COMM=NetworkManager

Вы можете искать записи журнала, используя идентификатор процесса, который сгенерировал сообщение журнала. Используйте команду ps, чтобы найти идентификатор процесса для демона или приложения, которое вы собираетесь искать.

sudo journalctl _PID=409200

Обратите внимание, что после остановки и повторного запуска процесса, а также после перезагрузки, идентификаторы меняются!

Вы также можете искать по идентификатору пользователя. Это идентификатор пользователя, который запустил приложение или команду или владеет процессом.

sudo journalctl _UID=1000

В результате будут выведены все сообщения журнала, отфильтрованные по ID пользователя. Показаны будут только записи, связанные с пользователем 1000:

Другой способ поиска сообщений журнала, относящихся к конкретному приложению, - указать путь к исполняемому файлу.

sudo journalctl /usr/bin/crond

Будут выведены все сообщения службы crond, которая отвечает за запуск программ в определённые интервалы времени.

Чтобы упростить поиск, мы можем попросить journalctl перечислить все значения, которые он содержит, для любого из полей журнала.

Чтобы увидеть идентификаторы пользователей, для которых journalctl записал сообщения журнала, используйте опцию -F (поля) и передайте идентификатор поля _UID.

journalctl -F _UID

Давайте сделаем это снова и посмотрим на идентификаторы групп (_GID):

journalctl -F _GID

Вы можете сделать это с любым из идентификаторов полей журнала.

man systemd.journal-fields

Вывод сообщений ядра

Существует встроенный способ быстрой изоляции сообщений ядра. Вам не нужно искать и изолировать их самостоятельно. Опция -k удаляет все остальные сообщения и даёт вам мгновенный просмотр записей журнала ядра.

sudo journalctl -k

Подсветка отражает важность сообщения в соответствии со значениями в поле «Priority».

Просмотр загрузочных сообщений

Если у вас возникла проблема, связанная с загрузкой, которую вы хотите расследовать, journalctl вам поможет. Возможно, вы добавили новое оборудование, и оно не отвечает, или ранее работающий аппаратный компонент больше не работает после вашего последнего обновления системы.

Чтобы просмотреть записи журнала, относящиеся к вашей последней загрузке, используйте опцию -b:

journalctl -b

Показаны записи из логов последней загрузки:

Когда мы говорим «последняя загрузка», мы имеем в виду процесс загрузки, который оживил ваш компьютер для текущего сеанса входа в систему. Чтобы увидеть предыдущие загрузки, вы можете использовать число, чтобы указать journalctl, какая загрузка вам интересна. Чтобы увидеть третью предыдущую загрузку, используйте эту команду:

journalctl -b 3

Как правило, если у вас возникла проблема и вам пришлось перезагрузить компьютер, вам интересна предыдущая последовательность загрузки. Так что это популярная форма команды.

Легко запутаться в последовательности загрузок. Чтобы помочь, мы можем попросить journalctl перечислить загрузки, которые он записал в своём журнале, для этого используйте опцию –list-boots.

journalctl --list-boots

Вы можете указать загрузку, для которой вы хотите видеть записи, для этого выберите интересующие вас метки времени и даты, а затем используйте номер в левом столбце для получения записей логов для этой загрузки. Вы также можете скопировать 32-битный идентификатор загрузки и использовать его с journalctl.

sudo journalctl -b bd7cf5063b15440eb5920851af7a5879

Будут извлечены и показаны только сообщения для этой загрузки.

Поиск проблем служб (journalctl -xe)

В случае, если запуск службы завершился ошибкой, то вам будет рекомендовано запустить команду вида:

systemctl status ИМЯ-СЛУЖБЫ

или команду:

journalctl -xe

Первая команда показывает статус указанной службы и, среди прочего, может содержать указание на ошибку — неверный синтаксис в конфигурационном файле, последние диагностические сообщение и прочее.

Что касается команды journalctl с опциями -xe, то рассмотрим эти опции более подробно — фактически, это две опции -x и -e.

Элемент ненумерованного списка-x, –catalog дополняет строки журнала пояснительными текстами из каталога сообщений. Это добавит пояснительные тексты справки к сообщениям журнала в выходных данных, где это возможно. Эти короткие справочные тексты объяснят контекст ошибки или события журнала, возможные решения, а также указатели на форумы поддержки, документацию для разработчиков и любые другие соответствующие руководства. Обратите внимание, что справочные тексты доступны не для всех сообщений, а только для выбранных.
-e, –pager-end говорит немедленно перейте к концу журнала внутри подразумеваемого инструмента пейджера. Это подразумевает -n1000, чтобы гарантировать, что пейджер не будет буферизовать журналы неограниченного размера. Это может быть заменено явным параметром -n с другим числовым значением, в то время как -nall отключит это ограничение. Обратите внимание, что эта опция поддерживается только для пейджера less(1).

То есть команда с этими опциями необязательно покажет то, что вы ожидаете, она может вывести ошибки и сообщения других служб. Поэтому если вы хотите использовать её для более точного получения информации, можете указать путь до интересующей вас программы, например:

journalctl -xe /usr/bin/openvpn

Вы также можете использовать любые другие уже рассмотренные опции, например, номер загрузки:

journalctl -b 2 -xe /usr/bin/openvpn

Очистка места на диске: управление пространством на жёстком диске для системного журнала

Конечно, журнал и все его сообщения журнала хранятся на вашем жёстком диске. Это означает, что они будут занимать место на жёстком диске. Чтобы узнать, сколько места занял журнал, используйте параметр –disk-using.

journalctl --disk-usage

С сегодняшними жёсткими дисками 2.3 ГБ это не так уж много места, но в демонстрационных целях мы все равно очистим место на диске. Есть два способа сделать это. Первый — установить ограничение размера, до которого вы хотите уменьшить журнал. Конечно, он снова вырастет, но процедуру можно будет повторить снова.

Мы будем использовать замечательную опцию –vacuum-size и передадим размер, до которого мы хотели бы уменьшить занимаемое место. Мы укажем 100 МБ. Это означает, мы просим journalctl очистить все данные логов, которые занимают больше 100 МБ в системном журнале.

journalctl --vacuum-size=100M

Другой способ сократить размер журнала — использовать опцию –vacuum-time. Эта опция сообщает journalctl об отмене сообщений, которые старше, чем период, указанный в командной строке. Вы можете использовать дни, недели, месяцы и годы в качестве периодов времени.

Давайте отсеем все сообщения старше одной недели:

journalctl --vacuum-time=1weeks

Данные против информации

Данные бесполезны до тех пор, пока вы не можете получить и использовать их. В случае использования, они становятся полезной информацией. Команда journalctl является очень гибким и сложным инструментом, который позволяет вам получить интересующую информацию различными способами.

Вы можете использовать практически любой фрагмент информации, которая вам нужна, в нужных вам сообщениях журнала.

Linux kernel - Загрузка и выгрузка драйверов

Anonymous (anonymous@undisclosed.example.com) — 2017-11-02T18:58:40+00:00

Linux kernel - Загрузка и выгрузка драйверов

ls /lib/modules/$(uname -r)
build   modules.alias      modules.builtin      modules.dep      modules.devname  modules.softdep  modules.symbols.bin
kernel  modules.alias.bin  modules.builtin.bin  modules.dep.bin  modules.order    modules.symbols  source

Драйверы

$  ls /lib/modules/$(uname -r)/kernel/drivers/
acpi   bluetooth  dax      firewire  hv         infiniband  media     mmc     nvme     platform  scsi     thermal      uwb     w1
ata    cdrom      dca      firmware  hwmon      input       memstick  mtd     nvmem    power     spi      thunderbolt  vfio    watchdog
atm    char       devfreq  gpio      hwtracing  isdn        message   net     parport  powercap  ssb      tty          vhost   xen
bcma   cpufreq    dma      gpu       i2c        leds        mfd       nfc     pci      pps       staging  uio          video
block  crypto     edac     hid       iio        md          misc      nvdimm  pcmcia   ptp       target   usb          virtio

Описание драйвера

$ modinfo acpi
filename:       /lib/modules/4.11.0-2-amd64/kernel/drivers/cpufreq/acpi-cpufreq.ko
alias:          acpi
license:        GPL
description:    ACPI Processor P-States Driver
author:         Paul Diefenbaugh, Dominik Brodowski
alias:          cpu:type:x86,ven*fam*mod*:feature:*00E8*
alias:          cpu:type:x86,ven*fam*mod*:feature:*0016*
alias:          acpi*:ACPI0007:*
alias:          acpi*:LNXCPU:*
depends:
intree:         Y
vermagic:       4.11.0-2-amd64 SMP mod_unload modversions
parm:           acpi_pstate_strict:value 0 or non-zero. non-zero -> strict ACPI checks are performed during frequency changes. (uint)

Загрузка драйвера

$ modprobe foo

С проверкой

$ modprobe -v foo

Выгрузка драйвера

$ modprobe -r foo
$ rmmod foo

Список загруженых драйверов

$  lsmod
Module                  Size  Used by
ufs                    73728  0
qnx4                   16384  0
hfsplus               102400  0
hfs                    57344  0
minix                  36864  0
ntfs                   98304  0
vfat                   20480  0
msdos                  20480  0
fat                    65536  2 msdos,vfat
jfs                   180224  0
xfs                  1175552  0
fuse                   98304  3
iptable_filter         16384  0
ip_tables              24576  1 iptable_filter
x_tables               36864  2 ip_tables,iptable_filter
binfmt_misc            20480  1
nfsd                  335872  2
auth_rpcgss            61440  1 nfsd
oid_registry           16384  1 auth_rpcgss
nfs_acl                16384  1 nfsd
nfs                   245760  0
lockd                  90112  2 nfsd,nfs
grace                  16384  2 nfsd,lockd
fscache                61440  1 nfs
sunrpc                331776  6 auth_rpcgss,nfsd,nfs_acl,lockd,nfs
dm_crypt               28672  0
dm_mod                114688  1 dm_crypt
hp_wmi                 16384  0
sparse_keymap          16384  1 hp_wmi
ppdev                  20480  0
iTCO_wdt               16384  0
rfkill                 24576  1 hp_wmi
snd_hda_codec_analog    16384  1
iTCO_vendor_support    16384  1 iTCO_wdt
snd_hda_codec_generic    69632  1 snd_hda_codec_analog
i915                 1257472  1
drm_kms_helper        143360  1 i915
evdev                  24576  11
coretemp               16384  0
parport_pc             28672  0
drm                   344064  3 i915,drm_kms_helper
sg                     32768  0
serio_raw              16384  0
snd_hda_intel          36864  0
snd_hda_codec         126976  3 snd_hda_intel,snd_hda_codec_analog,snd_hda_codec_generic
snd_hda_core           77824  4 snd_hda_intel,snd_hda_codec,snd_hda_codec_analog,snd_hda_codec_generic
pcspkr                 16384  0
snd_hwdep              16384  1 snd_hda_codec
lpc_ich                24576  0
snd_pcm               102400  3 snd_hda_intel,snd_hda_codec,snd_hda_core
mfd_core               16384  1 lpc_ich
i2c_algo_bit           16384  1 i915
shpchp                 36864  0
mei_me                 40960  0
mei                   102400  1 mei_me
snd_timer              32768  1 snd_pcm
parport                49152  2 parport_pc,ppdev
snd                    77824  7 snd_hda_intel,snd_hwdep,snd_hda_codec,snd_hda_codec_analog,snd_timer,snd_hda_codec_generic,snd_pcm
wmi                    16384  1 hp_wmi
soundcore              16384  1 snd
video                  40960  1 i915
button                 16384  1 i915
acpi_cpufreq           20480  0
ext4                  589824  1
crc16                  16384  1 ext4
jbd2                  106496  1 ext4
fscrypto               28672  1 ext4
ecb                    16384  0
crypto_simd            16384  0
cryptd                 24576  1 crypto_simd
glue_helper            16384  0
aes_x86_64             20480  1
mbcache                16384  1 ext4
btrfs                1077248  0
raid10                 49152  0
raid456               126976  0
async_raid6_recov      20480  1 raid456
async_memcpy           16384  2 raid456,async_raid6_recov
async_pq               16384  2 raid456,async_raid6_recov
async_xor              16384  3 async_pq,raid456,async_raid6_recov
async_tx               16384  5 async_xor,async_pq,raid456,async_memcpy,async_raid6_recov
xor                    24576  2 async_xor,btrfs
raid6_pq              114688  4 async_pq,btrfs,raid456,async_raid6_recov
libcrc32c              16384  2 xfs,raid456
crc32c_generic         16384  2
raid1                  40960  0
raid0                  20480  0
multipath              16384  0
linear                 16384  0
md_mod                135168  6 raid1,raid10,multipath,linear,raid0,raid456
sd_mod                 49152  3
uas                    24576  0
usb_storage            69632  1 uas
ata_generic            16384  0
psmouse               131072  0
ata_piix               36864  2
libata                237568  2 ata_piix,ata_generic
scsi_mod              217088  5 sd_mod,usb_storage,libata,uas,sg
floppy                 69632  0
uhci_hcd               45056  0
e1000e                241664  0
ptp                    20480  1 e1000e
pps_core               16384  1 ptp
ehci_pci               16384  0
ehci_hcd               81920  1 ehci_pci
usbcore               245760  5 usb_storage,ehci_hcd,uhci_hcd,uas,ehci_pci
usb_common             16384  1 usbcore

Kind

Anonymous (anonymous@undisclosed.example.com) — 2024-08-27T12:42:10+00:00

Kind

Kind — это инструмент для запуска локальных кластеров Kubernetes с помощью "узлов" контейнера Docker.

Установка

# For AMD64 / x86_64
$ [ $(uname -m) = x86_64 ] && curl -Lo ./kind https://kind.sigs.k8s.io/dl/v0.24.0/kind-linux-amd64
# For ARM64
$ [ $(uname -m) = aarch64 ] && curl -Lo ./kind https://kind.sigs.k8s.io/dl/v0.24.0/kind-linux-arm64
$ chmod +x ./kind
$ sudo mv ./kind /usr/local/bin/kind

Open Files Limit

Anonymous (anonymous@undisclosed.example.com) — 2015-09-15T15:28:47+00:00

mysql, ubuntu, limits

Open Files Limit

Проверить

# ulimit -Ha
time(seconds) unlimited
file(blocks) 2097151
data(kbytes) unlimited
stack(kbytes) unlimited
memory(kbytes) unlimited
coredump(blocks) unlimited
nofiles(descriptors) unlimited

# ulimit -Sa
time(seconds) unlimited
file(blocks) 2097151
data(kbytes) 131072
stack(kbytes) 32768
memory(kbytes) 32768
coredump(blocks) 2097151
nofiles(descriptors) 2000

Изменить

nano /etc/security/limits.conf

* soft nofile 102400
* hard nofile 102400
* soft nproc 10240
* hard nproc 10240

Заместо * можно указать название сервиса

mysql soft nofile 102400
mysql hard nofile 102400
mysql soft nproc 10240
mysql hard nproc 10240

load average

Anonymous (anonymous@undisclosed.example.com) — 2015-09-26T13:16:39+00:00

linux, system

load average

load average - обозначает среднее число процессов стоящих в очереди на исполнение за определенный интервал времени.

Пример

Очередь образуется по причине ожидания таких ресурсов как:

центральный процессор
дисковая подсистема ввода/вывода
сетевая подсистема ввода/вывода.

Какой load average можно считать нормальным или допустимым?

Ответ:

Если речь о CPU load average, то это зависит о количества ядер CPU на вашем сервере. В один момент времени одно ядро может выполнять только один процесс.

Планировщик ядра распределяет вычислительные возможности процессора между всеми процессами выполняемыми в системе и создаётся иллюзия одновременной работы. Всегда какое то количество процессов стоит в очереди.

Если речь идет о системе с одним ядром CPU, то при:

load average < 1 - идеальная ситуация, сервер не нагружен
load average 1 - 3 сервер нагружен но работает в норм режиме
load average 3 - 10 сервер загружен довольно сильно, надо следить за нагрузкой и выявлять причины такой нагрузки
load average > 10 сервер перегружен, надо принимать меры
load average > 20 сервер сильно тормозит, трудно получить ответ сервера

Если у Вашего сервера несколько ядер, то эти цифры надо увеличить на количество ядер.

Ссылки

http://habrahabr.ru/post/71020/

Anonymous (anonymous@undisclosed.example.com) — 2011-10-31T22:28:16+00:00

Logrotate - приложение, разработанное для облегчения управления лог-файлами. Особенно Logrotate полезен там, где создается большое количество лог-файлов. Утилита позволяет в автоматическом режиме архивировать, удалять, очищать и отправлять на e-mail лог-файлы. Этот процесс обычно называется ротацией лог файлов.

Logrotate может быть настроен на ежедневную, еженедельную или ежемесячную ротацию. Кроме того, можно задать размер файла, по достижении которого файл будет ротирован. Обычно logrotate выполняется в качестве каждодневного задания (cron). Установка Logrotate

Установка обычна для Debian / Ubuntu-based дистрибутивов:

$ sudo aptitude install logrotate

highlight: bash Краткое описание файла настроек Logrotate

Описание того, каким образом Logrotate будет работать с тем или иным лог файлом находится в специальном конфигурационном файле. Как правило, они располагаются в директории /etc/logrotate.d/. Например, файл конфигурации для apache2 выглядит следующим образом:

$ more /etc/logrotate.d/apache2
/var/log/apache2/*.log {
        weekly              # ротация раз в неделю
        missingok           # отсутствие файла не является ошибкой
        rotate 52           # сохраняется последние 52 ротированных файла
        compress            # сжимать ротируемый файл
        delaycompress       # сжимать предыдущий файл при следующей ротации 
                            # (т.е. файл *.log.1 будет не сжат, а *.log.2 и далее сжатыми)
        notifempty          # не обрабатывать пустые файлы
        create 640 root adm # сразу после ротации создать пустой файл с заданными правами и пользователем
        sharedscripts       # крипты prerotate/postrotate будут выполнены только один раз
                            # не зависимо от количества журналов, подходящих под заданный шаблон
        postrotate          # скрипт будет выполнен сразу после ротации
                if [ -f "`. /etc/apache2/envvars ; echo ${APACHE_PID_FILE:-/var/run/apache2.pid}`" ]; then
                        /etc/init.d/apache2 reload > /dev/null
                fi
        endscript
}
highlight: bash

При этом, первая строка /var/log/apache2/*.log есть ничто иное, как шаблон обрабатываемых лог-файлов. Он означает, что указанная конфигурация ротации будет использоваться для всех файлов, находящихся в директории /var/log/apache2/ и имеющих расширение "log".

Допустимых директив в конфигурационном файле очень много (более 40). Поддробнее о них можно узнать из man logrotate. Основные опции Logrotate

Как правило, после настройки конфигурационного файла появляется необходимость проверить работу logrotate для новых логов. Для этого есть возможность непосредственного запуска logrotate из командной строки. При этом допускаются следующие опции:

-d. Всключает режим отладки, а так же дублирует опциию -v. В режиме отладки никаких действий с логами не будет выполнено.

-f, –force. Заставляет logrotate выполнить ротацию логов. Бывает необходимо после добавления новых конфигурационных файлов или если старый лог файл был удалён вручную; таким образом будут созданы новые лог-файлы и журналирование будет корректно продолжено.

-m, –mail command. Указывает, какую команду использовать для отправки журналов по почте. Команда должна принимать 2 входных параметра: заголовок письма получателя письма

После этого команда должна прочитать сообщение со стандартного входа (STDIN) и отправить его получателю. Командой по умолчанию является /usr/bin/mail -s

-s, –state statefile. Указывает на использование альтернативный файл состояния. Полезно в случаях, когда logrotate работает от имени разных пользователей для различных наборов лог-файлов. Дефолтный файл состояния: /var/lib/logrotate/status

–usage. Выводит краткую инструкцию по использованию утилиты.

-v, –verbose. Вывод диагностических сообщений во время ротации. Пример настройки Logrotate

В качестве примера допустим, что в директории /home/site/debianworld.ru/logs/ располагаются лог-файлы таких веб серверов, как nginx и apache. Работают они в связке: nginx - фронтенд, apache2-бэкенд.

$ more /etc/logrotate.d/debianworld.ru
# Ротация логов nginx (front-end)
# Отдает статику, все остальное - проксирует на apache.
# Лог ведется более интенсивно. 
/home/dw/debianworld.ru/logs/nginx_*.log {
    daily                   # ежедневная ротация
    missingok               # отсутствие файла не является ошибкой
    rotate 45               # хранится история за 45 дней
    compress                # ротируемые файлы сжимаются
    delaycompress           # ротируемый файл не сжимается, остальные - сжимаются
    notifempty              # не обрабатывать пустые файлы
    create 640 dw www-data  # права, пользователь нового файла
    sharedscripts           # prerotate/postrotate выполняются только 1 раз
    prerotate               # Cбор статистики посещений для AWstats
            /usr/bin/perl /usr/lib/cgi-bin/awstats.pl -update -config=debianworld.ru -databasebreak=day
    endscript               
    postrotate              # Перезапуск nginx
            [ ! -f /var/run/nginx.pid ] || kill -USR1 `cat /var/run/nginx.pid`
    endscript
}

# Ротация логов apache2 (back-end)
# Лог ведется менее интенсивно.
/home/dw/debianworld.ru/logs/apache*.log {
    weekly                   # еженедельная ротация
    missingok                # отсутствие файла не является ошибкой
    rotate 4                 # хранится история за 4 недели
    compress                 # ротируемые файлы сжимаются
    nodelaycompress          # ротируемый файл так же сжимается
    notifempty               # не обрабатывать пустые файлы
    create 640 dw www-data   # права, пользователь нового файла
    sharedscripts            # postrotate выполняется только 1 раз
    postrotate               # Перезапуск apache2
            if [ -f /var/run/apache.pid ]; then
                /etc/init.d/apache2 restart > /dev/null
            fi
    endscript
}
highlight: bash

Комментарии по ходу текста не должны оставить вопросов. Но в общем, схема такова, что отдельно ротируются логи nginx, отдельно логи apache2. При этом, так как nginx является front-end'ом и его лог наполняется интенсивнее, чем у apache, то он (лог nginx) ротируется в 7 раз чаще, чем лог apache2.

Кроме того, при каждой итерации ротирования логов nginx выполняется сбор статистики посещений AWstats (см. Установка и настройка AWstats и Настройка AWstats для генерации статистики по дням).

После того, как конфигурационный файл создан, необходимо убедиться, что все будет работать именно так, как и задумано. Для этого необходимо выполнить (при этом, реальных изменений никаких не будет, так как запуск будет выполнен в отладочном режиме):

$ sudo logrotate -d /etc/logrotate.d/debianworld.ru
highlight: bash

После того, как по диагностическим сообщениям стало ясно, что все в порядке, необходимо непосредственно запустить ротацию:

$ sudo logrotate -v -f /etc/logrotate.d/debianworld.ru
highlight: bash

В дальнейшем ротация будет выполняться автоматически с заданным в конфигурационном файле интервалом.

Logstash

Anonymous (anonymous@undisclosed.example.com) — 2016-04-06T16:01:41+00:00

elasticsearch, log

Logstash

https://www.elastic.co/guide/en/logstash/current/index.html

Logstash — это орудие для сбора, фильтрации и нормализации логов. Оно является бесплатным и open source приложением.

Установка

$ echo "deb http://packages.elastic.co/logstash/2.3/debian stable main" | sudo tee -a /etc/apt/sources.list
$ wget -qO - https://packages.elastic.co/GPG-KEY-elasticsearch | sudo apt-key add -
$ apt-get update && apt-get install logstash

Статьи

http://habrahabr.ru/post/165059/

lspci

Anonymous (anonymous@undisclosed.example.com) — 2015-09-16T00:00:28+00:00

shell, utils

lspci

VGA

lspci -vmk | grep -A 8 -B 2 VGA

Изменения размера логических томов LVM

Anonymous (anonymous@undisclosed.example.com) — 2013-08-22T19:16:34+00:00

Изменения размера логических томов LVM

Cписок физических томов LVM

pvdisplay

pvdisplay

File descriptor 7 (pipe:[10291]) leaked on pvdisplay invocation. Parent PID 2499: bash
  --- Physical volume ---
  PV Name               /dev/xvda2
  VG Name               some_system
  PV Size               9.86 GiB / not usable 4.00 MiB
  Allocatable           yes (but full)
  PE Size               4.00 MiB
  Total PE              2523
  Free PE               0
  Allocated PE          2523
  PV UUID               O1hTxA-375C-UeUF-BvBL-s1s2-MdxI-vueqcw

vgdisplay

vgdisplay

File descriptor 7 (pipe:[10291]) leaked on vgdisplay invocation. Parent PID 2499: bash
  --- Volume group ---
  VG Name               some_system
  System ID
  Format                lvm2
  Metadata Areas        1
  Metadata Sequence No  7
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                2
  Open LV               2
  Max PV                0
  Cur PV                1
  Act PV                1
  VG Size               9.86 GiB
  PE Size               4.00 MiB
  Total PE              2523
  Alloc PE / Size       2523 / 9.86 GiB
  Free  PE / Size       0 / 0
  VG UUID               nIzHZu-Einu-bBbr-8rCF-pHjH-o7Qo-hUXmJX

lvdisplay

lvdisplay

File descriptor 7 (pipe:[10291]) leaked on lvdisplay invocation. Parent PID 2499: bash
  --- Logical volume ---
  LV Path                /dev/some_system/swap
  LV Name                swap
  VG Name                some_system
  LV UUID                NzpQxC-HFDI-XbGw-WCTG-hfcX-Ihwj-D3QhKv
  LV Write Access        read/write
  LV Creation host, time ,
  LV Status              available
  # open                 2
  LV Size                1.91 GiB
  Current LE             488
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     1024
  Block device           253:1

  --- Logical volume ---
  LV Path                /dev/some_system/root
  LV Name                root
  VG Name                some_system
  LV UUID                boyHcz-IEx1-K74c-2gBP-etZ6-utfW-MjFlfi
  LV Write Access        read/write
  LV Creation host, time ,
  LV Status              available
  # open                 1
  LV Size                7.95 GiB
  Current LE             2035
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     1024
  Block device           253:0

Изменение раздела

lvextend -L 40G /dev/some_system/root
resize2fs /dev/mapper/some_system-root

Selectel.ru

Диски увеличиваются как блочные устройства, поэтому после увеличения диска в панели управления вам необходимо:

Выполнить команду: ptmax /dev/xvda2
Перезагрузить сервер.
Выполнить команду: pvresize /dev/xvda2
Выполнить команду: vgdisplay, из ее вывода необходимо запомнить следующие данные:

VG Name (скорее всего вида vmXXXX_system) - в дальнейшем, будем ссылаться на него как на VGNAME
Free PE / Size (здесь необходимо запомнить число до слеша, размер запоминать не нужно) — в дальнейшем будем ссылаться на него как на Free PE

Увеличить размер логического тома:

lvresize /dev/VGNAME/root -l+Free_PE
- например: lvresize /dev/vmXXXX_system/root -l +500
- например: lvresize /dev/some_system/root -l 10241

Изменить размер файловой системы:
- resize2fs /dev/VGNAME/root
- например, resize2fs /dev/vmXXXX_system/root

Minikube

Anonymous (anonymous@undisclosed.example.com) — 2024-08-26T21:00:47+00:00

[kubernetes]

Minikube

kind — это инструмент для запуска локальных кластеров Kubernetes с использованием «узлов» контейнера Docker. kind был в первую очередь разработан для тестирования самого Kubernetes, но может использоваться для локальной разработки или непрерывной интеграции.
kubectl
helm

Установка и настройка

$ curl -LO https://storage.googleapis.com/minikube/releases/latest/minikube-linux-amd64
$ minikube start --vm-driver=docker
$ curl -LO "https://dl.k8s.io/release/$(curl -L -s https://dl.k8s.io/release/stable.txt)/bin/linux/amd64/kubectl"
$ curl -LO https://dl.k8s.io/release/v1.31.0/bin/linux/amd64/kubectl
$ echo "7c27adc64a84d1c0cc3dcf7bf4b6e916cc00f3f576a2dbac51b318d926032437" > kubectl.sha256
$ echo "$(cat kubectl.sha256)  kubectl" | sha256sum --check
$ sudo install -o root -g root -m 0755 kubectl /usr/local/bin/kubectl
$ chmod +x kubectl
$ mkdir -p ~/.local/bin
$ mv ./kubectl ~/.local/bin/kubectl
$ kubectl version --client
$ source /usr/share/bash-completion/bash_completion
$ echo 'source <(kubectl completion bash)' >>~/.bashrc
$ echo 'alias k=kubectl' >>~/.bashrc
$ echo 'complete -o default -F __start_kubectl k' >>~/.bashrc
$ source ~/.bashrc
$ kubectl
$ k get pods
$ k get pods -A
$ k get svc -A
$ kubectl completion bash | sudo tee /etc/bash_completion.d/kubectl > /dev/null

Запуск панели (dashboard)

$ minikube dashboard

Создание деплоймента

$ kubectl create deployment hello-node --image=registry.k8s.io/e2e-test-images/agnhost:2.39 -- /agnhost netexec --http-port=8080
$ kubectl get deployments
$ kubectl get events
$ kubectl config view

Создание сервиса

$ kubectl expose deployment hello-node --type=LoadBalancer --port=8080
$ kubectl get services
$ minikube service hello-node

Очистка

$ kubectl delete service hello-node
$ kubectl delete deployment hello-node
$ minikube stop
$ minikube delete

Ссылки

	Kubernetes	2024/05/02 20:28	kubernetes
	Minikube	2024/08/22 20:16	kubernetes

Minio

Anonymous (anonymous@undisclosed.example.com) — 2025-12-24T19:25:31+00:00

Minio

version: '3.8'

services:
  minio:
    image: minio/minio:RELEASE.2025-09-07T16-13-09Z-cpuv1
    container_name: minio
    environment:
      - MINIO_ROOT_USER=admin
      - MINIO_ROOT_PASSWORD=admin123
    ports:
      - "9999:9000"
      - "9991:9001"
    volumes:
      - minio_data:/data
    command: server /data --console-address ':9001'
    restart: unless-stopped

  minio_mc:
    image: minio/mc:RELEASE.2025-08-13T08-35-41Z-cpuv1
    container_name: minio_mc
    depends_on:
      - minio
    entrypoint: >
      sh -c "
      until mc alias set myminio http://minio:9000 admin admin123; do
        echo 'Waiting for MinIO...';
        sleep 2;
      done;
      mc admin user add myminio your_access_key your_secret_key 2>/dev/null || echo 'User already exists';
      mc mb -p myminio/mybucket;
      mc admin policy attach myminio readwrite --user=your_access_key 2>/dev/null || mc admin policy set myminio readwrite user=your_access_key;
 
      echo '=== MinIO Credentials ===';
      echo 'Endpoint: http://localhost:9999';
      echo 'Console: http://localhost:9991';
      echo 'Access Key: your_access_key';
      echo 'Secret Key: your_secret_key';
      echo 'Bucket: mybucket';
      echo '========================';
 
      exit 0
      "
    restart: on-failure

volumes:
  minio_data:

mount - Монтирование файловой системы

Anonymous (anonymous@undisclosed.example.com) — 2019-10-25T01:18:27+00:00

bash, shell, commands, mount, fs

mount - Монтирование файловой системы

mount rw

mount -o remount,rw /

Ускорение файловой системы EXT2 - EXT4

В 4 секции /etc/fstab ввести ,noatime,nodiratime

Монтирование tmpfs

/etc/fstab

# Пример
none    /dev/shm   tmpfs    defaults             0       0
tmpfs    /tmp   tmpfs    defaults             0       0
chromium-cache   /home/USER/.cache/chromium   tmpfs    defaults,noatime,mode=1777,size=500M    0    0

Remote mount / Удаленое монтирование

mount -tfuse sshfs#root@hosting.reklamu.ru:tmp ./test

apt-get install sshfs

mount -tsshfd sshfs#root@hosting.reklamu.ru:tmp ./test

mount -tsshfs sshfs#root@hosting.reklamu.ru:tmp ./test

mount sshfs#root@hosting.reklamu.ru:tmp ./test

Монтирование tmpfs

/etc/fstab

# Пример
none    /dev/shm   tmpfs    defaults             0       0
tmpfs    /tmp   tmpfs    defaults             0       0
chromium-cache   /home/USER/.cache/chromium   tmpfs    defaults,noatime,mode=1777,size=500M    0    0

Размонтирование

umount - размонтирование раздела

Mule ESB / Mulesoft

Anonymous (anonymous@undisclosed.example.com) — 2025-04-11T16:56:22+00:00

[mule, datawave, esb]

Mule ESB / Mulesoft

Linux

MacOS

Windows

Server

Документация

Видео уроки

https://www.youtube.com/@IntegrationWorld/playlists

Ссылки

multitail

Anonymous (anonymous@undisclosed.example.com) — 2016-04-06T11:31:57+00:00

multitail

Установка

apt-get install multitail

Основные возможности

вывод более чем одного файла в терминал, который делится на т. н. окна;
терминал может разделяться на окна как горизонтально, так и вертикально;
окна можно создавать, перемещать, закрывать, объединять и временно скрывать;
в одно окно можно выводить более одного файла;
поиск как в одном окне, так и во всех сразу;
фильтрация строк перед выводом при помощи регулярных выражений;
мерцание экрана или звуковое оповещение при обнаружении определённого текста;
подсветка цветом текста на основе регулярных выражений;
направление вывода в текстовые файлы (работает, подобно tee);
работа в режиме syslog-сервера;
подавление вывода дублирующихся строк;
изменение конфигурации MultiTail «на лету» в ответ на изменения в наблюдаемом файле;
наблюдение за потоком стандартного ввода;
преобразование IP-адресов в имена хостов, значений errno в текстовые описания, etc;
разнообразные варианты обрезки длинных строк: справа, слева, определённую часть;
горизонтальная и вертикальная прокрутка, режим переноса длинных строк;
и многое, многое другое!

Mutt - Отправка почты через console

Anonymous (anonymous@undisclosed.example.com) — 2016-05-25T12:44:36+00:00

email, console, sendmail, send, client, smtp

Mutt - Отправка почты через console

Статьи

http://www.opennet.ru/docs/RUS/mutt4users/

Конфигурация

Anonymous (anonymous@undisclosed.example.com) — 2012-02-27T19:07:25+00:00

http://ru.wikipedia.org/wiki/Nagios

Конфигурация

http://xgu.ru/wiki/Nagios

Fronted

Nano

Anonymous (anonymous@undisclosed.example.com) — 2015-09-25T09:27:35+00:00

shell, commands, bin

Nano

Q: Как отменить последнии действия
- Запустить с параметром -u Пример: nano -u [FILE]
- Затем будут доступны действия
  - Alt-U - undo
  - Alt-E - redo
Q: Как выполнить поиск
- Ctrl-w - Поиск
- Ctrl-w - Повторный поиск
- Ctrl-\ - Замена
Q: Как работать с множеством открытых файлов
- Alt-F
  - Alt + стрелка влево
  - Alt + стрелка вправо

nano-help-a4.pdf

Настройки

~/.nanorc

syntax highlighting

ls /usr/share/nano/
asm.nanorc    css.nanorc      groff.nanorc     man.nanorc     nanorc.nanorc  perl.nanorc    ruby.nanorc  xml.nanorc
awk.nanorc    debian.nanorc   html.nanorc      mgp.nanorc     objc.nanorc    php.nanorc     sh.nanorc
cmake.nanorc  fortran.nanorc  java.nanorc      mutt.nanorc    ocaml.nanorc   pov.nanorc     tcl.nanorc
c.nanorc      gentoo.nanorc   makefile.nanorc  nano-menu.xpm  patch.nanorc   python.nanorc  tex.nanorc

nano ~/.nanorc

include /usr/share/nano/sh.nanorc

SH

$ wget -r -nH --cut-dirs=3 --no-parent --reject="index.html*" https://nanosyntax.googlecode.com/svn/trunk/syntax-nanorc/ -P ~/.nano-syntax
$ for i in `ls --color=never -1 ~/.nano-syntax/svn/trunk/syntax-nanorc/*.nanorc` ; do echo "include $i" >> ~/.nanorc ; done

Настройка сети в Linux / Debian

Anonymous (anonymous@undisclosed.example.com) — 2026-02-17T02:19:50+00:00

networks, networking, network, linux, debian, dhcp

Настройка сети в Linux / Debian

Static

nano /etc/network/interfaces

allow-hotplug eth0
iface eth0 inet static
    address 192.168.1.1
    netmask 255.255.255.0
    gateway 192.168.1.254

DCHP

nano /etc/network/interfaces

allow-hotplug eth0
auto eth0
iface eth0 inet dhcp

Добавить дополнительные IP адреса

nano /etc/network/interfaces

auto eth0:0
iface eth0:0 inet static
    address 192.168.1.2
    netmask 255.255.255.0

auto eth0:1
iface eth0:1 inet static
    address 192.168.1.3
    netmask 255.255.255.0

...


auto eth0:10
iface eth0:10 inet static
    address 192.168.1.12
    netmask 255.255.255.0

Настройка DNS серверов

nano /etc/resolv.conf

nameserver 8.8.8.8
nameserver 4.4.4.4

nohup

Anonymous (anonymous@undisclosed.example.com) — 2016-08-07T13:59:36+00:00

shell, sh, bash, server, utils, service, script

nohup

nohup — UNIX-утилита, запускающая указанную команду с игнорированием сигналов потери связи (SIGHUP). Таким образом, команда будет продолжать выполняться в фоновом режиме и после того, как пользователь выйдет из системы. Если стандартным выводом (stdout) команды является терминал, то он и стандартный вывод ошибок (stderr) перенаправляются с добавлением в файл «nohup.out» в текущей директории; если это невозможно сделать, то перенаправление происходит в файл «$HOME/nohup.out». Если и это невозможно сделать, то команда не запускается совсем. При создании файлов «nohup.out» или «$HOME/nohup.out» команда nohup устанавливает им атрибуты доступа только для владельца этих файлов (группа и остальные пользователи не имеют прав доступа к этим файлам). Если же эти файлы уже существуют, то их права доступа не изменяются.

PHP

nohup php -q script.php > script.log 2>&1 &

NSD

Anonymous (anonymous@undisclosed.example.com) — 2012-10-21T17:37:14+00:00

NSD

http://www.nlnetlabs.nl/projects/nsd/

OBFS4

Anonymous (anonymous@undisclosed.example.com) — 2023-12-14T23:54:02+00:00

squid, privoxy, tor, obfs4

OBFS4

Самым распространенным (и при этом мощным) инструментом обфускации трафика в Tor является obfs4.

OpenVPN

Anonymous (anonymous@undisclosed.example.com) — 2016-06-08T23:12:25+00:00

networks, networking, network, openvpn, vpn

OpenVPN

По умолчанию, когда клиент OpenVPN активен, только сетевой трафик к и от сайта OpenVPN-сервера идет через VPN. Например, обычный просмотр веб-страниц будет осуществляться через прямое подключение в обход VPN.

Документация

В некоторых случаях такое поведение может быть нежелательным – у вас может возникнуть необходимость чтобы VPN-клиент туннелировал весь сетевой трафик через VPN, включая просмотр веб-страниц Интернета. Хотя этот тип VPN конфигурации приведет к потере производительности на клиенте, он дает администратору VPN более полный контроль над политиками безопасности когда клиент одновременно подключен и к Интернету и к VPN.

Документация

Настройка клиента

apt-get install openvpn
настроить конфигурацию
настроить имя конфигурации NAME в /etc/default/openvpn

Конфигурация

nano /etc/openvpn/client.conf

port 1195
proto udp
dev tap
remote xxx.xxx.xxx.xxx
tls-client
ca ca.crt #эти файлы получить у админа vpn-сервера
cert clients.crt #эти файлы получить у админа vpn-сервера
key clients.key #эти файлы получить у админа vpn-сервера
ifconfig 10.3.0.54 255.255.255.0 # присвоенный ip для вашего сертификата
route 10.3.0.54 255.255.255.255 10.3.0.1 # это думаю понятно
route 192.168.25.0 255.255.255.0 10.3.0.1 # добавляем внутренние сети со стороны сервера (если нужны конечно)
tun-mtu 1500
tun-mtu-extra 32
mssfix 1450
pull
cipher DES-CBC
comp-lzo

Настройка сервера

aptitude install openvpn
cp -R /usr/share/doc/openvpn/examples/easy-rsa/ /etc/openvpn
nano /etc/openvpn/easy-rsa/2.0/vars

Зададим размер ключа (чем больше, тем лучше и тем медленнее будет работать, ну и не рекомендую ставить 4096 например, поту что build-dh потом будет выполняться несколько часов):

export KEY_SIZE=1024

Зададим время, через которое понадобится обновить ключи:

export KEY_EXPIRE=365

Зададим параметры генерации SSL сертификата:

export KEY_COUNTRY="RU"
export KEY_PROVINCE="SPB"
export KEY_CITY="SaintPetersburg"
export KEY_ORG="Home"
export KEY_EMAIL="postmaster@example.com"

Загрузим все переменные:

# cd /etc/openvpn/easy-rsa/2.0/
# . ./vars

Эта команда удаляет все сертификаты, которые были сгенерированы ранее (ну вдруг это не первая попытка):

# . ./clean-all

Создаём центр сертификации. Это очень важный файл и крайне рекомендуется сохранить получившиеся файлы ещё где-нибудь. С помощью центра сертификации производится подписывание генерируемых сертификатов и подключится с сертификатом от другого центра не получится, даже если у него будут одинаковые параметры генерации.

# . ./build-ca 
Generating a 1024 bit RSA private key
........++
.............................................................................................................................................................................................++
writing new private key to 'ca.key'
-----
You are about to be asked to enter information that will be incorporated
into your certificate request.
What you are about to enter is what is called a Distinguished Name or a DN.
There are quite a few fields but you can leave some blank
For some fields there will be a default value,
If you enter '.', the field will be left blank.
-----
Country Name (2 letter code) [RU]:
State or Province Name (full name) [SPB]:
Locality Name (eg, city) [SaintPetersburg]:
Organization Name (eg, company) [Home]:
Organizational Unit Name (eg, section) []:
Common Name (eg, your name or your server's hostname) [output-meta]:openvpn.local
Name []:Nikita Menkovich
Email Address [postmaster@example.com]:

Создаём сертификат сервера, с его помощью будет производится проверка, что сервер это тот именно сервер.

# . ./build-key-server server
Generating a 1024 bit RSA private key
.........................................++
.....++
writing new private key to 'server.key'
-----
You are about to be asked to enter information that will be incorporated
into your certificate request.
What you are about to enter is what is called a Distinguished Name or a DN.
There are quite a few fields but you can leave some blank
For some fields there will be a default value,
If you enter '.', the field will be left blank.
-----
Country Name (2 letter code) [RU]:
State or Province Name (full name) [SPB]:
Locality Name (eg, city) [SaintPetersburg]:
Organization Name (eg, company) [Home]:
Organizational Unit Name (eg, section) []:
Common Name (eg, your name or your server's hostname) [server]:server.openvpn.local
Name []:server.openvpn.local
Email Address [postmaster@example.com]:

Please enter the following 'extra' attributes
to be sent with your certificate request
A challenge password []:
An optional company name []:
Using configuration from /etc/openvpn/easy-rsa/2.0/openssl.cnf
Check that the request matches the signature
Signature ok
The Subject's Distinguished Name is as follows
countryName           :PRINTABLE:'RU'
stateOrProvinceName   :PRINTABLE:'SPB'
localityName          :PRINTABLE:'SaintPetersburg'
organizationName      :PRINTABLE:'Home'
commonName            :PRINTABLE:'server.openvpn.local'
name                  :PRINTABLE:'server.openvpn.local'
emailAddress          :IA5STRING:'postmaster@example.com'
Certificate is to be certified until Aug 19 10:34:03 2013 GMT (365 days)
Sign the certificate? [y/n]:y

Далее необходимо сгенерировать параметры Диффи-Хеллмана, это займёт очень много времени если у вас не 1024, а 4096 бит (у меня заняло около двух часов), сходите попейте чаю, можете даже на обед сходить:

# . ./build-dh 
Generating DH parameters, 1024 bit long safe prime, generator 2
This is going to take a long time
.........+..........................................................................................+.............................................+.......................+....................+.....+..+.................++*++*++*

Сделаем конфигурационный файл:

# zcat /usr/share/doc/openvpn/examples/sample-config-files/server.conf.gz > /etc/openvpn/server.conf
# vim /etc/openvpn/server.conf

Раскомментируем эти строчки, a.b.c.d заменим на IP адрес, который висит на интерфейсе:

;local a.b.c.d
;push "redirect-gateway def1 bypass-dhcp"
;push "dhcp-option DNS 208.67.222.222"
;push "dhcp-option DNS 208.67.220.220"

DNS серверы можете указать свои. Опция redirect-gateway def1 указывает на то, что весь трафик после подключения должен идти через VPN.

Должен получится такой файл:

# egrep -v '^;|^#|^$' /etc/openvpn/server.conf

local a.b.c.d
port 1194
proto udp
dev tun
ca ca.crt
cert server.crt
key server.key  # This file should be kept secret
dh dh1024.pem
server 10.8.0.0 255.255.255.0
ifconfig-pool-persist ipp.txt
push "redirect-gateway def1 bypass-dhcp"
push "dhcp-option DNS 208.67.222.222"
push "dhcp-option DNS 208.67.220.220"
keepalive 10 120
comp-lzo
persist-key
persist-tun
status openvpn-status.log
verb 3

Перезапустим openvpn подключение server (файл же мы назвали server.conf, так что можно легко делать несколько подключений).

# invoke-rc.d openvpn restart server

Теперь настроим перенаправление запросов из нашего тунеля в сеть:

# echo "net.ipv4.ip_forward=1" >> /etc/sysctl.conf
# sysctl -p
# iptables -A FORWARD -m state --state RELATED,ESTABLISHED -j ACCEPT
# iptables -A FORWARD -s 10.8.0.0/24 -j ACCEPT
# iptables -A FORWARD -j REJECT
# iptables -t nat -A POSTROUTING -s 10.8.0.0/24 -o eth0 -j MASQUERADE

Разрешим доступ по udp к порту 1194:

# iptables -A INPUT -p udp -m udp --dport 1194 -j ACCEPT

Сохраняем их и настраиваем автозапуск:

# iptables-save > /etc/iptables.up.rules
# cat /etc/network/if-up.d/iptables 
#!/bin/sh
iptables-restore < /etc/iptables.up.rules
# chmod u+x /etc/network/if-up.d/iptables

Утилиты для работы с пакетами

Anonymous (anonymous@undisclosed.example.com) — 2012-02-07T18:32:04+00:00

Утилиты для работы с пакетами

Команда dpkg фокусируется только на пакетах, в то время как apt-get ищет в каком репозитарии находится пакет и скачивает его. Для простого понимания данного примера скачаем пакет с помощью apt-getи установим с помощью dpkg:

Сборка пакетов:

apt-get install checkinstall
checkinastall -A 32 - для сборки под 32 битную архитектуру
checkinstall

apt-get install dh-make
dh_make -s -n -p libsphinxclient_2.0.3 
dpkg-buildpackage

Панели администрирования

Anonymous (anonymous@undisclosed.example.com) — 2016-12-21T02:39:49+00:00

panel

Панели администрирования

Ajenti

http://vestacp.com/

Debian -

wget http://vestacp.com/pub/vst-install-debian.sh
bash vst-install-debian.sh

php fastcgi default

Anonymous (anonymous@undisclosed.example.com) — 2012-03-29T23:45:05+00:00

php fastcgi default

/etc/default/php-fastcgi

START=yes

# Which user runs PHP? (default: www-data)
EXEC_AS_USER=www-data

# Host and TCP port for FASTCGI-Listener (default: localhost:9000)
FCGI_HOST=localhost
FCGI_PORT=9000

# Environment variables, which are processed by PHP
PHP_FCGI_CHILDREN=4
PHP_FCGI_MAX_REQUESTS=1000

Настройка

Anonymous (anonymous@undisclosed.example.com) — 2012-03-29T23:43:04+00:00

Настройка

Установка и настройка PHP FPM

Anonymous (anonymous@undisclosed.example.com) — 2016-03-16T10:38:16+00:00

php, server, service, fpm, php, lnmp

Установка и настройка PHP FPM

Установка и настройка PHP-FPM

Замораживаем версию пакета php

PHP=$(dpkg -l|grep php|grep 5.3|awk '{print $2}')
aptitude hold $PHP - для aptitude и команд: safe-upgrade
apt-mark hold $PHP - для apt

Размораживаем версию пакета php

PHP=$(dpkg -l|grep php|grep 5.3|awk '{print $2}')
aptitude unhold $PHP - для aptitude и команд: safe-upgrade
apt-mark unhold $PHP - для apt

Установка из исходников

code

Debug install

Установка отладчиков кода

Кешировние

fpm/pool.d/ Конфигурационные файлы PHP-FPM

pm.max_children = необходимо вычислить сколько памяти занимает один процесс, потом разделить тот объем памяти который вы хотите выделить для php5-fpm, на объем одного процессора, получите количество pm.max_children (наример 10000мб/50мб=200)
pm.min_spare_servers = этот параметр начать с количество ядер процессора умножить на 2 (пример 4 ядра * 2 = 8)
pm.max_spare_servers = этот параметр количество ядер процессора * 4 (пример 4 *4 = 16)
pm.start_servers = этот параметр вычисляется по формуле (pm.min_spare_servers+pm.max_spare_servers)/2 (пример (8+16)/2=12) Итого на выходе получаем примерно конфигурацию для 4 ядерного процессора 10гб памяти (выделенные только под PHP5-FPM, возможно у вас 16Гб общей)
pm.max_children = 200
pm.start_servers = 12
pm.min_spare_servers = 8
pm.max_spare_servers = 16

Статьи

http://www.if-not-true-then-false.com/2011/nginx-and-php-fpm-configuration-and-optimizing-tips-and-tricks/

Podman

Anonymous (anonymous@undisclosed.example.com) — 2025-01-19T01:57:41+00:00

Podman

Утилиты

Buildah: это инструмент с открытым исходным кодом на базе Linux, используемый для создания контейнеров, совместимых с Open Container Initiative (OCI). Buildah может создавать и управлять контейнерами без полной установленной среды выполнения контейнера или демона.
Skopeo: это утилита командной строки для выполнения различных операций с образами контейнеров и реестрами образов. Она может проверять образы в удаленном реестре без необходимости загрузки всего образа, что делает ее облегченным решением для работы с контейнером.
Podman Сompose: инструмент, подобный Docker Compose, для запуска мультиконтейнерных приложений.
runc: обеспечивает базовую функциональность по созданию, запуску и управлению контейнерами для Podman и Buildah.
crun: опциональная среда выполнения, которая обеспечивает большую гибкость, контроль и безопасность для контейнеров без root-доступа (с ограниченными привилегиями).
Rancher Desktop: Kubernetes и управление контейнерами на рабочем столе
Colima: Docker (и Kubernetes) на macOS с минимальной настройкой
Finch: Finch — клиент командной строки для локальной разработки контейнеров.

Основные команды

$ podman machine init --cpus 2 --memory 2048 --disk-size 20
$ podman machine start
$ podman system connection default podman-machine-default-root
$ podman info

$ podman create -p 8080:8080 --name myapp quay.io/rhatdan/myimage
$ podman create --label "io.containers.autoupdate=registry" -p 8080:8080 --name myapp quay.io/rhatdan/myimage
397ad15601868eb6fd77fe0b67136869cde9e0ffad90ee5095a19de5bb4b999e

$ podman-compose up -d
$ podman-compose ps

podman systemd

$ podman generate systemd --new myapp > $HOME/.config/systemd/user/myapp-new.service
$ podman generate systemd myapp --new > $HOME/.config/systemd/user/myapp-new.service

Получение образов

$ skopeo --debug copy --all docker://nginx:latest dir:///tmp/nginx

Создание контейнеров

$ podman pull docker.io/library/hello-world
$ podman run --rm docker.io/library/hello-world

Power DNS

Anonymous (anonymous@undisclosed.example.com) — 2025-09-06T03:43:24+00:00

networks, networking, network

Power DNS

PowerDNS — представляет собой высокопроизводительный DNS-сервер, написанный на C++ и лицензируемый под лицензией GPL. Существуют версии для Unix и Windows-систем.

Установка

apt-get install pdns-server pdns-recursor pdns-backend-mysql

Обновление

Docker

version: '2'

services:
  db:
    image: mariadb:10.6.22
    container_name: db
    environment:
      - MYSQL_ALLOW_EMPTY_PASSWORD=yes
      - MYSQL_DATABASE=pdns_db
      - MYSQL_USER=pdns_user 
      - MYSQL_PASSWORD=pdns_password
    restart: always
    volumes:
      - pdns-data:/var/lib/mysql
    command: ['--character-set-server=utf8mb4', '--collation-server=utf8mb4_unicode_ci']
    networks:
      - pdns_network

  pdns-authoritative:
    image: pschiffe/pdns-mysql:4.7-alpine
    restart: always
    depends_on:
      - db
    networks:
      - pdns_network
    ports:
      - "192.168.1.132:3131:8081"  # API
      - "192.168.1.132:53:53/udp"
      - "192.168.1.132:53:53/tcp"
    environment:
      - PDNS_gmysql_host=db
      - PDNS_gmysql_port=3306
      - PDNS_gmysql_user=pdns_user
      - PDNS_gmysql_dbname=pdns_db
      - PDNS_gmysql_password=pdns_password
      - PDNS_master=yes
      - PDNS_api=yes
      - PDNS_api_key=mbRmd3QY7k-Jmrg25KHjbagJ4W-e7ojszQKw
      - PDNS_version_string=anonymous
      - PDNS_default_ttl=1500
      - PDNS_allow_notify_from=0.0.0.0
      - PDNS_allow_axfr_ips=127.0.0.1,10.0.0.0/8,172.0.0.0/8,192.0.0.0/8
      - PDNS_launch=gmysql
      - PDNS_local_address=0.0.0.0
      - PDNS_allow_notify_from=192.168.1.0/24
 
      # webserver
      - PDNS_webserver=yes
      - PDNS_webserver_address=0.0.0.0
      - PDNS_webserver-allow-from=127.0.0.1,10.0.0.0/8,172.0.0.0/8,192.0.0.0/8
      - PDNS_webserver_password=secret2
 
  # pdns-recursor:
  #   image: pschiffe/pdns-recursor:4.7-alpine
  #   restart: always
  #   depends_on:
  #     - pdns-authoritative
  #   networks:
  #     - pdns_network
  #   ports:
  #     - "192.168.1.132:3232:80"  # API
  #     - "192.168.1.132:53:53/udp"
  #     - "192.168.1.132:53:53/tcp"
  #   environment:
  #     - PDNS_forward_zones_recurse=.=8.8.8.8;9.9.9.9
  #     - PDNS_forward_zones=docker-station.loc=pdns-authoritative
  #     - PDNS_local_address=0.0.0.0
  #     - PDNS_allow_from=0.0.0.0/0
  #     - PDNS_local-address=0.0.0.0
  #     - PDNS_local-port=53
  #     - PDNS_setuid=recursor
  #     - PDNS_setgid=recursor
  #     - PDNS_api-key=mbRmd3QY7k-Jmrg25KHjbagJ4W-e7ojszQKw  # Ключ синхронизирован с authoritative
 
  #     # webserver
  #     - PDNS_webserver=yes
  #     - PDNS_webserver_address=0.0.0.0
  #     #- PDNS_webserver-allow-from=127.0.0.1,10.0.0.0/8,172.0.0.0/8,192.0.0.0/8
  #     - PDNS_webserver_password=secret2

  powerdns-admin:
    image: powerdnsadmin/pda-legacy:latest
    ports:
      - "192.168.1.132:8787:80"
    depends_on:
      - db
      - pdns-authoritative
    logging:
      driver: json-file
      options:
        max-size: 50m
    networks:
      - pdns_network
    environment:
      - SQLALCHEMY_DATABASE_URI=mysql://pdns_user:pdns_password@db/pdns_db
      - PDNS_API_URL=http://pdns-authoritative:8081
      - PDNS_API_KEY=mbRmd3QY7k-Jmrg25KHjbagJ4W-e7ojszQKw # Ключ синхронизирован с authoritative
      - PDNS_VERSION=4.7

networks:
  pdns_network:
    name: pdns_network
    driver: bridge
    attachable: true
 

volumes:
  pdns-data: {}

$ docker exec -it pdns-pdns-recursor-1 nslookup docker-station.loc pdns-authoritative
$ docker exec -it pdns-pdns-recursor-1 rec_control get-all | grep forward
$ docker exec -it pdns-pdns-recursor-1 rec_control wipe-cache '*'
$ curl -H "X-API-Key: mbRmd3QY7k-Jmrg25KHjbagJ4W-e7ojszQKw" http://192.168.1.132:3131/api/v1/servers/localhost/zones/docker-station.loc.
$ curl -H "X-API-Key: mbRmd3QY7k-Jmrg25KHjbagJ4W-e7ojszQKw" http://192.168.1.132:3131/api/v1/servers/localhost/zones
$ dig @192.168.1.132 lampa.loc +short

Mysql

CREATE TABLE domainmetadata (
 id              INT AUTO_INCREMENT,
 domain_id       INT NOT NULL,
 kind            VARCHAR(16),
 content        TEXT,
 PRIMARY KEY(id)
);
 
CREATE TABLE cryptokeys (
 id             INT AUTO_INCREMENT,
 domain_id      INT NOT NULL,
 flags          INT NOT NULL,
 active         BOOL,
 content        TEXT,
 PRIMARY KEY(id)
);
 
ALTER TABLE records ADD ordername      VARCHAR(255);
ALTER TABLE records ADD auth BOOL;
CREATE INDEX orderindex ON records(ordername);
 
CREATE TABLE tsigkeys (
 id             INT AUTO_INCREMENT,
 NAME           VARCHAR(255),
 ALGORITHM      VARCHAR(255),
 secret         VARCHAR(255),
 PRIMARY KEY(id)
);
 
CREATE UNIQUE INDEX namealgoindex ON tsigkeys(NAME, ALGORITHM);
 
ALTER TABLE records CHANGE COLUMN TYPE TYPE VARCHAR(10);

Конфигурация

nano /etc/powerdns/pdns.conf

# Autogenerated configuration file template
#################################
# allow-axfr-ips    If enabled, restrict zonetransfers to originate from these
#                   IP addresses
#
allow-axfr-ips=127.0.0.1 192.168.1.0/0

#################################
# allow-recursion  List of netmasks that are allowed to recurse
#
allow-recursion=192.168.1.0/0

#################################
# allow-recursion-override   Local data even about hosts that don't exist will
#                            override the internet. (on/off)
#
# allow-recursion-override=

#################################
# cache-ttl	Seconds to store packets in the PacketCache
#
# cache-ttl=20

#################################
# chroot	If set, chroot to this directory for more security
#
# chroot=/var/spool/powerdns

#################################
# config-dir	Location of configuration directory (pdns.conf)
#
config-dir=/etc/powerdns

#################################
# config-name	Name of this virtual configuration - will rename the binary image
#
# config-name=

#################################
# control-console	Debugging switch - don't use
#
# control-console=no

#################################
# daemon	Operate as a daemon
#
daemon=yes

#################################
# default-soa-name	name to insert in the SOA record if none set in the backend
#
# default-soa-name=a.misconfigured.powerdns.server

#################################
# disable-axfr	Disable zonetransfers but do allow TCP queries
#
disable-axfr=yes

#################################
# disable-tcp	Do not listen to TCP queries
#
# disable-tcp=no

#################################
# distributor-threads	Default number of Distributor (backend) threads to start
#
# distributor-threads=3

#################################
# fancy-records	Process URL and MBOXFW records
#
# fancy-records=no

#################################
# guardian	Run within a guardian process
#
guardian=yes

#################################
# launch	Which backends to launch and order to query them in
#
#launch=gmysql,bind


#################################
# load-modules	Load this module - supply absolute or relative path
#
# load-modules=

#################################
# local-address	Local IP address to which we bind
#
local-address=127.0.0.1 192.168.1.113

#################################
# local-ipv6	Local IP address to which we bind
#
# local-ipv6=

#################################
# local-port	The port on which we listen
#
local-port=53

#################################
# log-dns-details	If PDNS should log failed update requests
#
log-dns-details=/var/log/pdns/pdns-details.log

#################################
# log-failed-updates	If PDNS should log failed update requests
#
log-failed-updates=/var/log/pdns/pdns-fail.log

#################################
# logfile	Logfile to use (Windows only)
#
#logfile=/var/log/pdns/pdns.log

#################################
# logging-facility	Log under a specific facility
#
# logging-facility=

#################################
# loglevel	Amount of logging. Higher is more. Do not set below 3
#
loglevel=9

#################################
# master	Act as a master
#
# master=no

#################################
# max-queue-length	Maximum queuelength before considering situation lost
#
# max-queue-length=5000

#################################
# max-tcp-connections	Maximum number of TCP connections
#
# max-tcp-connections=10

#################################
# module-dir	Default directory for modules
#
module-dir=/usr/lib/powerdns

#################################
# negquery-cache-ttl	Seconds to store packets in the PacketCache
#
# negquery-cache-ttl=60

#################################
# out-of-zone-additional-processing	Do out of zone additional processing
#
# out-of-zone-additional-processing=no

#################################
# query-cache-ttl	Seconds to store packets in the PacketCache
#
# query-cache-ttl=20

#################################
# query-logging	Hint backends that queries should be logged
#
query-logging=no

#################################
# queue-limit	Maximum number of milliseconds to queue a query
#
# queue-limit=1500

#################################
# query-local-address   The IP address to use as a source address for sending
#                       queries.
# query-local-address=

#################################
# receiver-threads	Number of receiver threads to launch
#
# receiver-threads=1

#################################
# recursive-cache-ttl	Seconds to store packets in the PacketCache
#
# recursive-cache-ttl=10

#################################
# recursor	If recursion is desired, IP address of a recursing nameserver
#
# recursor=
recursor=127.0.0.1:54

#################################
# setgid	If set, change group id to this gid for more security
#
setgid=pdns

#################################
# setuid	If set, change user id to this uid for more security
#
setuid=pdns

#################################
# skip-cname	Do not perform CNAME indirection for each query
#
# skip-cname=no

#################################
# slave	Act as a slave
#
# slave=no

#################################
# slave-cycle-interval	Reschedule failed SOA serial checks once every .. seconds
#
# slave-cycle-interval=60

#################################
# smtpredirector	Our smtpredir MX host
#
# smtpredirector=a.misconfigured.powerdns.smtp.server

#################################
# soa-minimum-ttl	Default SOA mininum ttl
#
# soa-minimum-ttl=3600

#################################
# soa-refresh-default  Default SOA refresh
#
# soa-refresh-default=10800

#################################
# soa-retry-default    Default SOA retry
#
# soa-retry-default=3600

#################################
# soa-expire-default   Default SOA expire
#
# soa-expire-default=604800

#################################
# soa-serial-offset	Make sure that no SOA serial is less than this number
#
# soa-serial-offset=0

#################################
# socket-dir	Where the controlsocket will live
#
socket-dir=/var/run

#################################
# strict-rfc-axfrs	Perform strictly rfc compliant axfrs (very slow)
#
# strict-rfc-axfrs=no

#################################
# urlredirector	Where we send hosts to that need to be url redirected
#
# urlredirector=127.0.0.1

#################################
# use-logfile	Use a log file (Windows only)
#
#use-logfile=yes

#################################
# webserver	Start a webserver for monitoring
#
# webserver=no

#################################
# webserver-address	IP Address of webserver to listen on
#
# webserver-address=127.0.0.1

#################################
# webserver-password	Password required for accessing the webserver
#
# webserver-password=

#################################
# webserver-port	Port of webserver to listen on
#
# webserver-port=8081

#################################
# webserver-print-arguments	If the webserver should print arguments
#
# webserver-print-arguments=no

#################################
# wildcard-url	Process URL and MBOXFW records
#
# wildcard-url=no

#################################
# wildcards	Honor wildcards in the database
#
# wildcards=

#################################
# version-string   What should PowerDNS return for version
#                  allowed methods are anonymous / powerdns / full / custom
version-string=powerdns

include-dir=/etc/powerdns/pdns.d

nano /etc/powerdns/pdns.d/pdns.simplebind.conf

launch=gmysql,bind
bind-config=/etc/powerdns/bindbackend.conf

nano /etc/powerdns/pdns.d/pdns.local.gmysql.conf

# MySQL Configuration
#
# Launch gmysql backend
#launch=gmysql

# gmysql parameters
gmysql-host=localhost
gmysql-port=3306
gmysql-user=pdns
gmysql-dbname=pdns
gmysql-password=pdns_password
gmysql-socket=/var/run/mysqld/mysqld.sock

# DNSSEC is disabled by default to not break updates
# If you want to do DNSSEC, make sure that your database
# schema is DNSSEC-ready and set the option to yes here.
gmysql-dnssec=no

Настройка

http://doc.powerdns.com/

MySQL v5.x

DROP TABLE IF EXISTS domains;
CREATE TABLE domains (
 id              INT AUTO_INCREMENT,
 NAME            VARCHAR(255) NOT NULL,
 MASTER          VARCHAR(128) DEFAULT NULL,
 last_check      INT DEFAULT NULL,
 TYPE            VARCHAR(6) NOT NULL,
 notified_serial INT DEFAULT NULL, 
 account         VARCHAR(40) DEFAULT NULL,
 PRIMARY KEY (id)
) ENGINE=INNODB;

CREATE UNIQUE INDEX name_index ON domains(NAME);

DROP TABLE IF EXISTS records;
CREATE TABLE records (
  id              INT AUTO_INCREMENT,
  domain_id       INT DEFAULT NULL,
  NAME            VARCHAR(255) DEFAULT NULL,
  TYPE            VARCHAR(10) DEFAULT NULL,
  content         VARCHAR(64000) DEFAULT NULL,
  ttl             INT DEFAULT NULL,
  prio            INT DEFAULT NULL,
  change_date     INT DEFAULT NULL,
  PRIMARY KEY(id)
) ENGINE=INNODB;

CREATE INDEX rec_name_index ON records(NAME);
CREATE INDEX nametype_index ON records(NAME,TYPE);
CREATE INDEX domain_id ON records(domain_id);

DROP TABLE IF EXISTS supermasters;
CREATE TABLE supermasters (
  ip         VARCHAR(25) NOT NULL, 
  nameserver VARCHAR(255) NOT NULL, 
  account    VARCHAR(40) DEFAULT NULL
) ENGINE=INNODB;

CREATE TABLE domainmetadata (
 id         INT AUTO_INCREMENT,
 domain_id  INT NOT NULL,
 kind       VARCHAR(16),
 content    TEXT,
 PRIMARY KEY(id)
);

CREATE INDEX domainmetaidindex ON domainmetadata(domain_id);               


CREATE TABLE cryptokeys (
 id         INT AUTO_INCREMENT,
 domain_id  INT NOT NULL,
 flags      INT NOT NULL,
 active     BOOL,
 content    TEXT,
 PRIMARY KEY(id)
);       

CREATE INDEX domainidindex ON cryptokeys(domain_id);           

ALTER TABLE records ADD ordername      VARCHAR(255) BINARY;
ALTER TABLE records ADD auth BOOL;
CREATE INDEX recordorder ON records (domain_id, ordername);

CREATE TABLE tsigkeys (
 id         INT AUTO_INCREMENT,
 NAME       VARCHAR(255), 
 ALGORITHM  VARCHAR(50),
 secret     VARCHAR(255),
 PRIMARY KEY(id)
);

GRANT SELECT ON supermasters TO pdns;
GRANT ALL ON domains TO pdns;
GRANT ALL ON records TO pdns;
GRANT ALL ON powerdns.* TO 'pdns'@'localhost' IDENTIFIED BY 'pdns';
GRANT ALL ON powerdns.* TO 'pdns'@'localhost.localdomain' IDENTIFIED BY 'pdns';

pdns.conf

nano /etc/powerdns/pdns.conf

# Autogenerated configuration file template
#################################
# allow-axfr-ips    If enabled, restrict zonetransfers to originate from these
#                   IP addresses
#
allow-axfr-ips=127.0.0.1 192.168.1.0/0

#################################
# allow-recursion       List of netmasks that are allowed to recurse
#
allow-recursion=192.168.1.0/0

#################################
# allow-recursion-override   Local data even about hosts that don't exist will
#                            override the internet. (on/off)
#
# allow-recursion-override=

#################################
# cache-ttl     Seconds to store packets in the PacketCache
#
# cache-ttl=20

#################################
# chroot        If set, chroot to this directory for more security
#
# chroot=/var/spool/powerdns

#################################
# config-dir    Location of configuration directory (pdns.conf)
#
config-dir=/etc/powerdns

#################################
# config-name   Name of this virtual configuration - will rename the binary image
#
# config-name=

#################################
# control-console       Debugging switch - don't use
#
# control-console=no

#################################
# daemon        Operate as a daemon
#
daemon=yes

#################################
# default-soa-name      name to insert in the SOA record if none set in the backend
#
# default-soa-name=a.misconfigured.powerdns.server

#################################
# disable-axfr  Disable zonetransfers but do allow TCP queries
#
disable-axfr=yes

#################################
# disable-tcp   Do not listen to TCP queries
#
# disable-tcp=no

#################################
# distributor-threads   Default number of Distributor (backend) threads to start
#
# distributor-threads=3

#################################
# fancy-records Process URL and MBOXFW records
#
# fancy-records=no

#################################
# guardian      Run within a guardian process
#
guardian=yes

#################################
# launch        Which backends to launch and order to query them in
#
launch=gmysql
gmysql-host=127.0.0.1
gmysql-port=3306
gmysql-user=pdns
gmysql-dbname=powerdns
gmysql-password=pdns_password

#################################
# lazy-recursion        Only recurse if question cannot be answered locally
#
lazy-recursion=yes

#################################
# load-modules  Load this module - supply absolute or relative path
#
# load-modules=

#################################
# local-address Local IP address to which we bind
#
local-address=127.0.0.1 192.168.1.124

#################################
# local-ipv6    Local IP address to which we bind
#
# local-ipv6=

#################################
# local-port    The port on which we listen
#
local-port=53

#################################
# log-dns-details       If PDNS should log failed update requests
#
log-dns-details=/var/log/pdns/pdns-details.log

#################################
# log-failed-updates    If PDNS should log failed update requests
#
log-failed-updates=/var/log/pdns/pdns-fail.log

#################################
# logfile       Logfile to use
#
logfile=/var/log/pdns/pdns.log

#################################
# logging-facility      Log under a specific facility
#
# logging-facility=

#################################
# loglevel      Amount of logging. Higher is more. Do not set below 3
#
loglevel=9

#################################
# master        Act as a master
#
# master=no

#################################
# max-queue-length      Maximum queuelength before considering situation lost
#
# max-queue-length=5000

#################################
# max-tcp-connections   Maximum number of TCP connections
#
# max-tcp-connections=10

#################################
# module-dir    Default directory for modules
#
module-dir=/usr/lib/powerdns

#################################
# negquery-cache-ttl    Seconds to store packets in the PacketCache
#
# negquery-cache-ttl=60

#################################
# out-of-zone-additional-processing     Do out of zone additional processing
#
# out-of-zone-additional-processing=no

#################################
# query-cache-ttl       Seconds to store packets in the PacketCache
#
# query-cache-ttl=20

#################################
# query-logging Hint backends that queries should be logged
#
query-logging=no

#################################
# queue-limit   Maximum number of milliseconds to queue a query
#
# queue-limit=1500

#################################
# query-local-address   The IP address to use as a source address for sending
#                       queries.
# query-local-address=

#################################
# receiver-threads      Number of receiver threads to launch
#
# receiver-threads=1

#################################
# recursive-cache-ttl   Seconds to store packets in the PacketCache
#
# recursive-cache-ttl=10

#################################
# recursor      If recursion is desired, IP address of a recursing nameserver
#
recursor=127.0.0.1:54

#################################
# setgid        If set, change group id to this gid for more security
#
setgid=pdns

#################################
# setuid        If set, change user id to this uid for more security
#
setuid=pdns

#################################
# skip-cname    Do not perform CNAME indirection for each query
#
# skip-cname=no

#################################
# slave Act as a slave
#
# slave=no

#################################
# slave-cycle-interval  Reschedule failed SOA serial checks once every .. seconds
#
# slave-cycle-interval=60

#################################
# smtpredirector        Our smtpredir MX host
#
# smtpredirector=a.misconfigured.powerdns.smtp.server

#################################
# soa-minimum-ttl       Default SOA mininum ttl
#
# soa-minimum-ttl=3600

#################################
# soa-refresh-default  Default SOA refresh
#
# soa-refresh-default=10800

#################################
# soa-retry-default    Default SOA retry
#
# soa-retry-default=3600

#################################
# soa-expire-default   Default SOA expire
#
# soa-expire-default=604800

#################################
# soa-serial-offset     Make sure that no SOA serial is less than this number
#
# soa-serial-offset=0

#################################
# socket-dir    Where the controlsocket will live
#
socket-dir=/var/run

#################################
# strict-rfc-axfrs      Perform strictly rfc compliant axfrs (very slow)
#
# strict-rfc-axfrs=no

#################################
# urlredirector Where we send hosts to that need to be url redirected
#
# urlredirector=127.0.0.1

#################################
# use-logfile   Use a log file
#
use-logfile=yes

#################################
# webserver     Start a webserver for monitoring
#
# webserver=no

#################################
# webserver-address     IP Address of webserver to listen on
#
# webserver-address=127.0.0.1

#################################
# webserver-password    Password required for accessing the webserver
#
# webserver-password=

#################################
# webserver-port        Port of webserver to listen on
#
# webserver-port=8081

#################################
# webserver-print-arguments     If the webserver should print arguments
#
# webserver-print-arguments=no

#################################
# wildcard-url  Process URL and MBOXFW records
#
# wildcard-url=no

#################################
# wildcards     Honor wildcards in the database
#
# wildcards=

#################################
# version-string   What should PowerDNS return for version
#                  allowed methods are anonymous / powerdns / full / custom
version-string=powerdns

include=/etc/powerdns/pdns.d

recursor.conf

nano /etc/powerdns/recursor.conf

# Autogenerated configuration file template
#################################
# aaaa-additional-processing    turn on to do AAAA additional processing (slow)
#
# aaaa-additional-processing=off

#################################
# allow-from    If set, only allow these comma separated netmasks to recurse
#
# allow-from=127.0.0.0/8, 10.0.0.0/8, 192.168.0.0/16, 172.16.0.0/12, ::1/128, fe80::/10
allow-from=127.0.0.0/8

#################################
# allow-from-file       If set, load allowed netmasks from this file
#
# allow-from-file=

#################################
# auth-can-lower-ttl    If we follow RFC 2181 to the letter, an authoritative server can lower the TTL of NS records
#
# auth-can-lower-ttl=off

#################################
# auth-zones    Zones for which we have authoritative data, comma separated domain=file pairs
#
# auth-zones=

#################################
# chroot        switch to chroot jail
#
# chroot=

#################################
# client-tcp-timeout    Timeout in seconds when talking to TCP clients
#
# client-tcp-timeout=2

#################################
# config-dir    Location of configuration directory (recursor.conf)
#
# config-dir=/etc/powerdns/

#################################
# daemon        Operate as a daemon
#
# daemon=yes

#################################
# delegation-only       Which domains we only accept delegations from
#
# delegation-only=com,net

#################################
# dont-query    If set, do not query these netmasks for DNS data
#
# dont-query=127.0.0.0/8, 10.0.0.0/8, 192.168.0.0/16, 172.16.0.0/12, ::1/128, fe80::/10
#dont-query=

#################################
# entropy-source        If set, read entropy from this file
#
# entropy-source=/dev/urandom

#################################
# export-etc-hosts      If we should serve up contents from /etc/hosts
#
# export-etc-hosts=off

#################################
# fork  If set, fork the daemon for possible double performance
#
# fork=no

#################################
# forward-zones Zones for which we forward queries, comma separated domain=ip pairs
#
# forward-zones=

#################################
# forward-zones-file    File with domain=ip pairs for forwarding
#
# forward-zones-file=

#################################
# hint-file     If set, load root hints from this file
#
#hint-file=/etc/powerdns/root.zone

#################################
# ignore-rd-bit Assume each packet requires recursion, for compatability
#
# ignore-rd-bit=off

#################################
# local-address IP addresses to listen on, separated by spaces or commas. Also accepts ports.
#
local-address=127.0.0.1

#################################
# local-port    port to listen on
#
local-port=54

#################################
# log-common-errors     If we should log rather common errors
#
# log-common-errors=yes

#################################
# logging-facility      Facility to log messages as. 0 corresponds to local0
#
# logging-facility=

#################################
# max-cache-entries     If set, maximum number of entries in the main cache
#
# max-cache-entries=0

#################################
# max-negative-ttl      maximum number of seconds to keep a negative cached entry in memory
#
# max-negative-ttl=3600

#################################
# max-tcp-clients       Maximum number of simultaneous TCP clients
#
#max-tcp-clients=128

#################################
# max-tcp-per-client    If set, maximum number of TCP sessions per client (IP address)
#
# max-tcp-per-client=0

#################################
# no-shuffle    Don't change
#
# no-shuffle=off

#################################
# query-local-address   Source IP address for sending queries
#
# query-local-address=0.0.0.0

#################################
# query-local-address6  Source IPv6 address for sending queries
#
# query-local-address6=

#################################
# quiet Suppress logging of questions and answers
#
#quiet=yes

#################################
# remotes-ringbuffer-entries    maximum number of packets to store statistics for
#
# remotes-ringbuffer-entries=0

#################################
# serve-rfc1918 If we should be authoritative for RFC 1918 private IP space
#
# serve-rfc1918=

#################################
# server-id     Returned when queried for 'id.server' TXT, defaults to hostname
#
# server-id=

#################################
# setgid        If set, change group id to this gid for more security
#
setgid=pdns

#################################
# setuid        If set, change user id to this uid for more security
#
setuid=pdns

#################################
# single-socket If set, only use a single socket for outgoing queries
#
# single-socket=off

#################################
# soa-minimum-ttl       Don't change
#
# soa-minimum-ttl=0

#################################
# soa-serial-offset     Don't change
#
# soa-serial-offset=0

#################################
# socket-dir    Where the controlsocket will live
# HINT: If you change this from the default /var/run then rec_control
#       will still search in /var/run for the socket file. Keep in mind
#       to run it as 'rec_control --socket-dir=/your/socket/directory' then.
#
socket-dir=/var/run/

#################################
# spoof-nearmiss-max    If non-zero, assume spoofing after this many near misses
#
# spoof-nearmiss-max=20

#################################
# stack-size    stack size per mthread
#
# stack-size=200000

#################################
# trace if we should output heaps of logging
#
# trace=off

#################################
# version-string        string reported on version.pdns or version.bind
#
#version-string=PowerDNS Recursor 3.1.5 $Id: pdns_recursor.cc 1170 2008-03-22 20:43:44Z ahu $

Web intarface

powerdns-webinterface (http://code.google.com/p/powerdns-webinterface/source/checkout)
PDNS Admin (http://freshmeat.net/projects/pdns-admin/)
PowerAdmin (http://www.poweradmin.org/)
PowerDNS Administration (http://sourceforge.net/projects/powerdnsadmin/)
TUPA (http://www.tupa-dns.org/)
WebDNS (http://freshmeat.net/projects/webdns/)
ZoneAdmin (http://freshmeat.net/projects/zoneadmin/)
PowerDNS GUI (http://code.google.com/p/pdns-gui/)

Ссылки

ProFTPD

Anonymous (anonymous@undisclosed.example.com) — 2013-01-06T18:15:04+00:00

ProFTPD

http://www.adm-blog.ru/view/ustanovka_i_nastrojka_proftpd_na_debian.html

PS

Anonymous (anonymous@undisclosed.example.com) — 2015-09-15T23:58:54+00:00

shell, utils

PS

Примеры

ps axfu - формирует дерево процессов

PulseAudio

Anonymous (anonymous@undisclosed.example.com) — 2012-11-05T15:47:39+00:00

PulseAudio

http://ru.wikipedia.org/wiki/PulseAudio

Pure-FTPd

Anonymous (anonymous@undisclosed.example.com) — 2016-10-02T21:53:46+00:00

networks, networking, network, pureftpd

Pure-FTPd

Homepage: Pure-FTPd

Функциональные возможности:

Встроенная поддержка UTF-8.
Возможна работа по FXP протоколу
Поставляется с программой мониторинга pure-ftpwho, которая в реальном времени показывает кто скачивает/загружает файлы и с какой скоростью.
Возможен запуск pure-ftpwho как CGI приложения с возможностью генерации выходных данных в виде HTML или XML.
Сообщения сервера на данный момент переведены на 21 язык (в том числе и на русский).
Создание виртуальных пользователей.
Задание индивидуальных квот, не связанных с системными, для пользователей (максимальное количество файлов, максимальный размер каталога, максимальная скорость скачивания/закачивания).
После загрузки файла на сервер возможен автоматический запуск внешних скриптов или программ (например, для проверки на вирусы, расчет MD5 хэшей файлов, отправка уведомлений о загрузке).
Запрет доступа к dot-файлам (имя которых начинается с точки, например, .ssh directories, .bash_history files, .rhosts).

Для изменения настроек сервера нужно создать файл с названием параметра, например чтобы задать порты для пассивного режима: Правила iptables для FTP

Создание пользователей

$ groupadd ftp
$ useradd -s /bin/false -d /bin/null -c "pureftpd user" -g ftp ftp

Установка SSL сертификата для TLS

$ mkdir -p /etc/ssl/private/
$ openssl req -x509 -nodes -newkey rsa:1024 -keyout /etc/ssl/private/pure-ftpd.pem -out /etc/ssl/private/pure-ftpd.pem
$ chmod 600 /etc/ssl/private/*.pem

Настройка

Устанавливаем пакет «pure-ftpd-mysql». Настройка происходит с помощью индивидуальных файлов в /etc/pure-ftpd/conf. Название каждого файла отражает параметр, настройки которого он представляет. В содержимом файла представлены необходимые значения.

echo yes > /etc/pure-ftpd/conf/ChrootEveryone
echo yes > /etc/pure-ftpd/conf/CreateHomeDir
echo 50 > /etc/pure-ftpd/conf/MaxClientsNumber
echo 5  > /etc/pure-ftpd/conf/MaxClientsPerIP
echo 95 > /etc/pure-ftpd/conf/MaxDiskUsage
echo 1 > /etc/pure-ftpd/conf/TLS
echo 117 007 > /etc/pure-ftpd/conf/Umask
echo no > /etc/pure-ftpd/conf/UnixAuthentication
echo no > /etc/pure-ftpd/conf/PAMAuthentication
echo clf:/var/log/pure-ftpd/transfer.log > /etc/pure-ftpd/conf/AltLog
echo 1000 > /etc/pure-ftpd/conf/MinUID
echo /etc/pure-ftpd/db/mysql.conf > /etc/pure-ftpd/conf/MySQLConfigFile
echo yes > /etc/pure-ftpd/conf/NoAnonymous
echo /etc/pure-ftpd/pureftpd.pdb > /etc/pure-ftpd/conf/PureDB
echo no > /etc/pure-ftpd/conf/DontResolve

Включить логирование

$ echo 'ftp' > /etc/pure-ftpd/conf/SyslogFacility
$ echo 'yes' > /etc/pure-ftpd/conf/VerboseLog

Подключение MySQL

Самым удобным способом хранения и конфигурирования FTP является БД MySql. Для подключения хранилища достаточно настроить MySQLConfigFile.

echo /etc/pure-ftpd/db/mysql.conf > /etc/pure-ftpd/conf/MySQLConfigFile
Дамп MySql для PureFTPd
PureFTPd mysql.conf - Примеры

PureFTP Complete Upload Script

После получения полностью залитого файла, скрипт переименует его в ended.<uploaded_filename>.

Конфигурция

Конфигурация осуществляется через базовый конфигурационный файл /etc/default/pure-ftpd-common

Включает испльзование скрипта

$ sudo echo "yes" > /etc/pure-ftpd/conf/CallUploadScript

Файл скрипта

#!/bin/sh
touch "$1.complete"

или

#!/bin/bash
fullpath=$1
filename=$(basename "$1")
dirname=${fullpath%/*}
mv "$fullpath" "$dirname/ended.$filename"
chmod 664 "$dirname/ended.$filename"
chown :www-data "$dirname/ended.$filename"

Настройка pure-ftpd-common

nano /etc/default/pure-ftpd-common

STANDALONE_OR_INETD=standalone
VIRTUALCHROOT=false
UPLOADUID=
UPLOADGID=
UPLOADSCRIPT=/etc/pure-ftpd/uploadscript.sh

UPLOADUID = 1002
UPLOADGID = 1002
Относятся только к UPLOADSCRIPT.
Пример: /usr/sbin/pure-uploadscript -r /etc/pure-ftpd/uploadscript.sh -B -u 1002 -g 1002

Проверка

$ ps aux | grep pure-uploadscript
ftpuser 18671 0.0 0.0 11912 672 ? Ss 19:40 0:00 /usr/sbin/pure-uploadscript -r <upload script path here> -B -u 1021 -g 1022

Qmail

Anonymous (anonymous@undisclosed.example.com) — 2017-12-26T14:44:20+00:00

Qmail

Агент пересылки почты Интернет (Internet Mail Transfer Agent, MTA) для UNIX-like операционных систем. Это замена для Sendmail, который входит в состав большинства ОС UNIX. qmail использует SMTP (Simple Mail Transfer Protocol) для обмена сообщениями с MTA на других системах.

http://ru.qmail.org/docs/index.html

Redis

Anonymous (anonymous@undisclosed.example.com) — 2015-09-13T18:24:51+00:00

redis, shell

Redis

Redis — документо-ориентированное сетевое журналируемое хранилище данных типа «ключ-значение» с открытым исходным кодом.

Rename

Anonymous (anonymous@undisclosed.example.com) — 2025-04-21T23:31:43+00:00

Rename

$ apt install rename

Использование

$ rename 's/([a-z\d.]+?)\.added/$1/g' *
$ rename 's/\b(\w)/\U$1/g' *
$ rename "s/ *//g" *
$ rename 's/\s+/_/g' *
$ rename 's/\.bak$//' *.bak

RM - удаление файлов/директорий

Anonymous (anonymous@undisclosed.example.com) — 2019-07-17T22:01:37+00:00

shell, utils

RM - удаление файлов/директорий

Рекурсивное удаление файлов, определенного типа

find . -type f -name '*.DS_Store' -exec rm {} \;

Рекурсивное удаление служебных MAC файлов

rm .DS_Store

Ошибки

Q: bash: /bin/rm: Argument list too long

$ find . -name "*.pdf" -print0 | xargs -0 rm
$ find . -name "*" -print0 | xargs -0 rm
$ find . -maxdepth 1 -name "*.pdf" -print0 | xargs -0 rm
$ find . -name "*.pdf" -delete

route

Anonymous (anonymous@undisclosed.example.com) — 2016-05-21T13:54:16+00:00

networks, networking, network

route

Получить список маршрутов

route -nee

Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface    MSS   Window irtt
0.0.0.0         44.210.43.1    0.0.0.0         UG    0      0        0 eth0     0     0      0
44.210.43.0    0.0.0.0         255.255.255.0   U     0      0        0 eth0     0     0      0

RSYNC удаленная синхронизация

Anonymous (anonymous@undisclosed.example.com) — 2015-09-30T12:34:21+00:00

shell, utils, network, rsync

RSYNC удаленная синхронизация

Программа Rsync ( во FreeBSD есть в портах ), используется для удаленного копирования (резервного копирования ) или синхронизации файлов и каталогов, с минимальными затратами трафика. Может практически целиком заменить cp и scp, умеет кодировать данные, поддерживает сжатие и рекурсию, кроме того, прерванные передачи можно с легкостью перезапустить. На страницах руководства, все описано довольно подробно.

Вот несколько примеров:

Копировать директорию с контентом

# rsync -a /home/colin/ /backup/colin/
# rsync -a /var/ /var_bak/
# rsync -aR --delete-during /home/user/ /backup/      # Используется относительный путь (см. ниже)

То-же что и выше, только по сети и с компрессией. По-умолчанию, Rsync использует для передачи протокол SSH в том числе и с ключами, если таковые имеются. Символ ":" используется как в SCP. Типичный пример удаленного копирования:

# rsync -axSRzv /home/user/ user@server:/backup/user/

Исключить из процесса удаленного копирования, директорию tmp в /home/user/ и сохранить иерархию, удаленная директория будет иметь структуру /backup/home/user/. Данный пример типичен для резервного копирования:

# rsync -azR --exclude /tmp/ /home/user/ user@server:/backup/

Использовать 20022 порт для SSH:

# rsync -az -e 'ssh -p 20022' /home/colin/ user@server:/backup/colin/

Можно использовать демон rsync (с "::"), это гораздо быстрее, но трафик не шифруется. Местонахождение папки папки для резервного копирования (например /backup) можно настроить в файле /etc/rsyncd.conf. Переменная RSYNC_PASSWORD служит для того, что-бы избежать необходимости ввода пароля вручную.

# rsync -axSRz /home/ ruser@hostname::rmodule/backup/
# rsync -axSRz ruser@hostname::rmodule/backup/ /home/    # Копировать обратно

Некоторые важные опции:

a, –archive режим архива; то-же что и -rlptgoD (без -H)
r, –recursive обходить директории (рекурсия)
R, –relative относительные пути
H, –hard-links сохранять жесткие ссылки ( hardlink )
S, –sparse handle sparse files efficiently
x, –one-file-system не пересекать границы файловой системы
exclude=PATTERN исключить файлы заданного образца
delete-during приемник удаляется ПРИ ПЕРЕДАЧЕ
delete-after приемник удаляется ПОСЛЕ ПЕРЕДАЧИ

winrsync

Под Windows, rsync можно использовать через cygwin или отдельным приложением cwrsync. Очень удобно для автоматизации резервного копирования. Установите ОДИН из вариантов и добавьте путь в системные переменные Windows: Control Panel → System → tab Advanced, button Environment Variables. Отредактируйте переменную "Path", добавив полный путь до rsync, например так: C:\Program Files\cwRsync\bin или C:\cygwin\bin. Это позволит использовать rsync и ssh из командной строки Windows.

Авторизация по ключу

Rsync автоматически туннелируется через SSH протокол, а тот использует SSH авторизацию на сервере. Автоматическое резервное копирование используется для минимизации участия пользователя в этом процессе, как раз для этого и нужна авторизация по публичному ключу, что-бы не запрашивать у пользователя ввод пароля. Все команды выполняются в командной оболочке Windows (Start → Run → cmd). Создайте и загрузите ключи, как описано в материале SSH, SCP, "user" и "server" установите соответствующие.

# ssh-keygen -t dsa -N ''                   # Создаем ключи
# rsync user@server:.ssh/authorized_keys2   # Копируем файл ssh/authorized_keys2 на локальную машину
# cat id_dsa.pub >> authorized_keys2        # Или используйте редактор, что-бы добавить ключ
# rsync authorized_keys2 user@server:.ssh/  # Копируем файл обратно на сервер
# del authorized_keys2                      # Удаляем локальную копию

Теперь проверяем (одной строкой):

rsync -rv "/cygdrive/c/Documents and Settings/%USERNAME%/My Documents/" 'user@server:My\ Documents/' Автоматизация резервного копирования

Планировка и выполнение задания резервного копирования, можно вполне возложить на какой-нибудь планировщик или пакетные файлы (Programs → Accessories → System Tools → Scheduled Tasks). Например, можно создать такой файл, заменив "user@server" на свои:

@ECHO OFF
REM rsync the directory My Documents
SETLOCAL
SET CWRSYNCHOME=C:\PROGRAM FILES\CWRSYNC
SET CYGWIN=nontsec
SET CWOLDPATH=%PATH%
REM uncomment the next line when using cygwin
SET PATH=%CWRSYNCHOME%\BIN;%PATH%
echo Press Control-C to abort
rsync -av "/cygdrive/c/Documents and Settings/%USERNAME%/My Documents/" \
'user@server:My\ Documents/'
pause

Rsync - Синхронизация папок (может выполняться через ssh)

Anonymous (anonymous@undisclosed.example.com) — 2023-07-27T11:19:37+00:00

shell, utils, networks, networking, network, rsync, ssh

Rsync - Синхронизация папок (может выполняться через ssh)

Установка
apt-get install rsync

Копирование из удаленного сервера по ssh

# rsync -az -e ssh user2@host.ru:~/httpdocs/ /home/user2/httpdocs

Удаляет файлы в папке копирования

# rsync -rlptgo --delete -e ssh user2@host.ru:"~/httpdocs/" /home/user2/httpdocs

Заливаем на удаленный сервер по ssh

# rsync -az -e ssh /home/user2/httpdocs user2@host.ru:~/httpdocs/

Документация

Ссылки

Скрипты

Rsyslog - сервер регистрации лог файлов

Anonymous (anonymous@undisclosed.example.com) — 2018-04-23T11:25:46+00:00

Rsyslog - сервер регистрации лог файлов

Debian

Проект

Анализатор webgui

http://loganalyzer.adiscon.com/

Ссылки

Привмеры

scp - Копирование файлов по ssh

Anonymous (anonymous@undisclosed.example.com) — 2016-09-01T12:46:23+00:00

scp - Копирование файлов по ssh

Скопировать файлы в текущую папку

# scp -rp remoteuser@host.ru:/path/to/folder/ ./

screen - Менеджер сессий

Anonymous (anonymous@undisclosed.example.com) — 2023-07-25T15:13:49+00:00

system, screen

screen - Менеджер сессий

$ screen -list
$ screen -x [session id]
$ screen -X -S [session id] kill

Ключи/Опции

-a Force all capabilities into each window's termcap.
-A -[r|R] Adapt all windows to the new display width & height.
-c file Read configuration file instead of '.screenrc'.
-d (-r) Detach the elsewhere running screen (and reattach here).
-dmS name Start as daemon: Screen session in detached mode.
-D (-r) Detach and logout remote (and reattach here).
-D -RR Do whatever is needed to get a screen session.
-e xy Change command characters.
-f Flow control on, -fn = off, -fa = auto.
-h lines Set the size of the scrollback history buffer.
-i Interrupt output sooner when flow control is on.
-list or -ls. Do nothing, just list our SockDir.
-L Turn on output logging.
-m ignore $STY variable, do create a new screen session.
-O Choose optimal output rather than exact vt100 emulation.
-p window Preselect the named window if it exists.
-q Quiet startup. Exits with non-zero return code if unsuccessful.
-r Reattach to a detached screen process.
-R Reattach if possible, otherwise start a new session.
-s shell Shell to execute rather than $SHELL.
-S sockname Name this session <pid>.sockname instead of <pid>.<tty>.<host>.
-t title Set title. (window's name).
-T term Use term as $TERM for windows, rather than "screen".
-U Tell screen to use UTF-8 encoding.
-v Print "Screen version 4.00.03 (FAU) 23-Oct-06".
-wipe Do nothing, just clean up SockDir.
-x Attach to a not detached screen. (Multi display mode).
-X Execute <cmd> as a screen command in the specified session

Команды

Ctrl-a c — создать новое окно Screen
Ctrl-a n — переместиться в следующее окно
Ctrl-a p — переместиться в предыдущее окно
Ctrl-a d — отключиться от текущей сессии screen, при этом все команды продолжат свое выполнение
Ctrl-a K — «убить» выбранное окно (нужно если программа в окне зависла и не хочет умирать самостоятельно)
Ctrl-a " — вывести список всех окон
Ctrl-a A — изменить название текущего окна (удобно, чтобы различать окна между собой, например поставить названия «localhost», «ssh 1.2.3.4» и т.п.

Sed

Anonymous (anonymous@undisclosed.example.com) — 2016-04-26T13:52:20+00:00

shell, utils, bash

Sed

Параметры

-i - Не обращать внимание на регистр
-e - Использовать регулярные выражения

Документация

Замена в файле

sed -e 's/oldstuff/newstuff/g' inputFileName > outputFileName

Нельзя указывать одинаковый исходящий и принимающий файл. Врезультате его длина будет = 0

Замена без временного файла

sed -i 's/abc/def/' file
sed -e 's/abc/def/' file

Замена в потоке

echo 123123| sed 's/1/5/g'
echo 123123| sed 's%1%5%g'
echo 123123| sed 's$1$5$g'
echo 123123| sed 's|1|5|g'

Примеры использования

$ sed "s/mytext/$var/"

$ sed 's/mytext/'$var'/'

$ sed 's/mytext/'$var\/

$ sed 's/mytext/'$var/

$ sed s/mytext/$var/

Как рекурсивно измененить apple на orange в файлах текущей директории?

$ find ./ -type f -exec sed -i -e 's/apple/orange/g' {} \;
# ./ - текущая директория, sed -i -e - не учитывать регистр и использовать regexp при поиске

Как убрать переносы строк?

  $ sed ':a; /$/N; s/\n//; ta'
  # 1) метка 2) добавляем к текущей строке сдедующую (через \n) 3) удаляем разделитель 3) если команда s/// что-то сделала - переходим на метку.

Ссылки

Sendmail - Отправка и доставка почты

Anonymous (anonymous@undisclosed.example.com) — 2016-06-02T08:59:47+00:00

email, sendmail

Sendmail - Отправка и доставка почты

Настройка

postfix MTA (агент доставки почты)
Установка почтового сервера Postfix(MTA) + Dovecot(POP3) + MYSQL и виртуальных доменов - IMAP/POP3-сервер
Exim4 + Dovecot2 + MySql + Roundcube
Exim4 Smtp Server / Установка и настройка - MTA (агент доставки почты)
Qmail - MTA (агент доставки почты)
Настройка почтового релея на базе sendmail

Проверка отправки почты

echo "test" | mail -s root user1
echo "test" | mail -s "SUBJECT" some-mail@gmail.com -f from-mail@gmail.com
smtp-client.pl - Отправка с помощью консольного клиента

Возникаемые ошибки

DATA not send: '451 Error while writing spool file'

Коммандные интерпритаторы

Anonymous (anonymous@undisclosed.example.com) — 2012-09-06T13:06:16+00:00

Коммандные интерпритаторы

Примеры кода

shopt

Anonymous (anonymous@undisclosed.example.com) — 2013-06-13T00:50:32+00:00

shopt

Опции могут быть включены командой 'shopt' <tt>-s</tt> имя_опции. И выключены командой 'shopt' <tt>-u</tt> имя_опции. По-умолчанию опции выключены, если не указано обратное.

shopt — встроенная команда оболочки, управляет опциями. Изменяет значение внутренних конфигурационных параметров оболочки.

Синтаксис

shopt -pqsu -o имя_опции…

Описание

Некоторые опции могут устанавливаться встроенной командой set.

-o - Restrict the values of <OPTNAME…> to only those also known by the set builtin
-p - Печатает команду shopt с параметрами, которые выставят оболочку в такое положение, как сейчас.
-q - Тихий режим. Выстваляет код возврата в 0 если опция выставлена. Если опций было задано несколько то вернет 0 (TRUE) если все опции выставлены. Иначе вернет 1 (FALSE).
-s - Выставляет (разрешает) опцию или список опций.
-u - Отключает опцию или список. shopt с ключем -s или -u без имени опции выведет список опций которые только включены или выключены.

Код завершения

Когда идет установка опций - код возврата 0 (TRUE) если смена всех опций прошла успешно. Когда выдается список опций - код возврата 0 (TRUE) если все опции выставлены. Иначе 0 (FALSE)

Список опций оболочки bash

cdable_vars

Если опция установлена, то каждый (отдельный) аргумент команды cd, который не является каталогом, будет рассматриваться как имя переменной. Если путь с именем переменнной обнаружен, он будет выведен на экран, и будет выполнена команда cd. [username@localhost tmp]$ shopt -s cdable_vars [username@localhost tmp]$ cd HOME /home/username [username@localhost ~]$ shopt -u cdable_vars [username@localhost ~]$ cd HOME bash: cd: HOME: No such file or directory

cdspell

Незначительные ошибки в написании каталога команды cd будут исправляться: поменянные местами соседние символы, пропущенные, удвоенные символы. Если исправленный путь обнаружен - он будет выведен на экран, и будет выполнена команда cd. Работает только в интерактивном режиме.

checkhash

Если опция выставлена, то перед тем как выполнять команду - проверяется её наличие в hash-таблице. Если она там не найдена, тогда отрабатывается полноценный поиск по $PATH.

checkjobs

с версии 4.0 Если опция выставлена, то перед тем как выйти из оболочки, проверяет и докладывает о наличии работающих job-ов. См опцию huponexit.

checkwinsize

Если опция выставлена, то после каждой команды оболочка проверяет размер экрана терминала, и обновляет переменные LINES и COLUMNS. По-умолчанию выключена, но в современных дистрибутивах, в интерактивном графическом режиме по профилям выставляется.

cmdhist

Если опция выставлена, bash старается все строки многострочной команды рассматривать как одну для сохранения в истории. Это дает возможность просто редактировать многострочные команды. Смотрте также утилиту rlwrap.

compat**

в зависимости от версии: compat31; compat32; compat40; compat41<br /> Опции работы новой версии bash в режиме совместимости более старшей версии.

dirspell

c версии 4.0<br /> Если опция выставлена - bash будет пытаться исправлять имена каталогов.

dotglob

Если опция выставлена - bash будет включать в список файлов файлы, начинающиеся с точки ( .bashrc ) в результат glob-а.

execfail

Если опция выставлена - неинтерактивная оболочка не прервет свою работу, если вызов exec не сможет выполнить файл, указанный в качестве аргумента. Интерактивной оболочке нет смысла выставлять/убирать эту опцию: она не завершает работу если exec не справляется с запуском аргумента.

expand_aliases

Если опция выставлена - alias-ы будут развернуты (см Подстановки). По-умолчанию для интерактивных опция включена, для не-интерактивных выключена.

extdebug

Используется для debug

extglob

Если опция выставлена - будут использоваться расширенные glob-ы (см Подстановки). По-умолчанию для интерактивных

extquote

???

failglob

Если опция выставлена - при использовании glob-а, в который не попадает ни одного файла, будет выведено сообщение об ошибке. [username@localhost ~]$ mkdir /tmp/foo && cd /tmp/foo

[username@localhost foo]$ shopt -u failglob [username@localhost foo]$ ls * ls: cannot access *: No such file or directory

[username@localhost foo]$ shopt -s failglob [username@localhost foo]$ ls * bash: no match: *

При взведении опции до выполнения команды ls дело не дошло.

forceignore

Если опция выставлена - суффиксы определенные в переменной FIGNORE будут игнорироваться при работе bash completion, даже если они подходят по completion. Эта опция включена по-умолчанию.

globstar

ion, даже ес Если опция выставлена - glob - становится рекурсивным.

gnu_errfmt

Если опция выставлена - ошибки будут выдаваться в стандартном формате GNU.

histappend

Если опция выставлена - история команд будет добавлена в файл $HISTFILE, в противном случае файл будет перезаписан опция по-умолчанию отключена, но в современных дистрибутивах опция взводится в конфиг-файлах инициализации оболочки.

histreedit

Если опция выставлена - то для редактирования команд из истории будет использован readline, чтобы перередактировать неверную команду.

histverify

Если опция выставлена - разрешаетя пресмотреть результат подстановки команды из истории в буфер обмена вместо исполнения.

hostcomlete

Если опция выставлена - bash completion будет также дополнять имена хостов из /etc/hosts. Включено по-умолчанию.

huponexit

Если опция выставлена - при выходе из интерактивной оболочки bash отсылает job-ам сигнал hungup (SIGHUP). Защитить job-ы можно запуская их с honup.

lithost

Если эта опция и cmdhist выставлены - то многострочные команды записываются с символом перевода строки. Иначе используется точка с запятой.

login_shell

Эта опция выставляется если данная оболочка является оболочкой логина. Выставляется автоматически, изменить нельзя.

mailwarn

Если опция выставлена и файл почты просматривался вне bash (bash ведет свой счетчик проверки почты) то bash покажет сообщение "The mail in mailfile has been read".

no_empty_cmd_completion

Если опция выставлена и используется readline, bash не будет пытаться искать программы из PATH в пустой строки ввода по <tab><tab>.

nocaseglob

используется2 Если опция выставлена - bash разворачивая glob-ы, будет регистронезависимым по отношению к объектам файловой системы.

nocasematch

я выставлена Если опция выставлена - bash будет регистронезависимым в вычислениях условий shopt и case.

nullglob

Если опция выставлена - bash разрешает glob-ы в которых нет ни одного файла. При этом есть связь с опцией failglob:<br /> failglob выставлена + nullglob выставлена = bash перехватит "неправильный" glob и не выполнит команду.<br /> failglob не выставлена + nullglob выставлена = команде будет передана строка нулевой длины.<br /> failglob выставлена + nullglob не выставлена = bash перехватит "неправильный" glob и не выполнит команду.<br /> failglob не выставлена + nullglob не выставлена = команде будет передан "неправильный" glob.<br />

progcomp

Если опция выставлена - разрешены программируемые команды дополнений (bash completion). По-умолчанию выставлено.

promptvars

Если опция выставлена - строка приглашения производит подстановку команд, арифметических выражений, убирает кавычки, специальные символы. эта опция включена по-умолчанию.

restricted_shell

Если опция выставляется если оболочка работает в restricted shell -режиме. Выставляется автоматически, нельзя изменить.

shift_verbose

Если опция выставлена - встроенная команда shift будет выдавать сообщение об ошибке "позиционные параметры кончились".

sourcepath

Если опция выставлена - встроенные команды используют переменную PATH для поиска аргументов (в т.ч. exec). В интерактивном режиме выставлено по-умолчанию.

xpg_echo

Если опция выставлена - встроенная команда echo раскрывает backslash esc-последовательности по-умолчанию. (POSIX, SUS, XPG).

Shorewall - Инструмент конфигурирования шлюза/фаервола

Anonymous (anonymous@undisclosed.example.com) — 2016-12-13T23:30:16+00:00

firewall, iptables, utils, shell, networks, networking, network

Shorewall - Инструмент конфигурирования шлюза/фаервола

Shorewall - это инструмент конфигурирования шлюза/фаервола для GNU/Linux. Обычно применяется в качестве скриптовой обертки для iptables, выполненная в виде сервиса.

Зоны

Правила хождения пакетов в Shorewall используют абстракцию зон — все сети, которые вы хотите обрабатывать, надо как-то обозвать. Для начала следует определиться с названиями зон. В моем случае их будет 4: необходимая зона, содержащая сам файрволл, домашняя сетка с DHCP, провайдерская локалка и интернет через PPPoE. Не забудьте скопировать заготовку из вашего пакета! Конфиг получился примерно такой:

# nano /etc/shorewall/zones

# ZONE   TYPE    OPTIONS                 IN                      OUT
#                                       OPTIONS                 OPTIONS 

fw      firewall
bots    ipv4
net     ipv4
mysql   ipv4
mongo   ipv4

Подробнее: http://www.shorewall.net/manpages/shorewall-zones.html

Интерфейсы и хосты

Когда вы определились с тем, какие у вас будут зоны, нужно сказать, как поделить между зонами сетевые интерфейсы (l2) и IP-сети (l3). В файле interfaces надо перечислить все обрабатываемые интерфейсы. Делается это в формате «В этой зоне будет этот интерфейс целиком», поэтому при делении интерфейса на несколько зон вместо зоны надо указать прочерк. Мой простейший вариант:

# nano /etc/shorewall/interfaces

#ZONE   INTERFACE       BROADCAST       OPTIONS
#

net     eth0            detect          tcpflags,logmartians,nosmurfs

Подробнее: http://www.shorewall.net/manpages/shorewall-interfaces.html

Политики

Когда вы разделили окружающий мир на зоны, обязательно надо сказать, кому что можно делать по умолчанию. Называется это дело политиками, лежит в файле policy, необходимо определить политики для всех возможных направлений пробегания трафика. Лучше всего в конец дописать дефолтную политику, а чуть выше — исключения:

# nano /etc/shorewall/policy

# SOURCE         DEST            POLICY          LOG LEVEL       LIMIT:BURST
#

$FW             net             ACCEPT
net             all             DROP            err

# The FOLLOWING POLICY MUST BE LAST
all             all             REJECT          err

Подробнее: http://www.shorewall.net/manpages/shorewall-policy.html

Hosts

# nano /etc/shorewall/hosts

#ZONE   HOST(S)             OPTIONS
#

mysql   eth0:1.210.189.99                                              # db1.host.ru
mysql   eth0:1.210.143.80                                              # ws2.host.ru

mongo   eth0:1.210.189.99                                              # db1.host.ru
mongo   eth0:1.210.143.80                                              # ws2.host.ru

bots    eth0:1.210.181.30                                              # backup.host.ru
bots    eth0:1.210.189.99                                              # db1.host.ru
bots    eth0:1.210.189.100                                             # ws1.host.ru
bots    eth0:1.210.139.154                                             # sphinx.host.ru
bots    eth0:1.210.143.80                                              # ws2.host.ru

Подробнее: http://www.shorewall.net/manpages/shorewall-hosts.html

Правила

# nano /etc/shorewall/rules

#ACTION         SOURCE          DEST            PROTO   DEST    SOURCE          ORIGINAL        RATE            USER/   MARK
#                                                       PORT    PORT(S)         DEST            LIMIT           GROUP

ACCEPT          net             $FW             icmp
ACCEPT          $FW             net             icmp
ACCEPT          net             $FW             tcp     80
#ACCEPT         net             $FW             tcp     8080
SSH/ACCEPT          net             $FW             tcp     22

# ftp for 1c client
ACCEPT          net             $FW             tcp     40322
ACCEPT          net             $FW             tcp     41000:42000

# all servers from hosts
ACCEPT          bots            $FW
ACCEPT          $FW             bots 

# SMTP
DNAT            $FW             $FW:62.210.189.100              tcp     25      -       46.222.222.222

ACCEPT          net             $FW             tcp     9999

Правила содержат действия, макросы их настройки. Все макросы находятся в папке /usr/share/shorewall и обозначаются как macro.[ACTION]. Пример: /usr/share/shorewall/macro.SSH, /usr/share/shorewall/macro.AMQP, /usr/share/shorewall/macro.SMTP

Разобраться с DNAT на localhost

Подробнее: http://www.shorewall.net/manpages/shorewall-rules.html

Port-forwarding

Если надо пробросить порт на внешнюю сеть, необходимо использовать DNAT, вместо ACCEPT. Для работы этого механизма надо обязательно включить в ядре поддержку перенаправления пакетов.

nano /etc/sysctl.conf.

net.ipv4.ip_forward = 1

И затем перегпузить настройки ядра командой:

linux

$ sudo sysctl -p /etc/sysctl.conf

Bsd

$ sudo sysctl /etc/sysctl.conf reload

# nano /etc/shorewall/rules

#ACTION         SOURCE          DEST            PROTO   DEST    SOURCE          ORIGINAL        RATE            USER/   MARK
# 
                                                      PORT    PORT(S)         DEST            LIMIT           GROUP

Firewall

# nano /etc/shorewall/rules

#ACTION         SOURCE          DEST            PROTO   DEST    SOURCE          ORIGINAL        RATE            USER/   MARK
#                                                       PORT    PORT(S)         DEST            LIMIT           GROUP

ACCEPT          net             $FW             icmp
ACCEPT          $FW             net             icmp
ACCEPT          net             $FW             tcp     22

# MySql
ACCEPT            mysql           $FW             tcp     3306

# MongoDB
ACCEPT            mongo           $FW             tcp     27017
 
ACCEPT          bots            $FW
ACCEPT          $FW             bots

При условии что mysql настроен на вешний IP адресс bind-address = 0.0.0.0

Разрешаем подключение по ssh и разрешаем все подключения из /etc/shorewall/hosts

shorewall.conf

Внести изменения в основной конфиг

# nano /etc/shorewall/shorewall.conf

STARTUP_ENABLED=Yes — пусть запускается
VERBOSITY=1 — многословность в консоли
SHOREWALL_COMPILER=perl — чтобы не перепуталось, если что
*_LOG_LEVEL — когда все заработает как надо, поставьте в none, чтобы не засоряло dmesg
LOG_MARTIANS — так же
IP_FORWARDING=On — для маскарадинга очень нужно. Можно, кончно, и в sysctl.conf это делать, но тут уместнее
CLAMPMSS=Yes — лучше включить, если у аплинка MTU меньше, чем у какой-нибудь из машин в домашней сетке.
No здесь может привести к крайне неприятному багу с неработающей википедией на части компов.
ADMINISABSENTMINDED=Yes — не мните себя б-гом, оставьте так

Макросы

ls /usr/share/shorewall/

action.A_Drop        action.SetEvent     macro.A_DropDNSrep  macro.DropUPnP      macro.IPP           macro.MongoDB     macro.Puppet   macro.SNMP        macro.Webcache
action.allowInvalid  actions.std         macro.A_DropUPnP    macro.Edonkey       macro.IPPbrd        macro.MSNP        macro.Razor    macro.SNMPTrap    macro.Webmin
action.A_Reject      action.TCPFlags     macro.AllowICMPs    macro.Finger        macro.IPPserver     macro.MSSQL       macro.Rdate    macro.SPAMD       macro.Whois
action.AutoBL        action.template     macro.Amanda        macro.FTP           macro.IPsec         macro.Munin       macro.RDP      macro.Squid       macro.Xymon
action.AutoBLL       action.Untracked    macro.AMQP          macro.Git           macro.IPsecah       macro.MySQL       macro.Redis    macro.SSH         modules
action.Broadcast     compiler.pl         macro.Auth          macro.GNUnet        macro.IPsecnat      macro.NNTP        macro.Reject   macro.Submission  modules.essential
action.DNSAmp        configfiles         macro.BGP           macro.Gnutella      macro.IRC           macro.NNTPS       macro.Rfc1918  macro.SVN         modules.extensions
action.Drop          configpath          macro.BitTorrent    macro.Goto-Meeting  macro.Jabberd       macro.NTP         macro.RIPbi    macro.Syslog      modules.ipset
action.dropInvalid   coreversion         macro.BitTorrent32  macro.GRE           macro.JabberPlain   macro.NTPbi       macro.RNDC     macro.Telnet      modules.tc
action.DropSmurfs    functions           macro.BLACKLIST     macro.HKP           macro.JabberSecure  macro.NTPbrd      macro.Rsync    macro.Telnets     modules.xtables
action.Established   getparams           macro.Citrix        macro.HTTP          macro.JAP           macro.OpenVPN     macro.SANE     macro.template    prog.footer
action.IfEvent       helpers             macro.CVS           macro.HTTPS         macro.Jetdirect     macro.OSPF        macro.Sieve    macro.Teredo      Shorewall
action.Invalid       lib.base            macro.DAAP          macro.ICPV2         macro.Kerberos      macro.PCA         macro.SIP      macro.TFTP        shorewallrc
action.New           lib.cli             macro.DCC           macro.ICQ           macro.L2TP          macro.Ping        macro.SixXS    macro.Time        version
action.NotSyn        lib.cli-std         macro.DHCPfwd       macro.ILO           macro.LDAP          macro.POP3        macro.SMB      macro.Trcrt       wait4ifup
action.Reject        lib.common          macro.Distcc        macro.IMAP          macro.LDAPS         macro.POP3S       macro.SMBBI    macro.VNC
action.Related       lib.core            macro.DNS           macro.IMAPS         macro.Mail          macro.PostgreSQL  macro.SMBswat  macro.VNCL
action.ResetEvent    macro.A_AllowICMPs  macro.Drop          macro.IPIP          macro.mDNS          macro.PPtP        macro.SMTP     macro.VRRP
action.RST           macro.ActiveDir     macro.DropDNSrep    macro.IPMI          macro.mDNSbi        macro.Printer     macro.SMTPS    macro.Web

Ссылки

Анализ аудио системы

Anonymous (anonymous@undisclosed.example.com) — 2012-11-01T02:56:15+00:00

Анализ аудио системы

lsusb
cat /proc/asound/cards
cat /proc/asound/modules
cat /proc/asound/version
wget -O alsa-info.sh http://alsa-project.org/alsa-info.sh && bash ./alsa-info.sh

Sort

Anonymous (anonymous@undisclosed.example.com) — 2015-09-15T23:57:19+00:00

shell, utils

Sort

ls -1|sort -V - сортирует вывод файлов в числовом порядке

7.xml 
9.xml
401635.xml
401636.xml
401637.xml
401638.xml
401639.xml
401640.xml
401641.xml

Anonymous (anonymous@undisclosed.example.com) — 2012-06-16T13:33:44+00:00

Страница была перемещена по адресу Настройки sphinx + Drupal.

SqLite

Anonymous (anonymous@undisclosed.example.com) — 2015-10-21T11:16:05+00:00

SqLite

SquirrelMail

Anonymous (anonymous@undisclosed.example.com) — 2015-10-22T00:34:45+00:00

client, mail, SquirrelMail

SquirrelMail

SquirrelMail или Белка - это один из самых удобных и мощных Open Source пакетов веб-почты, написанных на PHP. В нём реализована поддержка протоколов IMAP и SMTP и доступны многие модули, расширяющие его функциональность, например, ведение логов, фильтрация спама, календарь, шифрование почты с помощью GPG и прочее. SquirrelMail полностью русифицирован.

В данной статье приводятся краткие рекомендации по настройке SquirrelMail для русскоязычных пользователей, особенно полезные тем, кто хочет обновить свою установку с версии 1.2.х или 1.4.1 и ниже до более свежей версии (1.4.3cvs на момент написания статьи). Поскольку начиная с версии 1.4.2 SquirrelMail поддерживает UTF-8 как кодировку для русского языка по умолчанию, а большинство русскоязычных пользователей применяют восьмибитные кодировки KOI8-R или cp-1251, я расскажу, как это обновление сделать быстро и без потерь.

Установка SquirrelMail

Поскольку белка написана на PHP, она требует для работы веб-сервер с PHP4. Рекомендуется, чтобы в PHP была включена поддержка gettext или в виде встроенного расширения (параметр при сборке PHP –with-gettext) или в виде динамически подгружаемой (shared) библиотеки (gettext.so). Никаких других особенностей при сборке PHP нет, но если вам приходит очень много почты и вы всю её храните на сервере, то лучше увеличить размер памяти, разрешённый для скрипта в php.ini - с 8 MB по умолчанию до 16 MB. Это помогает, если в ящике больше пары тысяч писем, и белке не хватает памяти.

Дистрибутив SquirrelMail можно скачать по ссылке с сайта проекта. Можно взять последнюю стабильную версию или снапшот cvs-версии стабильной ветки (1.4.3cvs, рекомендуется) в виде архива или непосредственно из cvs. Анонимный cvs проекта живёт на sourceforge, и сервер нередко бывает недоступен, поэтому проще скачать сам архив. Процедура установки из архива и из cvs-образа ничем не отличается.

Допустим, что мы распаковали архив или скопировали cvs-образ в каталог sm-1.4.3ru. Заходим в него и начинаем работать. Наша задача - установить белку и настроить русскоязычный интерфейс.Для этого запускаем в этом каталоге.

$ ./configure

Запускается перловый скрипт настройки, в котором нам нужно пройтись по пунктам и изменить в минимальном варианте язык по умолчанию (пункт 1-6 - задать ru_RU), свой домен по умолчанию (пункт 2-1, например, belkamail.ru - вроде, домен пока свободен , кодировку по умолчанию (какую именно - смотрим ниже. Для начала поставим UTF-8). Нужно также задать серверы IMAP и SMTP, если они живут не на той же машине. При настройке сервера IMAP можно указать его тип, если он известен. Остальное можно не трогать, но неплохо будет также поставить дополнительные модули (пункт 8).

По умолчанию настройки пользователей и их адресные книги будут храниться в отдельном каталоге, это подкаталог data в корне. Нужно сделать этот каталог доступным для записи с правами веб-сервера, то есть чаще всего:

$ chown nobody.nobody data
$ chmod 700 data

При желании можно связать SquirrelMail с сервером базы данных, при этом настройки пользователей и их адресные книги будут храниться в базе. Например, для MySQL нужно прописать:

1. DSN for Address Book   : mysql://squirreluser:pass@localhost/sqmail
2. Table for Address Book : address

3. DSN for Preferences    : mysql://squirreluser:pass@localhost/sqmail
4. Table for Preferences  : userprefs
5. Field for username     : user
6. Field for prefs key    : prefkey
7. Field for prefs value  : prefval

Структура этих двух таблиц - address и userprefs - и команды для сервера базы данных, которые нужно выполнить, чтобы их создать, описаны в файле doc/db-backend.txt. Далее сохраняем конфигурационный файл - он лежит в config/config.php. В принципе, его можно править руками, но осторожно, чтобы не добавить лишних пробелов после последней закрывающей скобки. Всё - система готова к работе. Запускаем браузер по http или https и смотрим, работает ли почта. Доводка SquirrelMail и настройка русского языка

Вопрос 1 - белка не отвечает.

Ответ - что-то не так настроили. Проверьте, правильно ли вы настроили веб-сервер и поддержку php.

Вопрос 2 - белка отвечает не по-русски, а по-английски.

Ответ - не так настроили язык. Пояснение. Проверьте, правильно ли настроена локаль. У белки может быть два режима работы с интерфейсом, отличающимся от английского: с использованием функций gettext и с использованием их программных заменителей, если PHP собран без поддержки gettext. Во втором режиме всё работает без дополнительного шаманства, но медленнее. Первый режим несравненно шустрее, но ему требуется, чтобы система поддерживала локаль, используемую для перевода. Не все дистрибутивы поддерживают русскую локаль UTF-8, поэтому надо проверить это:

$ locale -a | grep ru
и в случае отсутствия в списке ru_RU.UTF-8 собрать её самому:
# localedef ru_RU.UTF-8 -i ru_RU -fUTF-8

После этого может потребоваться перезапустить веб-сервер, чтобы новая локаль стала доступна PHP. Использование локали UTF-8 позволит читать и писать письма на любом языке и создавать папки на сервере IMAP также на любом языке. К сожалению, не все почтовые клиенты понимают юникод, поэтому некоторые из ваших адресатов со старыми почтовыми программами будут удивлены приходом письма на незнакомом языке. К тому же перекодировка писем в UTF-8 пока что не полностью реализована в белке. и это очень быстро проявится с письмами, приходящими в восьмибитных кодировках - их можно будет прочитать, но при ответе или пересылке цитируемые письма превращаются в нечитаемый набор иероглифов. Это исправлено в ветке HEAD - 1.5.0cvs, но на момент написания ветка ещё не созрела для стабильной работы на production-сервере.

Вопрос третий - хочу белку по-русски в KOI8-R или cp1251.

Ответ: пожалуйста. Особенно это необходимо тем, у кого уже работает белка более старых версий, и настройки пользователей сохранены в восьмибитной кодировке. Но учтите, что использование восьмибитных кодировок не решает проблем с письмами, приходящими в других кодировках, и при ответе или пересылке письма, пришедшие в 1251 или в юникоде, всё равно превращаются в бНОПНЮ, если у вас КОИ. Но поскольку КОИ является преобладающей кодировкой в российской почтовой переписке, её пока что можно использовать с наименьшими проблемами для себя и пользователей.

Для этого нужно:

или самому перекодировать русский файл перевода, который лежит в locale/ru_RU/LC_MESSAGES:
$ msgconv -t koi8-r squirrelmail.po или $ msgconv -t cp-1251 squirrelmail.po, 
или скачать уже готовые файлы отсюда: в KOI8-R или в 1251. При использовании gettext po-файл нужно скомпилировать:
  $ msgfmt squirrelmail.po -o squirrelmail.mo
В архиве по ссылке выше есть готовые собранные mo-файлы. Возможно, надо будет перезапустить веб-сервер.
Для полноты настройки русские файлы справки help/ru_RU также надо перекодировать в соответствующую кодировку. 
найти в файле functions/i18n.php строки:
  $languages['ru_RU']['NAME']    = 'Russian';
  $languages['ru_RU']['CHARSET'] = 'utf-8';
  $languages['ru_RU']['LOCALE'] = 'ru_RU.UTF-8';
  $languages['ru']['ALIAS'] = 'ru_RU';
  и заменить их на ту локаль, в которой вы хотите работать, например:
  $languages['ru_RU']['NAME']    = 'Russian';
  $languages['ru_RU']['CHARSET'] = 'koi8-r';
  $languages['ru_RU']['LOCALE'] = 'ru_RU.KOI8-R';
  $languages['ru']['ALIAS'] = 'ru_RU';
  изменить в конфиг-файле default charset на KOI8-R.

Настройка модуля шифрования GPG для SquirrelMail

Этот модуль позволяет работать с письмами, зашифрованными с помощью GPG, с использованием веб-интерфейса белки. Модуль рекомендуется к использованию, поскольку написан он вполне грамотно, с заботой о неискушённом пользователе и позволяет осуществлять настройки шифрования через веб-интерфейс. Насколько я знаю, коммерческих провайдеров, предоставляющих такую возможность, не найти днём с огнём.

Дистрибутив модуля можно скачать по ссылке с сайта автора модуля. Можно взять версию из каталога dailybuild, например ту, на которой работаю я сам от 30 января. Есть также анонимный cvs. Архив модуля нужно распаковать в каталог plugins, где находятся все остальные модули. После этого в каталоге plugins появится подкаталог gpg. Модуль нужно подключить в конфигурационном файле через скрипт configure или поправив файл вручную. После этого в главном окне белки появится ссылка "Ключи шифрования.".

Для тонкой настройки модуля можно руками поправить файл plugins/gpg/gpg_local_prefs.txt, а именно: прописать путь к gpg, если он отличается от стандартного; заменить параметры false на true, если вы хотите разрешить пользователям хранить закрытые ключи на сервере (allowprivatekeys=true), генерировать ключи непосредственно на сервере (allowkeygeneration=true), кэшировать пароль на время сеанса работы (allowpassphrasecaching=true) и пр. Модуль хорошо документирован, и почти всё будет понятно непосредственно из веб-интерфейса, если вы хоть раз имели дело с GPG/PGP. Некоторые действия в модуле, затрагивающие вопросы безопасности (например, смена пароля) требуют для своего выполнения защищённого (https) соединения.

Модуль шифрования также переведён на русский, и при использовании восьмибитных кодировок файл перевода (plugins/gpg/locale/ru_RU/gpg.po) тоже нужно будет сконвертировать в эту кодировку или взять отсюда: в KOI8-R или в 1251.

SSH авторизация по ключу

Anonymous (anonymous@undisclosed.example.com) — 2014-09-25T18:33:37+00:00

SSH авторизация по ключу

Действия на локальном компьютере

$ mkdir ~/.ssh
$ chmod 700 ~/.ssh
$ chown hg.mirocow.com:root ~/.ssh

Ключи находятся в каталоге ~/.ssh:

$ ls -al ~/.ssh/
drwx------   6 ctrld  staff   204 Oct 23 17:39 .
drwxr-xr-x+ 40 ctrld  staff  1360 Oct 22 21:01 ..
-rw-r--r--   1 ctrld  staff    78 Sep 26 20:02 config
-rw-------   1 ctrld  staff   668 Oct 23 17:39 id_dsa
-rw-r--r--   1 ctrld  staff   626 Oct 23 17:39 id_dsa.pub
-rw-r--r--   1 ctrld  staff  2410 Oct 13 11:44 known_hosts

Если каталог .ssh отсутствует, то достаточно попытаться зайти куда-нибудь по ssh. Если файлов id_dsa.* (я использую DSA, но можно и RSA) нет, то их нужно сгенерировать. Во время генерации ssh-keygen спросит passphrase (можно просто нажать Enter и она при входе не будет спрашиваться).

$ ssh-keygen -t dsa
Generating public/private dsa key pair.
Enter file in which to save the key (/Users/ctrld/.ssh/id_dsa):
Enter passphrase (empty for no passphrase):
Enter same passphrase again:
Your identification has been saved in /Users/ctrld/.ssh/id_dsa.
Your public key has been saved in /Users/ctrld/.ssh/id_dsa.pub.
The key fingerprint is:
e3:9a:18:f0:4c:6e:3e:44:8f:d3:a3:cc:c2:db:e0:b5 ctrld@129-149-179-94.pool.ukrtel.net
The key's randomart image is:
+--[ DSA 1024]----+
|                 |
|                 |
|                 |
|    .            |
|  ...+  S        |
|   *+ +. .       |
| ..+Bo ..        |
| .o*=+ o         |
|  ooE.o          |

+-----------------+

Если вы предпочитаете RSA, то:

$ ssh-keygen -t rsa

Копируем строку с публичным ключом – он нам понадобится на удалённом компьютере (remote, а не removed :)

Для DSA:

$ cat ~/.ssh/id_dsa.pub
ssh-dss AAAAB3............Pbec= ctrld@hostname.local

Для RSA:

$ cat ~/.ssh/id_rsa.pub
ssh-rsa AAAAB3............IJAw== ctrld@hostname.local

Действия на удалённом компьютере

Конечно же, на удалённом сервере должен быть запущен SSH-сервер. Обычно это OpenSSH, но встречаются и недобитые динозавры с коммерческими SSH-серверами (это вызывает моё искреннее удивление – да, есть и такое).

Заходим на удалённый сервер:

$ ssh hg.mirocow.com@remote.net

Проверяем, есть ли каталог .ssh:

$ ls -al ~/.ssh

Если его нет, то делаем простой трюк – “ssh hg.mirocow.com@localhost”, и .ssh создаётся автоматически.

Редактируем файл с публичными ключами, и добавляем соответствующий скопированный ключ.

Для DSA (authorized_keys):

$ vi ~/.ssh/authorized_keys

Вариант:

$ echo "ssh-dss AAAAB3............Pbec= ctrld@hostname.local" >> ~/.ssh/authorized_keys

Для RSA (authorized_keys):

$ vi ~/.ssh/authorized_keys

Сохраняем файл, и (!) обязательно меняем права доступа на 0600, иначе файл публичных ключей не будет восприниматься:

$ chmod 600 ~/.ssh/authorized_keys*

Выходим с удалённого компьютера и пытаемся зайти на него снова по ssh. Если всё было сделано правильно, то будет запрошен passphrase, а если он был пустой, то будет произведён вход без запроса.

Убеждаемся что права на папку .ssh даны от пользователя hg.mirocow.com

$ ls -la
drwxr-xr-x  7 hg.mirocow.com hg.mirocow.com 4096 2011-10-11 01:17 .
drwxr-xr-x  4 root           root           4096 2011-10-07 22:04 ..
drwx------  2 hg.mirocow.com root           4096 2011-10-11 01:19 .ssh

$ ls -la
drwx------ 2 hg.mirocow.com root           4096 2011-10-11 01:19 .
drwxr-xr-x 7 hg.mirocow.com hg.mirocow.com 4096 2011-10-11 01:17 ..
-rw-r--r-- 1 root           root            434 2011-10-11 03:01 authorized_keys

Альтернатива – скрипт ssh-copy-id

#!/bin/sh

KEY="$HOME/.ssh/id_dsa.pub"

if [ ! -f ~/.ssh/id_dsa.pub ];then
    echo "private key not found at $KEY"
    echo "* please create it with "ssh-keygen -t dsa" *"
    echo "* to login to the remote host without a password, don't give the key you create with ssh-keygen a password! *"
    exit
fi

if [ -z $1 ];then
    echo "Please specify user@host.tld as the first switch to this script"
    exit
fi

echo "Putting your key on $1... "

KEYCODE=`cat $KEY`
ssh -q $1 "mkdir ~/.ssh 2>/dev/null; chmod 700 ~/.ssh; echo "$KEYCODE" >> ~/.ssh/authorized_keys; chmod 644 ~/.ssh/authorized_keys"

echo "done!"

FAQ

У меня работает авторизация по ключам, но как сделать не возможным подключение по паролям?

ChallengeResponseAuthentication no

SSH клиент / сервер

Anonymous (anonymous@undisclosed.example.com) — 2024-02-07T17:31:33+00:00

ssh, openssh, rsa, dsa, networks, networking, network

SSH клиент / сервер

Генерация ключа

$ ssh-keygen -t rsa -C "admin@d7.debian.loc"
$ ssh-keygen -t dsa -C "admin@d7.debian.loc"
 
$ cat ~/.ssh/id_rsa.pub | ssh user@hostname "cat>> ~/.ssh/authorized_keys"
 
$ ssh user@hostname
$ sudo sed -i "s/^\#RSAAuthentication.*$/RSAAuthentication yes/g" /etc/ssh/sshd_config
$ sudo sed -i "s/^\#PubkeyAuthentication.*$/PubkeyAuthentication yes/g" /etc/ssh/sshd_config
$ sudo /etc/init.d/sshd restart
$ ssh-keygen \
    -m PEM \
    -t rsa \
    -b 2048 \
    -C "deployer" \
    -f ~/.ssh/deploy_rsa_id

Текущие подсоединения

$ netstat -tnpa | grep 'ESTABLISHED.*sshd'

Отладка подключения

ssh -vvv -o PreferredAuthentications=publickey name@host -p port

-o PreferredAuthentications=publickey - опции аунтефикации

Документация

SSMTP - Отправка почты через console

Anonymous (anonymous@undisclosed.example.com) — 2016-05-30T20:09:38+00:00

email, console, sendmail, send, client, smtp

SSMTP - Отправка почты через console

Настройка

nano /etc/ssmtp/ssmtp.conf

mailhub=smtp.my-host.ru
#AuthUser=some-body@my-host.ru
#AuthPass=[password]
rewriteDomain=my-host.ru
hostname=my-host.ru
#UseTLS=YES
FromLineOverride=YES
root=noreply@my-host.ru

Проверка

$ echo "From SMTP" | ssmtp -v -4 -s "XXX" some-body@yandex.ru

PHP sendmail_path

Отправка почты стандартной командой mail() через PHP

sendmail_path = /usr/sbin/ssmtp -t -4

Strace

Anonymous (anonymous@undisclosed.example.com) — 2026-01-21T03:18:45+00:00

[strace, proc]

Strace

sysctl

Anonymous (anonymous@undisclosed.example.com) — 2015-09-15T23:57:49+00:00

shell, utils

sysctl

Документация

http://www.opennet.ru/base/sys/sysctl_linux.txt.html

Syslog - Сборщик логов

Anonymous (anonymous@undisclosed.example.com) — 2025-12-07T02:46:32+00:00

Syslog - Сборщик логов

Мониторинг

syslog-ng

Тестирование

$ logger -n 192.168.1.132 -P 15140 "Test message for syslog server" && echo $?
$ echo "<14>Dec 6 23:50:01 testhost testapp[123]: Test message" | nc -w1 192.168.1.132 15140

systemctl - Контроль процесса загрузки

Anonymous (anonymous@undisclosed.example.com) — 2025-10-30T09:58:28+00:00

shell, utils, автозагрузка

systemctl - Контроль процесса загрузки

systemctl

UNIT                                                                     LOAD   ACTIVE SUB       DESCRIPTION
proc-sys-fs-binfmt_misc.automount                                        loaded active waiting   Arbitrary Executable File Formats File System Automount Point
sys-devices-pci0000:00-...0d0-block-cciss\x21c0d0-cciss\x21c0d0p1.device loaded active plugged   LOGICAL_VOLUME
...
sys-devices-platform-serial8250-tty-ttyS1.device                         loaded active plugged   /sys/devices/platform/serial8250/tty/ttyS1
sys-devices-platform-serial8250-tty-ttyS2.device                         loaded active plugged   /sys/devices/platform/serial8250/tty/ttyS2
sys-devices-platform-serial8250-tty-ttyS3.device                         loaded active plugged   /sys/devices/platform/serial8250/tty/ttyS3
sys-devices-pnp0-00:07-tty-ttyS0.device                                  loaded active plugged   /sys/devices/pnp0/00:07/tty/ttyS0
sys-module-fuse.device                                                   loaded active plugged   /sys/module/fuse
sys-subsystem-net-devices-eth0.device                                    loaded active plugged   NC373i Integrated Multifunction Gigabit Server Adapter
sys-subsystem-net-devices-eth1.device                                    loaded active plugged   NC373i Integrated Multifunction Gigabit Server Adapter
-.mount                                                                  loaded active mounted   /

systemctl|grep php

php5-fpm-dbg.service        loaded active running   LSB: starts php5-fpm-dbg

systemctl status php-fpm-dbg

php5-fpm-dbg.service - LSB: starts php5-fpm-dbg
   Loaded: loaded (/etc/init.d/php5-fpm-dbg)
   Active: active (running) since Wed 2014-07-09 21:24:28 MSK; 15min ago
  Process: 15176 ExecStop=/etc/init.d/php5-fpm-dbg stop (code=exited, status=0/SUCCESS)
  Process: 15183 ExecStart=/etc/init.d/php5-fpm-dbg start (code=exited, status=0/SUCCESS)
   CGroup: name=systemd:/system/php5-fpm-dbg.service
           ├─15195 php-fpm: master process (/etc/php5/fpm-dbg/php-fpm.conf)
           ├─15196 php-fpm: pool www
           ├─15197 php-fpm: pool www
           ├─15198 php-fpm: pool www
           ├─15199 php-fpm: pool www
           ├─15200 php-fpm: pool www
           ├─15201 php-fpm: pool www
           ├─15202 php-fpm: pool www
           ├─15203 php-fpm: pool www
           ├─15204 php-fpm: pool www
           ├─15205 php-fpm: pool www
           ├─15206 php-fpm: pool www
           ├─15207 php-fpm: pool www
           ├─15208 php-fpm: pool www
           ├─15209 php-fpm: pool www
           ├─15210 php-fpm: pool www
           ├─15211 php-fpm: pool www
           ├─15212 php-fpm: pool www
           ├─15213 php-fpm: pool www
           ├─15214 php-fpm: pool www
           ├─15215 php-fpm: pool www
           ├─15216 php-fpm: pool www
           ├─15217 php-fpm: pool www
           ├─15218 php-fpm: pool www
           ├─15219 php-fpm: pool www
           ├─15220 php-fpm: pool www
           ├─15221 php-fpm: pool www
           ├─15222 php-fpm: pool www
           ├─15223 php-fpm: pool www
           ├─15224 php-fpm: pool www
           └─15225 php-fpm: pool www

Jul 09 21:24:28 d7 systemd[1]: Starting LSB: starts php5-fpm-dbg...
Jul 09 21:24:28 d7 systemd[1]: Started LSB: starts php5-fpm-dbg.

tee

Anonymous (anonymous@undisclosed.example.com) — 2015-10-19T08:23:02+00:00

tee

Команда, выводит на экран, или же перенаправляет выходной материал команды и копирует его в файл или в переменную. В первую очередь, команда используется в привязке с перенаправлениями и фильтрами.

tmux

Anonymous (anonymous@undisclosed.example.com) — 2012-10-17T10:37:38+00:00

tmux

свободная консольная утилита-мультиплексор, предоставляющая пользователю доступ к нескольким терминалам в рамках одного экрана. tmux может быть отключен от экрана: в этом случае он продолжит исполняться в фоновом режиме; имеется возможность вновь подключиться к tmux, находящемуся в фоне. tmux является штатным мультиплексором терминалов ОС OpenBSD. Программа tmux задумывалась как замена программы screen.

<konsole> tmux attach || tmux new </konsole>

После этого вы попадаете в полноценную консоль. Ctrl+b d — отключиться. (Точно так же вы отключитесь, если прервётся соединение. Как подключиться обратно и продолжить работу — см. выше.)

Управление

В одной сессии может быть сколько угодно окошек:

Ctrl+b c — создать окошко;
Ctrl+b 0…9 — перейти в такое-то окошко;
Ctrl+b p — перейти в предыдущее окошко;
Ctrl+b n — перейти в следующее окошко;
Ctrl+b l — перейти в предыдущее активное окошко (из которого вы переключились в текущее);
Ctrl+b & — закрыть окошко (а можно просто набрать exit в терминале).

В одном окошке может быть много панелей:

Ctrl+b % — разделить текущую панель на две, по вертикали;
Ctrl+b " — разделить текущую панель на две, по горизонтали (это кавычка, которая около Enter, а не Shift+2);
Ctrl+b →←↑↓ — переходить между панелями;
Ctrl+b x — закрыть панель (а можно просто набрать exit в терминале).

Недостаток — непривычным становится скроллинг:

Ctrl+b PgUp — вход в «режим копирования», после чего:
PgUp, PgDown — скроллинг;
q — выход из «режима копирования».

Ссылки

http://habrahabr.ru/post/126996/

top

Anonymous (anonymous@undisclosed.example.com) — 2015-09-15T23:56:45+00:00

shell, utils

top

Параметры

Примеры

top -H -U mysql - посмотреть все процессы mysql

Обозначения

load average
%wa - говорит о простое, связанным с вводом/выводом
%st - также известный как «steal time», который можно перевести как «процент уворованного времени».

Он имеет смысл только в виртуальном окружении и обозначает процент процессорного времени, которое хост использовал по своему усмотрению в то время, как ваша виртуальная машина в нём нуждалась. Увеличение %st более чем на 5-10% говорит о том, что пора переходить более мощный VPS план или мигрировать на физический сервер.

%ni — процент использования процессорного времени процессами с измененным приоритетом nice
%id — простой процессора (ну тут все ясно)
%hi — процент времени, которое процессор тратит на обработку прерываний на уровне железа (IRQ)
то же, что и %hi, только для софт-прерываний

nice - Приоритет процесса

Ссылки

http://habrahabr.ru/post/71020/

TorrServer MatriX

Anonymous (anonymous@undisclosed.example.com) — 2025-08-04T16:55:32+00:00

[tv, hisense, vidaa]

TorrServer MatriX

Настройки

Размер кэша = 200 Мбайт (кол-во Мегабайт зарезервированных в ОЗУ для стрима выбранного медиа контента)
Размер буфера предварительной загрузки = 40 Мбайт (кол-во Мегабайт выделяемые для старта медиа контента)
Соединений на торрент = 20 (кол-во постоянных соединений с торрент клиентами, т.е. ограничение не больше этого количества)
Ограничение скорости загрузки/отдачи = 0 (без ограничений)
Зайти броузером на сервер (например, http://192.168.1.10:8090, то есть на IP-адрес, где установлен сервер) и изменить кол-во DHT соединений с 500 на 0 (без ограничений), чтобы быстрее шел поиск сидов/пиров

Заголовок

umask

Anonymous (anonymous@undisclosed.example.com) — 2016-09-18T03:57:39+00:00

umask

Вычисляется путем накладывания маски на 7. Те если у нас права (chmod) к примеру 775, то unmask будет 0002.

Таблица прав

Umask	Created Files	Created Directories
0000	666 (rw-rw-rw-)	777	(rwxrwxrwx)
0002	664 (rw-rw-r–)	775	(rwxrwxr-x)
0022	644 (rw-r–r–)	755	(rwxr-xr-x)
0027	640 (rw-r—–)	750	(rwxr-x—)
0077	600 (rw——-)	700	(rwx——)
0277	400 (r——–)	500	(r-x——)

http://handynotes.ru/2010/02/umask.html

Задать umask для php5-fpm

case "$1" in   
    start)
        MASK=`umask`
        umask 0007
        /sbin/start-stop-daemon --start $SSD_OPTIONS -- $FPM_OPTIONS
        umask $MASK

Задать unmask для ssh

http://serverfault.com/questions/228396/how-to-setup-sshs-umask-for-all-type-of-connections

umount - размонтирование раздела

Anonymous (anonymous@undisclosed.example.com) — 2019-10-25T01:18:47+00:00

fs, umount

umount - размонтирование раздела

Принудительно размонтировать раздел

При возникновении ошибки umount — device is busy

$ umount -l /mnt/disk

Uname

Anonymous (anonymous@undisclosed.example.com) — 2012-07-16T14:15:19+00:00

Uname

Unison

Anonymous (anonymous@undisclosed.example.com) — 2013-07-06T01:38:08+00:00

Unison

Ссылки

http://ru.wikipedia.org/wiki/Unison

Системные утилиты анализа (iotop, htop итд)

Anonymous (anonymous@undisclosed.example.com) — 2025-11-19T11:32:00+00:00

Системные утилиты анализа (iotop, htop итд)

Цвета могут принимать значения

Светло-серый \033[0;37m
Серый \033[1;30m
Черный \033[0;30m
Красный \033[0;31m
Светло-красный \033[1;31m
Зеленый \033[0;32m
Светло-зеленый \033[1;32m
Коричневый \033[0;33m
Желтый \033[1;33m
Синий \033[0;34m
Светло-синий \033[1;34m
Сиреневый \033[0;35m
Светло-сиреневый \033[1;35m
Голубой \033[0;36m
Светло-голубой \033[1;36m
Белый \033[0m

Универсальные консольные программы

dstat & sar

iostat, vmstat, ifstat and much more in one.

Установка
apt-get install dstat

slurm

Visualizes network interface traffic over time.

Установка
apt-get install slurm

vim & emacs

The real programmers' editors.

Установка
apt-get install vim

screen, dtach, tmux, byobu

Keep your terminal sessions alive.

Установка
apt-get install screen

multitail

See your log files in separate windows.

Установка
apt-get install multitail

tpp

Presentation ("PowerPoint") tool for terminal.

Установка
apt-get install tpp

xargs & parallel

Executes tasks from input (even multithread).

Установка
apt-get install xargs

duplicity & rsyncrypto

Encrypting backup tools.

Установка
apt-get install duplicity

nethack & slash'em

Still the most complex game on the planet.

Установка
apt-get install nethack

lftp

Does FTPS. Can mirror, kinda like rsync.

Установка
apt-get install lftp

ack

A better grep for source code.

Установка
apt-get install ack

calcurse & remind + wyrd

Calendar systems.

Установка
apt-get install calcurse

newsbeuter & rsstail

Command line RSS readers.

Установка
apt-get install newsbeuter

powertop

Helps conserve power on Linux.

Установка
apt-get install powertop

htop & iotop

Process, memory and io monitoring.

Подробнее

Установка
apt-get install htop

ttyrec & ipbt

Record and play back terminal sessions.

Установка
apt-get install ipbt

mtr

traceroute 2.0.

Установка
apt-get install mtr

socat & netpipes

Directing stuff easily in and out of sockets.

Установка
apt-get install socat

iftop & iptraf

To see where your traffic goes.

Установка
apt-get install iftop

siege & tsung

Command line load test tools.

Установка
apt-get install siege

ledger

Terminal-based accounting package.

Установка
apt-get install ledger

taskwarrior

Todo management in the terminal.

Установка
apt-get install taskwarrior

curl

Everybody's favorite HTTP toolbox.

Установка
apt-get install curl

rtorrent & aria2

Command line torrent downloaders.

Установка
apt-get install rtorrent

ttytter & earthquake

Nice trendy Twitter clients :)

Установка
apt-get install ttytter

vifm & ranger

Alternatives to the midnight commander.

Установка
apt-get install vifm

cowsay & sl

I just couldn't resist. :o)

Установка
apt-get install cowsay

Fail2ban

Установка
apt-get install fail2ban

ncdu

Установка
apt-get install ncdu

saider

saider -c

Установка
apt-get install saider

w

lvan

Утилита для удобного поиска по лог файлу

Сайт: http://lnav.org/
Скачать: https://github.com/tstack/lnav
Пример: ~/lnav-0.8.0/lnav /var/log/syslog

watch

watch -n1 ls -la ./

mitmproxy

An interactive TLS-capable intercepting HTTP proxy for penetration testers and software developers.

Сайт: http://lnav.org/
Скачать: brew install mitmproxy
Пример: mitmproxy

shell, utils

atop

atop — продвинутый интерактивный полноэкранный монитор производительности, написанный для Linux. Является аналогом top, но в отличие от него выводит только новые изменения об активных системных процессах. Позволяет контролировать загрузку ЦПУ, ОЗУ, HDD, компьютерной сети, а также распределение нагрузок по обрабатываемым процессам. Является удобным инструментом для администрирования системы.

http://ru.wikipedia.org/wiki/Atop

findutils/updatedb

Anonymous (anonymous@undisclosed.example.com) — 2013-10-06T10:33:25+00:00

findutils/updatedb

locate ls

Для того чтоб построить индекс для поиска программе locate используется updatedb

/etc/updatedb.conf

USB APC UPC

Anonymous (anonymous@undisclosed.example.com) — 2015-09-16T09:54:55+00:00

upc, apc, system, os, linux

USB APC UPC

Установка

apt-get install apcupsd

Настройка

nano /etc/apcupsd/apcupsd.conf

UPSNAME MY
UPSCABLE usb
UPSTYPE usb
DEVICE
ONBATTERYDELAY - время (в секундах), определяющее задержку между обнаружением сбоя электропитания и отсылкой события onbattery. По умолчанию - 6
BATTERYLEVEL - уровень заряда батареи (в процентах), при котором инициируется выключение компьютера. По умолчанию - 5
MINUTES - расчётное время остаточной работы (в минутах), при достижении которого инициируется выключение компьютера. По умолчанию - 3
TIMEOUT - параметр актуален для старых ИБП, неспособных определять свой уровень заряда. Задаёт время (в секундах) между сбоем электропитания и отключением компьютера. Для современного ИБП параметр стоит оставить на 0, но выставление иного значения может быть удобно для тестирования работы ИБП. Например, если выставить 30 и выдернуть шнур из розетки, уже через полминуты apcupsd продемонстрирует своё умение выключать компьютер

Закоментировать DEVICE

nano /etc/default/apcupsd

ISCONFIGURED yes

/etc/init.d/apcupsd start

Проверка статуса

apcaccess status

# apcaccess status
APC      : 001,034,0867
DATE     : 2015-09-16 12:53:22 +0300
HOSTNAME : debian7
VERSION  : 3.14.10 (13 September 2011) debian
UPSNAME  : UPS_GEEL
CABLE    : USB Cable
DRIVER   : USB UPS Driver
UPSMODE  : Stand Alone
STARTTIME: 2015-09-16 12:53:21 +0300
MODEL    : Back-UPS ES 700G
STATUS   : ONLINE
LINEV    : 220.0 Volts
LOADPCT  :  12.0 Percent Load Capacity
BCHARGE  : 099.0 Percent
TIMELEFT :  23.5 Minutes
MBATTCHG : 5 Percent
MINTIMEL : 3 Minutes
MAXTIME  : 0 Seconds
SENSE    : Medium
LOTRANS  : 180.0 Volts
HITRANS  : 266.0 Volts
ALARMDEL : 30 seconds
BATTV    : 13.7 Volts
LASTXFER : No transfers since turnon
NUMXFERS : 0
TONBATT  : 0 seconds
CUMONBATT: 0 seconds
XOFFBATT : N/A
STATFLAG : 0x07000008 Status Flag
SERIALNO : 5B1211T01779
BATTDATE : 2012-03-13
NOMINV   : 230 Volts
NOMBATTV :  12.0 Volts
FIRMWARE : 871.O2 .I USB FW:O2
END APC  : 2015-09-16 12:53:28 +0300

usermod

Anonymous (anonymous@undisclosed.example.com) — 2013-01-16T16:36:36+00:00

usermod

-d домашняя директория
-s shell
-p пароль
-g первичная группа
-G другие группы, к которым принадлежит пользователь

Vagrant

Anonymous (anonymous@undisclosed.example.com) — 2019-10-19T18:59:27+00:00

vagrant, chef, shell, puppet, salt, ansible, docker, virtual

Vagrant

Установка

$ apt install -f
$ apt --fix-broken install
$ apt install ruby-dev vagrant
$ apt install virtualbox virtualbox-ext-pack

$ modprobe -a vboxguest vboxsf vboxvideo
$ modprobe vboxnetadp
$ modprobe vboxnetflt

Коробочки

https://atlas.hashicorp.com/boxes/search
http://www.vagrantbox.es/
debian/contrib-jessie64 - Vanilla Debian 8 "Jessie" build with contrib vboxsf kernel module

Плагины

https://github.com/mitchellh/vagrant/wiki/Available-Vagrant-Plugins

Системы управления конфигурацией

Docker - по сути это некий контейнер в который вы можете засунуть операционную систему, свой софт и базу данных и запустить его. У контенеров есть слои, ОС - нижний слой, софт выше слой, и ваше приложение и данные - верхний слой. Контенеры удобны для переноса приложения и сопровождающего окружения на сервер или в облако. Docker не создает виртуальную систему, а только эмулирует ее пробрасывая системные вызовы и работает стабильно только в Linux. С недавнего времени появилась версия для MacOS. Обычно сброка бокса описана в файле Dockerfile.

Vagrant, же, напротив - базируется на системах виртуализации (VirtualBox, libvirt, xen). С самого начала он создает полноценную виртуальную машину, выполняет скрипт provision, который устанавливает все окружение и настраивает его. Vagrant работает на всех операционных системах в силу своей природы.

Shell — старые добрые shell-скрипты. В XXI веке уже не интересно.
Ansible — молодая, набирающая обороты, система управления конфигурацией.
Chef — про него, пожалуй, слышали все. Поддерживается standalone (Chef Solo) и серверная (Chef Client) версии.
Docker — модная в последнее время система, поддерживающая концепцию Immutable Server.
Puppet — одна из наиболее распространенных систем управления конфигурацией. Поддерживается standalone и серверная версия.
Salt — система управления конфигурацией Salt Stack.

Системы виртуализации

Создание коробки из рабочей виртуальной машины

У нас есть виртуальная машина с наименованием "vm". В отключено состоянии выполняем команду от root. Где /Users/mirocow/vagrant/vm.box является путем до создаваемой коробки.

$ rm /Users/mirocow/vagrant/vm.box
$ vagrant package --base vm --output /Users/mirocow/vagrant/vm.box

Запуск локальных коробок

$ vagrant box add foo-box /path/to/vagrant-box.box
$ vagrant init foo-box
$ vagrant up

On-line конфигураторы

https://puphpet.com/

Рецепты

Yii2

Wordpress

https://github.com/vccw-team/vccw

Остальные

https://gitlab.com/gitlab-org/gitlab-development-kit/blob/master/Vagrantfile

Пакеты

https://github.com/sj26/mailcatcher

Сатьи / Сайты / Документация

Ошибки

/sbin/mount.vboxsf: mounting failed with the error: No such device

$ vagrant plugin expunge
$ vagrant plugin install vagrant-vbguest 
$ vagrant box update
$ vagrant vbguest

Другие системы виртуализации

Qemu-KVM	2015/10/13 09:01	system, kernel, virtual
Linux Containers	2017/11/09 13:38	container, virtual
Proxmox Virtual Environment (Proxmox VE)	2015/10/13 09:01	virtual
LXC	2017/11/09 13:34	linux, container, containers, virtual
Docker	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Docker Swarm	2025/02/10 11:29	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Vagrant	2015/10/13 09:01	vagrant, chef, shell, puppet, salt, ansible, docker, virtual
VirtualBox	2015/10/13 09:01	virtualbox, virtual
Docker/Отладка	2019/07/30 10:46	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Восстановление настроек коробочки	2018/02/28 22:23	vagrant, chef, shell, puppet, salt, ansible, docker, virtual

Varnish

Anonymous (anonymous@undisclosed.example.com) — 2012-03-29T23:46:31+00:00

Varnish

https://www.varnish-cache.org/releases

Vim

Anonymous (anonymous@undisclosed.example.com) — 2012-09-06T15:47:15+00:00

Vim

Ссылки

VirtualBox

Anonymous (anonymous@undisclosed.example.com) — 2019-08-29T11:26:08+00:00

virtualbox, virtual

VirtualBox

Установка

deb http://download.virtualbox.org/virtualbox/debian wheezy contrib

wget -q http://download.virtualbox.org/virtualbox/debian/oracle_vbox.asc -O- | rpm –import -
apt-get install linux-headers-$(uname -r) build-essential virtualbox-4.3 dkms
VBoxManage extpack install
sudo /etc/init.d/vboxdrv setup # Если возникли проблемы с установкой DKMS

Исправление ошибки

$ vagrant vbguest --do install --no-cleanup

Настройка

Настройка образов VDI/VMDK

Создаем жесткий диск размером 10 Гб (место по дэфолту не преаллоцируется):

$ vboxmanage createhd \
  --filename /home/eax/virtualbox/ubuntu1604/ubuntu1604.vdi \
  --size 10000

Цепляем созданный жесткий диск к виртуалке:

$ vboxmanage storagectl ubuntu1604 --name ide-controller --add ide
$ vboxmanage storageattach ubuntu1604 --storagectl ide-controller \
  --port 0 --device 0 --type hdd \
  --medium /home/eax/virtualbox/ubuntu1604/ubuntu1604.vdi

$ vboxmanage storagectl 4e14957a-091a-4b7e-9267-5e6ec5f1fa28 --remove

Увеличение объема

$ VBoxManage clonehd "hdd.vmdk" --format vdi "hdd.vdi"
$ VBoxManage modifyhd "hdd.vdi" --resize 100000

Настройка сети

Список NAT-сетей:

$ vboxmanage natnetwork list

Создание новой сети:

$ vboxmanage natnetwork add --netname UbuntuNat --network 10.0.4.0/24 \
  --enable --dhcp on --ipv6 off

Редактирование сети:

$ vboxmanage natnetwork modify --netname UbuntuNat --ipv6 on

Удаление сети:

$ vboxmanage natnetwork remove --netname UbuntuNat

Подключение виртуалок к NAT-сети:

$ vboxmanage modifyvm ubuntu1 --nic2 natnetwork --nat-network2 UbuntuNat
$ vboxmanage modifyvm ubuntu2 --nic2 natnetwork --nat-network2 UbuntuNat

Заголовок

Включаем доступ к ВМ по VNC:

$ vboxmanage modifyvm ubuntu1604 --vrde on
$ vboxmanage modifyvm ubuntu1604 --vrdeaddress 127.0.0.1
$ vboxmanage modifyvm ubuntu1604 --vrdeport 3001
$ vboxmanage modifyvm ubuntu1604 --vrdeproperty VNCPassword="secret"

Я лично для подключения использую TigerVNC (форк TightVNC): Чтобы каждый раз не вводить пароль, можно сказать:

$ vncpasswd ./vnc.password

… и всегда использовать этот файл:

$ vncviewer localhost:3001 PasswordFile=/home/eax/temp/vnc.password

Посмотреть свойства виртуальной машины (узнать номер порта VNC):

$ vboxmanage showvminfo ubuntu1604  | grep VRDE

Клиенты

phpvirtualbox webclient

Записки

Просмотр всех зарегистрированных дисков
- VBoxManage list hdds
Ковертирование диска из vdi в vdmk
- VBoxManage clonehd f83fa853-eded-4e67-9927-05fb72544c3d win764.vmdk –format vmdk
Изменение размера диска
- Внимание!!! Перед увеличением жесткого диска, необходимо удалить все снимки виртуальной машины.
- VBoxManage modifyhd d:\VM\Win7x64\Win7x64.vdi –resize 50000
  - заместо пути к файлу диска, лучше использовать UUID
- diskpart – запускаем утилиту управления дисками и разделами

<konsole> DISKPART> list volume – смотрим, какой раздел нам нужен DISKPART> select volume 2 – выбираем его DISKPART> extend – даем команду расширить DISKPART> list volume – убеждаемся, что всё хорошо * Volume 2 C NTFS Partition 48 GB Healthy Boot DISKPART>exit – прощаемся с утилитой diskpart </konsole>

Ссылки

Другие системы виртуализации

Qemu-KVM	2015/10/13 09:01	system, kernel, virtual
Linux Containers	2017/11/09 13:38	container, virtual
Proxmox Virtual Environment (Proxmox VE)	2015/10/13 09:01	virtual
LXC	2017/11/09 13:34	linux, container, containers, virtual
Docker	2016/12/05 00:08	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Docker Swarm	2025/02/10 11:29	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Vagrant	2015/10/13 09:01	vagrant, chef, shell, puppet, salt, ansible, docker, virtual
VirtualBox	2015/10/13 09:01	virtualbox, virtual
Docker/Отладка	2019/07/30 10:46	vagrant, chef, shell, puppet, salt, ansible, docker, devops, virtual, alpine
Восстановление настроек коробочки	2018/02/28 22:23	vagrant, chef, shell, puppet, salt, ansible, docker, virtual

Виртуализация

Anonymous (anonymous@undisclosed.example.com) — 2011-11-17T02:31:20+00:00

Виртуализация

ESXi
KVM

vmstat

Anonymous (anonymous@undisclosed.example.com) — 2012-11-07T12:29:19+00:00

vmstat

# vmstat 1 1000
procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa
 0  0 299860 110720 579052 1277164    0    0     7    41   15   16  2  0 97  0
 0  0 299860 110720 579052 1277164    0    0     0     0   86  105  0  0 100  0

watch - следит за изменениями в выводе командой (repeat)

Anonymous (anonymous@undisclosed.example.com) — 2025-10-28T18:14:19+00:00

repeat, watch, console, monitor

watch - следит за изменениями в выводе командой (repeat)

unix-утилита, запускает и следит за программой через фиксированные интервалы времени. Если интервал не задан с помощью опции -n, то команда будет запускаться каждые 2 секунды. Завершить программу можно с помощью нажатия соответствующих клавиш (обычно <CTRL-C>). Опция -d подсветит изменения в выводе.

$ watch 'cat /proc/loadavg'

Каждые две секунды команда watch запускает cat, для выхода из этого режима нужно нажать Ctrl+c. Для изменения интервала обновления на 10 секунд нужно выполнить:

$ watch -n 10 'ls -la'

Запуск watch с возможностью отбора с использованием grep

$ watch -n 2 'ps -uax --forest|grep backuppc'

Для того, чтобы выделить разницу между обновлениями:

$ watch -d 'ls -la'

Можно использовать команду для наблюдения увеличения размера большого файла при скачивании:

$ watch 'ls -l hitriy-file.iso'

Для просмотра изменяющегося текстового файла используется команда tail:

$ sudo tail -f /var/log/apache.log

Wget

Anonymous (anonymous@undisclosed.example.com) — 2023-12-14T23:10:43+00:00

curl, fetch, wget

Wget

Method	Command
curl	sh -c "$(curl -fsSL https://raw.site/install.sh)"
wget	sh -c "$(wget -O- https://raw.site/install.sh)"
fetch	sh -c "$(fetch -o - https://raw.site/install.sh)"

Wine

Anonymous (anonymous@undisclosed.example.com) — 2018-04-19T11:45:32+00:00

Wine

$ brew install wine
$ brew install winetricks

zcat

Anonymous (anonymous@undisclosed.example.com) — 2017-01-05T17:31:30+00:00

shell, utils, gzip, bash

zcat

Zimbra

Anonymous (anonymous@undisclosed.example.com) — 2012-12-05T04:26:55+00:00

Zimbra

apt-get remove --purge exim4 exim4-base exim4-config exim4-daemon-light
aptitude install sqlite3 sudo libpcre3 libgmp3c2 lib32gmp3-dev libgmp3-dev sysstat libexpat1 libidn11 perl-modules wget lzma

Установка

http://www.zimbra.com/downloads/os-downloads.html
- Debian 5 64bit x86 (MD5) DEPRECATED
- Ubuntu 12.04 LTS 64bit x86 (MD5)

скриптик для автоматической переупаковки пакетов

for i in $(ls *.deb)
do
DIR=`echo $i | sed 's/\.deb//g'`
# rm -R $DIR
dpkg-deb -x $i $DIR
dpkg-deb -e $i $DIR/DEBIAN
cat ./$DIR/DEBIAN/control | sed 's/\.DEBIAN5_64//g' > /tmp/zimbra-repack.tmp
cat /tmp/zimbra-repack.tmp | sed 's/\_/\-/g' > ./$DIR/DEBIAN/control
rm $i
echo $DIR
dpkg-deb -b ./$DIR
echo "++++++++++++++++++++++++++++++++"
done

Ссылки

http://acceptero.blogspot.ru/2011/08/zimbra.html

ZIP Сжатие / Разжатие в unix

Anonymous (anonymous@undisclosed.example.com) — 2018-08-15T22:08:15+00:00

linux, shell, zip, unzip, arc, архивирование, разархивирование)

ZIP Сжатие / Разжатие в unix

tar

Исторически один из самых старый архиваторов в Linux. Как архиватора его роль сводится к объединению файлов в один архив, без компрессии(сжимания). При совместном использование с другим архиватором можно добиться хорошей компрессии файлов и каталогов. Создание архива и распаковка tar:

tar -cf archive.tar folder/

Создает архив archive.tar, содержащий директорию folder/.

tar -xf archive.tar

Извлекает содержимое архива archive.tar в текущую директорию.

tar -zxf archive.tar.gz

Извлекает содержимое архива, сжатого gzip. Используйте -j вместо -z для архива bzip2.

tar -vxf archive.tar

Извлекает содержимое архива с детальным выводом процесса извлечения данных.

$ cat 2018-08-15.21-20-19.jo.922cc06c.tar.* > single.tar.gz && tar -zxf single.tar.gz

Извлекает содержимое мультиархива в текущую папку

zip

zip может одновременно и архивировать, и сжимать файлы; то есть вы можете сжать различные файлы, поместив их при этом в архив. Он известен еще с 1998 года и метод его работы был реализован на многих платформах, следовательно, это один из самых мобильных вариантов (особенно — если вам необходим доступ к вашему архиву из системы Windows).

zip -r archive folder

Создает архив archive.zip с содержимым каталога folder.

unzip archive.zip

Извлекает содержимое архива archive.zip в текущую директорию, создавая вложенные директории (используйте -j чтоб не создавать вложенных директорий).

gzip

gzip может сжимать файлы, но не архивировать. Однако он прекрасно работает, если его использовать вместе с архивирующим инструментом — как бывает на практике, gzip и tar отлично работают вместе.

gzip file.tar

Сжимает файл file.tar и создает file.tar.gz.

tar czf file.tar.gz folder/

Архивирует и сжимает folder/ в файл file.tar.gz.

gunzip file.tar.gz

или

zip -d file.tar.gz

Распаковывает file.tar.gz

tar zxf file.tar.gz

Распаковывает архив file.tar.gz и извлекает из него файлы.

bzip2

bzip2, как и gzip, сжимает, но не архивирует. И, опять-таки, он отлично работает с tar, если вы хотите получить и архивацию, и сжатие. Bzip2 сжимает лучше, чем gzip, но процесс сжатия у bzip2 занимает больше времени, чем у gzip.

bzip2 file.tar

Сжимает файл file.tar и создает file.tar.bz2.

bunzip2 file.tbz

Распаковывает file.tbz и создает file.tar

tar jxf file.tbz

Распаковывает архив file.tbz и извлекает из него файлы.

Библиотека знаний - system

Бэкап с помощью rsync на Debian

Бэкап с помощью rsync на Debian

Восстановление

Кириллица и rsync под Windows

Кириллица и rsync под Windows

Настройка RSYNC для точной синхронизации данных

Настройка RSYNC для точной синхронизации данных

Обновление mercurial на Ubuntu 10.04

Обновление mercurial на Ubuntu 10.04

Примеры работы с данными на локальной машине

Примеры работы с данными на локальной машине

Простое копирование файлов

Синхронизация каталогов

Работа с удаленной машиной

/etc/init.d/php-fastcgi

/etc/init.d/php-fastcgi

Ace Stream

Ace Stream

Скачать

Проверка работоспособности

Запуск из консоли

Advanced Linux Sound Architecture (ALSA)

Advanced Linux Sound Architecture (ALSA)

Утилиты

Список звуковых карт

Проверка вывода звука

Заголовок

Заголовок

Установка

Параметры

Пример

Apache

Apache

Программы

Программы

Менеджер пакетов APT: вопросы и ответы

Менеджер пакетов APT: вопросы и ответы

Популярное

Update apt-get

Upgrade aptitude

apt-cache policy

Q: Downgrade или Как понизить версию пакета

Q: Что такое apt?

Q: В каких дистрибутивах используется apt?

Q: Как обновить дистрибутив

Q: Какие утилиты входят в состав пакета apt?

Q: Как обновить список пакетов?

Q: Списки я обновил, как теперь обновить сами пакеты?

Q: А я не хочу все обновлять, как мне обновить только один пакет?

Q: Как удалить пакет?

Q: Как удалить все пакеты программы?

Q: А после удаления точно ничего от пакета не останется?

Q: Как мне узнать, как называется пакет для какой-то определенной цели?

Q: Мне принесли компакты дистрибутива, которых у меня не было, как мне их добавить?

Q: Мне кажется, что меня взломали и что-то сделали с <пакетом>

Q: Очень хочется создать локальное зеркало, в какую сторону смотреть?

Q: А подробнее про apt-move можно?

Q: Есть подозрение, что из-за моих экспериментов в системе много мусора...

Q: Где по умолчанию лежат пакеты, которые мне скачал apt-get?

Q: Как мне поставить один *.deb пакет в систему?

Q: Как заставить apt работать через proxy-сервер?

Q: Я хочу определить в каком пакете необходимый мне файл (например, libodbc.so).

Q: А как просмотреть полный список содержимого пакета?

Q: Я больше не собираюсь использовать apt-file, а Contents-.gz занимает место на диске.

Q: Как мне найти неиспользуемые (осиротевшие) пакеты?

Q: есть локальный репозиторий из дистрибутивных дисков. Packages.gz сделал, а вот как сделать Contents-<ARCH>.gz для того, чтобы apt-file'ом можно было пользоваться?

Q: У меня стоит мешанина из stable, testing, unstable и даже кое-что из experimental установил. Как мне сделать, чтобы все в таком виде и обновлялось?

Q: Как узнать расширенное описание пакета?

Q: Как исправить зависимости в пакетах?

Q: Как apt-get заставить не обновлять пакет

apt-get

aptitude

dpkg

/etc/apt/preferences

Q: Как узнать, какие пакеты можно обновить?

Q: Как узнать какие пакеты заморожены/стоит пометка о запрете обновления?

Q: Как обновить из конкретного репозитория?

Q: Как узнать версию пакета?

Q: Как обновить только заданный пакет/программу?