Ссылки

Anonymous (anonymous@undisclosed.example.com) — 2011-10-21T10:04:17+00:00

Ссылки

Ajenti (Admin panel)

Anonymous (anonymous@undisclosed.example.com) — 2018-06-17T20:34:27+00:00

panel

Ajenti (Admin panel)

apt-get install gettext libxml2-dev libxslt1-dev yui-compressor
Установка node.js
Установка pip
- pip install –upgrade pip
- pip install distribute==0.6.16
- pip install pyserial
git clone https://github.com/Eugeny/ajenti.git
cd ajenti
pip install –upgrade setuptools
pip install -r requirements.txt –upgrade
make
ln -s [/root/ajenti/ajenti-panel] /usr/bin/ajenti-panel
./setup.py install

[/root/ajenti/ajenti-panel] - полный путь до места нахождения панели

csvkit - Преобразование Excel/(xlsx и xls) в CSV

Anonymous (anonymous@undisclosed.example.com) — 2016-12-20T14:47:50+00:00

excel, xls, xlsx

csvkit - Преобразование Excel/(xlsx и xls) в CSV

https://github.com/wireservice/csvkit

Установка

$ pip install csvkit

Зависимости

Скрипт использует библиотеку https://github.com/wireservice/agate
с плагином https://github.com/wireservice/agate-excel
Для преобразования из Excel используется xlrd

Документация

https://github.com/wireservice/csvkit/tree/master/docs

Anonymous (anonymous@undisclosed.example.com) — 2018-08-07T21:54:23+00:00

Страница была перемещена по адресу Python.

PyDev remote debug

Anonymous (anonymous@undisclosed.example.com) — 2013-10-07T03:30:00+00:00

PyDev remote debug

Берем из Eclipse из пакета pydev отладчик org.python.pydev_2.8.2.2013083013/pysrc, где 2013083013 - является номером ревизии. И копируем в домашнюю директорию пользователя, от которого запущен процесс python. И добавлем путь в переменную PATH. Или импортируем sys и используем path.append(), для добавления пути отладчика.

import os, sys;
sys.path.append('/var/www/nginx-default/deluge.ztc/pysrc');
import pydevd;
pydevd.settrace();

Отладчик стучит в локальный порт 5678. Поэтому для удаленной отладки нада прокинуть ssh тунель.

import os, sys;
sys.path.append('/var/www/nginx-default/deluge.ztc/pysrc');
import pydevd;
pydevd.settrace('192.168.1.6', port=5678, stdoutToServer=True, stderrToServer=True);

С указанием IP и порта прослушиваещего клиента Eclipse.

Supervisor by python

Anonymous (anonymous@undisclosed.example.com) — 2024-04-11T13:37:49+00:00

service, unix, linux, python, supervisor, initd

Supervisor by python

http://supervisord.org

Служит для демонизации процессов/программ с определенными параметрами и отслеживания их состояния. Запуск процессов supervisord производит от своего имени, как под процессы, поэтому контроль остается за визором. Supervisorctl предоставляет системный- и веб-интерфейсы для мониторинга и управления процессами. Вы можете предоставить пользователям доступ на определенные программы, а они в свою очередь смогут видеть состояние этих программ и совершать действия над ними (start, stop, restart). Также имеется XML-RPC интерфейс, которым вы можете пользоваться для написания своих расширений и приложений, которым нужен доступ к Supervisord. Supervisor написан на Python.

Установка

apt-get

$ sudo apt-get install supervisor

pip

Можно установить еще и c помощью пакетного мененджера pip для Python, самая свежая версия из питоновского установщика, но для этого нужно еще тянуть кучу пакетов для питона и компиляторов

sudo pip install --upgrade supervisor
sudo ln -s /usr/local/bin/supervisord /usr/bin/supervisord
sudo ln -s /usr/local/etc/supervisord.conf /etc/supervisord.conf

Настройка

nano /etc/supervisor/supervisor.conf

или

$ echo_supervisord_conf > /etc/supervisor/supervisor.conf

[unix_http_server]
file = /tmp/supervisor.sock

[supervisord]
logfile          = ./logs/supervisord.log
logfile_maxbytes = 50MB
logfile_backups  = 10
loglevel         = info
pidfile          = /tmp/supervisord.pid
nodaemon         = false
minfds           = 1024
minprocs         = 200

[rpcinterface:supervisor]
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface

[supervisorctl]
serverurl = unix:///tmp/supervisor.sock

[program:someprogram1]
command                 = bash -c "ulimit -n 10000; exec /usr/bin/php ./bin/some-program-1.php"
process_name            = Some-Program
numprocs                = 1
autostart               = true
autorestart             = true
user                    = root
stdout_logfile          = ./logs/some-program-info.log
stdout_logfile_maxbytes = 1MB
stderr_logfile          = ./logs/some-program-error.log
stderr_logfile_maxbytes = 1MB

WEB GUI

Для запуска web интерфейса supervisorctl необходимо в файле /etc/supervisor/supervisord.conf проверить наличие секции:

[inet_http_server]
port=127.0.0.1:9771
;username=user
;password=123

Для работы через nginx c web версией можно написать прокси сервер:

server {
    listen 80;
    server_name supervisor.loc;
    location / {
        proxy_pass http://127.0.0.1:9771;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}

после чего перезапускаем nginx с supervisor' ом:

/etc/init.d/supervisor restart
/etc/init.d/nginx restart

Если при запуске supervisor возникла ошибка: Starting supervisor: Error: Another program is already listening on a port that one of our HTTP…, то для решения данной проблемы нужно убить socket supervisor.sock, где находится видно из конфига

Пример:

$sudo unlink /tmp/supervisor.sock

Далее из браузера заходим на http://supervisor.loc

supervisorctl

Создание задач для supervisor:
Для создания задач, необходимо прописывать конфиги в /etc/supervisor/conf.d/ Структура файла конфигураций для worker'а supervisor'а:

[program:]
command=
process_name=%(process_num)s                          
stdout_logfile=/var/log/.log
stderr_logfile=/var/log/.log
redirect_stderr=true
autostart=true                                         
autorestart=true                                       
startsecs=5                                            
numprocs=1

[program:] — заголовок секции. Нижеследующие параметры будут относится только к этому воркеру(демону)
command — команда на запуск файла. чаще всего путь к исполняемому файлу.
process_name — имя каждого инстанса воркера. Здесь есть тонкость — В мануале указано, что этот параметр не обязательный. Но у меня были проблемы с запуском нескольких инстансов воркера, если его не указывать. Дело в том, что имена процессов должны отличаться. Здесь помимо названия воркера указываем его порядковый номер.
stdout_logfile — говорит само за себя. куда перенаправляем стандартную консоль вывода.
stderr_logfile — то же самое, только для ошибок. Рекомендую указывать эти 2 параметра. Они могут очень выручить, когда придется разбераться почему падают ваши демоны.
autostart — как и следовало ожидать. запускаем воркеров при запуске супервизорда. Как правило при старте системы.
autorestart — Перазапуск воркера, если тот при выполнении одного из заданий упал с Exception'ом.
startsecs — сколько времени нужно ждать воркера, чтобы он запустился (не обязательный параметр)
numprocs — количество инстансов воркеров.

Наблюдения

Иногда при останове supervisor'а остается висеть на порту http сервера python - нужно найти кто висит

sudo netstat -nap | grep 9771

И грохнуть по pid процесс:

sudo kill 2342

Прописать параметры $_SERVER в конфиге supervisor можно через переменную environment:

[program:php-test]
command=php /path/file.php
environment=HTTP_HOST="blog-tree.com",SOME_SERVER_PARAM="my_param"

далее нам эти переменные будут доступны из $_SERVER['HTTP_HOST'] и $_SERVER['SOME_SERVER_PARAM']

Alembic migrations	2024/04/05 15:44	python, alembic
Python - Документация	2024/05/20 12:34	languages, python, book, pip, python-setuptools, easy install
Статьи	2024/05/26 22:49	languages, python, book, pip, python-setuptools, easy install
Python	2015/10/13 09:01	languages, python, book, pip, python-setuptools, easy install
Циклы for	2024/05/26 22:53	languages, python, book, pip, python-setuptools, easy install
SMTPLIB	2024/05/01 11:14	languages, python, book, pip, python-setuptools, easy install, smtplib, email
Запуск python скриптов	2016/01/31 14:41	languages, python, book, pip, python-setuptools, easy install, smtplib, email
Supervisor by python	2015/11/26 23:14	service, unix, linux, python, supervisor, initd

Библиотека знаний - python

Ссылки

Ссылки

Ajenti (Admin panel)

Ajenti (Admin panel)

csvkit - Преобразование Excel/(xlsx и xls) в CSV

csvkit - Преобразование Excel/(xlsx и xls) в CSV

Установка

Зависимости

Документация

PyDev remote debug

PyDev remote debug

Supervisor by python

Supervisor by python

Установка

apt-get

pip

Настройка

WEB GUI

supervisorctl

Наблюдения