Добавляем в Path : c:\Python27\ и c:\Python27\Scripts

Сделать это можно кликнув на моём компьютере правой кнопкой, свойства, дополнительно, переменные среды. Там ищем переменную Path и в ней через «;» дописываем два пути указанные выше.

Ставим Python
http://www.python.org/download/
Я ставил 2.7

Ставим easy_install
http://pypi.python.org/pypi/setuptools
Внизу страницы ищем подходящий выбранной версии Python
Я выбрал setuptools-0.6c11.win32-py2.7.exe

Скачиваем и распаковываем PIP
http://pypi.python.org/pypi/pip
Внизу страницы ссылка на скачку архива
Скачали, распаковали, открываем командную строку — идем в папку с распакованным архивом.
Оттуда пишем
python setup.py install
Всё pip поставили.

открываем НОВУЮ cmd

Ставим virtualenv и django

pip install virtualenv

pip install django

По мере вспоминания нужных пакетов я буду обновлять пост.

В команду ЛинкТопа требуется

Python/Django разработчик, желающий иметь интересную работу и стабильную оплату.

Опыт разработки Web-приложений и сайтов — обязателен. Это могут быть как сайты, сделанные для клиентов, так и проекты «для себя».
Обязательно:
Наличие желания быстро учиться новому!
Пунктуальность
Изобретательность

Требования

Никаких других специфичных требований мы не выдвигаем.
Оплата сдельная.
Работа удаленная.
Если кандидат проживает в Москве — можно работать в нашем офисе, рядом с метро Калужская.

Отправляйте свои резюме

Свои резюме присылайте по адресу 123@linktop.ru

Не забывайте прикладывать ссылки на выполненные работы!

Говнокод

Gleb Pospelov

@makk1ntosh Скриншот с говнокодом, явно из презентации Андрея Солнцева http://goo.gl/WIFr1, а вот откуда он его взял http://goo.gl/WIFr1

function RetTic($URL){
    $yurl = sprintf('http://bar-navig.yandex.ru/u?ver=2&show=32&url=%s',$URL);
    $st = file_get_contents($yurl);
    if (preg_match('/value="([0-9]{1,5})"/', $st, $matches)) {
    return $matches[1];
}

Функция получения ТИЦ сайта на Python:

def RetTic(URL):
    import urllib
    yurl = 'http://bar-navig.yandex.ru/u?ver=2&show=32&url=%s' % URL

    f = urllib.urlopen(yurl)
    st = f.read()
    import re
    m = re.search(r'value="([0-9]{1,5})"', st)

    try:
        tic = m.group(1)
    except:
        tic = 0;

    return tic

В догонку: наличие сайта в яндекс каталоге на Python

def RetYaca(URL):
    import urllib
    yurl = 'http://bar-navig.yandex.ru/u?ver=2&show=32&url=%s' % URL

    f = urllib.urlopen(yurl)
    st = f.read()
    import re
    m = re.search(r'<textinfo>(?P<author>[\W\w]+)</textinfo>', st)

    try:
        yaca = m.group(1)
    except:
        yaca = '';

    if len(yaca) > 2:
        return True
    else:
        return False

Примерно два года я пользовался услугами WebFaction и был доволен. Там есть и возможность устанавливать/собирать свои приложения и БД не занимает память, положенную мне по тарифному плану как на виртуальных серверах. А еще мне не нужно было настраивать почту и DNS и всем этим можно было управляться через удобную панель. Словом — это классный хостинг, если нет больших нагрузок, нужно много места под файлы, трафик(он ограничен, но его более чем достаточно),  и нет никакого желания заниматься настройкой сервера. А еще там хорошие цены на хостинг. И support: очень оперативно, по делу, вежливо и на английском. Последнее для кого-то может стать проблемой.

Добавление Email через панель WebFaction

Но со временем я всё таки понял: сервера в Техасе, пинг за 200мс и на сервере кроме меня есть еще много пользователей и их процессов, что не может положительно влиять на производительность моих приложений.  Слишком уж большая разница между 127.0.0.1 и общественным сервером за океаном

И вот, пришел день, когда мы занялись разработкой сервиса TaxiPult, и хостинг перестал устраивать не только меня, но и моего коллегу Ивана Маркеева.

Вопроса куда переносить проекты уже не стояло. К этому моменту я присмотрелся к облачному хостингу Scalaxy. Обычная VPS нас не устраивала, так как процедура увеличения ресурсов в этом случае болезненна и чревата долгим перерывом в работе, а у большинства хостинговых компаний всё сводится к ответу технической поддержки в стиле: «Переходите на выделенный сервер».

Scalaxy  в свою очередь предоставляет возможность увеличения ресурсов даже без перезагрузки сервера(исключение — «жесткие диски»). А для случаев когда нагрузка резко возростает, можно настроить автоматическое увеличение используемых слотов(влияет на количество доступной оперативной памяти, CPU, и внешней сети). И конечно же оплата идет за используемые ресурсы — как только пик нагрузки спадет, вы станете платить меньше.

На момент написания статьи Scalaxy предоставляет возможность выбрать одну из 6 linux систем: Debian 5 и 6, Ubuntu 10.04 LTS, CentOS 5.5 и OpenSUSE 11.3.

Выбранная мною конфигурация на первое время: Ubuntu 10.04 LTS, 1 Слот без возможности расширения(512 mb RAM, SWAP 1 GB, Внешняя сеть 5 Mbit/s), 5 гб жесткий диск и всё это обходится в 516 рублей в месяц. IP адрес: 25 рублей в месяц.

Важно! При резервировании большого количества слотов для расширения, память вашего сервера будет занята этим резервом и не будет доступна вашим приложениям. В цифрах: выбрав 1 слот и максимальное их количество: 32 вы займете сразу ~450 мб оперативки из 512 мб.

Не правильная настройка слотов

Собственно настройка

Дабы ничего не забыть — я специально создам новый сервер с указанной выше конфигурацией.

Сразу после загрузки созданного сервера, возможно подключится к нему по ssh. Пароль root’а использовался при создании сервера.

Наша цель: настроить веб-сервер с поддержкой php, django/uwsgi, спрятать это за nginx и установить mysql и Subversion

Для начала обновим кеш пакетов apt и получим обновления

apt-get update
apt-get upgrade

Теперь установим самое простое:

Установка mysql:

apt-get install mysql-server

Во время установки нас спросят root пароль для сервера БД.

Установка Subversion:

apt-get install subversion

Установка Apache2 и php

apt-get install libapache2-mod-php5 php5-mysql

Это установит Apache2, Php5 и модуль php для работы с базой данных Mysql.

Мне гараздо комфортнее работать с mc поэтому предлагаю установить и его:

apt-get install mc

Настройка Apache2

По умолчанию, Apache2 работает использует порт 80, но мы сменим его на 8080, чтобы освободить место для nginx.

Для этого отредактируем файл /etc/apache2/ports.conf:

mcedit /etc/apache2/ports.conf

Меняем:

NameVirtualHost *:80
 Listen 80

На:

NameVirtualHost *:8080
 Listen 8080

Сохраняем (F2)  и выходим из редактора (F10).
Перезагрузим Apache2 для применения настроек:

service apache2 restart

Настройка PHP: Установка eAccelerator

При обработке каждого запроса, php каждый раз читает скрипты и исполняет их. Это занимает сравнительно много времени. Сравнительно с тем, что их можно не читать каждый раз, а они раз скомпилировать и использовать запускать скомпилированные файлы. Именно это ползволяет делать eAccelerator, ускоряя тем самым работу php порой в 10 раз!

apt-get install php5-dev

cd /tmp/
wget http://bart.eaccelerator.net/source/0.9.6.1/eaccelerator-0.9.6.1.tar.bz2
tar xvjf eaccelerator-0.9.6.1.tar.bz2
cd eaccelerator-0.9.6.1
phpize
./configure --enable-eaccelerator=shared
make
make install

Теперь подключим eAccelerator к PHP:

cd /etc/php5/conf.d/
mcedit eaccelerator.ini

В файл вставим следующее:

zend_extension                  = "/usr/lib/php5/20090626/eaccelerator.so"
eaccelerator.shm_size           = "16"
eaccelerator.cache_dir          = "/var/cache/eaccelerator"
eaccelerator.enable             = "1"
eaccelerator.optimizer          = "1"
eaccelerator.check_mtime        = "1"
eaccelerator.debug              = "0"
eaccelerator.filter             = ""
eaccelerator.shm_max            = "0"
eaccelerator.shm_ttl            = "0"
eaccelerator.shm_prune_period   = "0"
eaccelerator.shm_only           = "0"
eaccelerator.compress           = "1"
eaccelerator.compress_level     = "7"
eaccelerator.allowed_admin_path = "/var/www/eaccelerator"

А еще нужно создать каталоги для кеша:

mkdir /var/cache/eaccelerator
chown root:www-data /var/cache/eaccelerator
chmod g=rwx,o= /var/cache/eaccelerator

Перезагрузим Apache2:

service apache2 restart

Теперь php скрипты будут работать в разы быстрее.

Вернемся в домашний каталог

cd

Установка uWSGI

Перед тем как собрать Nginx, uWSGI должен быть скомпилирован, чтобы в последствии быть включенным в сборку Nginx.

apt-get install build-essential python-dev libxml2-dev
wget http://projects.unbit.it/downloads/uwsgi-0.9.7.tar.gz 
tar xfz uwsgi-0.9.7.tar.gz
cd uwsgi-0.9.7
make -f Makefile.Py26

Теперь скопируем исполняемый файл в /usr/local/sbin:

cp uwsgi /usr/local/sbin

А еще нужно скопировать стандартные настройки uwsgi  в каталог /etc/nginx:

mkdir /etc/nginx
cp nginx/uwsgi_params /etc/nginx
cd ..

Nginx

Далее нам потребуется установка пакетов с исходниками. А для того, чтобы их получить нам потребуется изменить список источников apt.

mcedit /etc/apt/sources.list

Файл /etc/apt/sources.list у меня содержит это:

 deb http://ru.archive.ubuntu.com/ubuntu/ lucid main restricted
 deb http://ru.archive.ubuntu.com/ubuntu/ lucid-updates main restricted
 deb http://ru.archive.ubuntu.com/ubuntu/ lucid universe
 deb http://ru.archive.ubuntu.com/ubuntu/ lucid-updates universe
 deb http://ru.archive.ubuntu.com/ubuntu/ lucid multiverse
 deb http://ru.archive.ubuntu.com/ubuntu/ lucid-updates multiverse
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid main restricted
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid-updates main restricted
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid universe
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid-updates universe
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid multiverse
 deb-src http://ru.archive.ubuntu.com/ubuntu/ lucid-updates multiverse
 deb http://security.ubuntu.com/ubuntu lucid-security main restricted
 deb http://security.ubuntu.com/ubuntu lucid-security universe
 deb http://security.ubuntu.com/ubuntu lucid-security multiverse

Сохраняем (F2) выходим(F10)

apt-get update

Теперь можем продолжать с nginx:

apt-get install libssl-dev
 apt-get build-dep nginx
 apt-get source nginx
 cd nginx-0.7*
 mcedit debian/rules

Добавьте эти строки в конец конфигурационных параметров. Незабывайте добавлять обратный слэш «\» чтобы все параметры считались за одну строку. Если SSL Вам не понадобится — проигнорируйте соответствующую строку.

--with-http_ssl_module \
--add-module=$(CURDIR)/../uwsgi-0.9.7/nginx

dpkg-buildpackage
cd ..
sudo dpkg -i nginx*.deb
echo "nginx hold" | sudo dpkg --set-selections
echo "nginx-dbg hold" | sudo dpkg --set-selections
mkdir -p /usr/local/nginx/uwsgi_temp

Supervisor

Управлять uWSGI процессами будем с помощью Supervisor. В Ubuntu 10.04 поставить его можно с помощью apt-get:

apt-get install supervisor

Настройки uWSGI будут передаваться параметрами коммандной строки в конфиге Supervisor’а.

Каждое отдельное отдельное приложение описывается в /etc/supervisor/conf.d/*.conf
Таким образом для запуска приложения timeline  я создал timeline.conf:

[program:timeline]
command=/usr/local/sbin/uwsgi -s /sites/timeline.sock --env DJANGO_SETTINGS_MODULE=timeline.settings -w "django.core.handlers.wsgi:WSGIHandler()" --pythonpath /home/timeline/www --pythonpath /home/timeline/www/timeline --home /home/timeline/www/timelineenv --processes 5 --master --harakiri 120 --max-requests 5000 --vacuum
directory= /home/timeline/www/timeline
environment=DJANGO_SETTINGS_MODULE='timeline.settings'
user=www-data
autostart=true
autorestart=true
stdout_logfile=/home/timeline/logs/uwsgi.log
redirect_stderr=true
stopsignal=QUIT

Nginx

Для каждого сайта в nginx нужно создать отдельный файл конфигурации в /etc/nginx/sites-available .
Так выглядит мой timeline файл:

server {
    listen 80;
    server_name my.hostname.ru;
    access_log /home/timeline/logs/nginx-access.log;
    error_log /home/timeline/logs/nginx-error.log;

    root /home/timeline/www;

    location / {
         if (-f /home/timeline/www/downtime) {
             return 503;
        }
        uwsgi_pass unix:///sites/timeline.sock;
        include uwsgi_params;
    }

    error_page 502 503 504 @maintenance;
    location @maintenance
    {
     root /home/timeline/www/public/maintenance;
     rewrite ^(.*)$ /maintenance.html break;
    }

}

Обратите внимание, что здесь заготовлена конфигурация на случай ошибок сервера — посетитель неработающего сайта получит красивое сообщение, которое лежит в maintenance.html

Запускаем!

Перезапустите Supervisor:

service supervisor restart

Это перезапустит Supervisor с новыми настройками, а также запустит uWSGI процессы. Кстати у меня не всегда эта комманда перезапускала Supervisor.
Приходилось писать

service supervisor stop
service supervisor start

тогда был эффект.

Перезапустим nginx:

service nginx resrtart

Subversion

Про настройку Subversion я уже писал в материале «Установка и настройка subversion svn и web сервера apache»

Заключение

Я описал наш опыт настройки сервера. Поэтому в статье такое странное сочетание и php и python/django. Буду признателен за указание на опечатки, ошибки. И конечно буду рад, если этот материал сохранит кому-то драгоценное время!

Подписывайтесь на RSS, пишите комментарии, рекомендуйте этот блог друзьям!

Это короткий пост об опыте переезда на сервер в облаке Scalaxy.

За сегодня перенес 2 сайта. Один на WordPress (который вы сейчас и читаете), а другой сайт нашей компании на Joomla.

Чтобы оценить улучшения в производительности, я провел два теста с помощью Siege. Под нагрузкой был Joomla сайт.

Before on Webfaction:

Transactions:		        1412 hits
Availability:		      100.00 %
Elapsed time:		      473.60 secs
Data transferred:	        6.26 MB
Response time:		        0.84 secs
Transaction rate:	        2.98 trans/sec
Throughput:		        0.01 MB/sec
Concurrency:		        2.52
Successful transactions:        1412
Failed transactions:	           0
Longest transaction:	        2.09
Shortest transaction:	        0.73

Now on Scalaxy:

Transactions:		         520 hits
Availability:		      100.00 %
Elapsed time:		      135.39 secs
Data transferred:	        5.81 MB
Response time:		        0.58 secs
Transaction rate:	        3.84 trans/sec
Throughput:		        0.04 MB/sec
Concurrency:		        2.23
Successful transactions:         520
Failed transactions:	           0
Longest transaction:	        1.12
Shortest transaction:	        0.44

Во время тестирования загрузка CPU сервера Webfaction была 25%
Сервера на Scalaxy: 6.9%

Плюс к этому: при переезде мы достигли снижения пинга с 300мс до 90мс (В офисе, йота, дома тоже, поэтому значения могут немного отличаться от «проводных» тестов)

Хочу поделиться тем как мы открывали свою фирму и становились ‘независимыми’.

Сначала пара слов о психологических барьерах, которые мешают принять решение.

Основной причиной почему люди боятся перейти из разряда шестеренок механизма предприятия в управляющего(или одного из управляющих) — это боязнь рисковать и не чувствовать ‘прочной земли под ногами’ в виде ежемесячной зарплаты, которая «всегда будет и ничего с ней не случится».

Ерунда! Когда потребуется вас сократят(если совесть есть) или вынудят на увольнение по собственному желанию(если нет совести — наиболее частое явление).

Преодолеть этот психологический барьер удается в первую очередь тем работникам «на дядю», которые работают за % от сделок. Например менежеры по продажам. В этом случае их доход зависит от них самих. Они это чувствуют и данное чувство их мотивирует к еще более продуктивной работе.

Думаю с пониманием «хорошо работаешь, хорошо получаешь» разобрались. Причем «хорошо» — не значит много. Главное результат. Можно прилагать больше усилий, но с умом и результаты (опять же — могут) быть на много лучше.

Теперь о другой необходимой способности управленца: способности управлять людьми. Это та часть о которой все забывают и путают с быть боссом, что в свою очередь для многих является синонимом «думать о том как потратить кучу бабла». Следует помнить, что процесс управления людьми и делами компании на временном отрезке начинается несколько раньше получения бешеных дивидендов. Забудь об этом ты или парнтер — все пропало.

Не любой человек может превратиться из специалиста в своей области в управленца. Такому специалисту стоит продолжать повышать свою квалификацию и искать как можно более высокооплачиваемые и интересные позиции.

Теперь о понятии независимости.

От кого мы становимся независимыми когда открываем компанию? От босса который загоняет нас в рамки (временные, зарплатные, дресскодные и некоторые другие).

Для тех у кого есть четкое виденье что нужно делать и как правильно, но с текущим начальством договорить не получается — открыть компанию и встать у ее руля это выход.

Первые шаги к открытию.

Во первых некоторые жизненные ситуации повлияли на выбор основного направления деятельности. Выбрали то, что скорее начнет приносить прибыль, а проекты «на перспективу» отодвинули до момента появления достаточного запаса средств.

Мы решили сразу выйти из тени и открыть юр.лицо.

ООО и сам процесс требует рабочего места. Месяц ушел на поиск маленького офиса — до 20 кв м и по стоимости около 20 тысяч рублей месяц, гденибудь в ЮЗАО.

Это было действительно сложно:

В ЮЗАО нет заводов, которые сейчас все раздают под аренду. Риэлторы — лентяи. И жадные. После того как вы найдете офис через риэлтора — придется заплатить еще и агентское вознаграждение. Оно обычно соответсвует месяцу аренды в найденном помещении. Поэтому большинство агентов с радостью найду для вас площадь в 200 тысяч квадратных километров, а вот 20 кв м их вводит в грусь тоску и чаще всего они отмораживаются и никогда не позвонят. Хамы — слов других нет.

Но из этого првила удалось найти исключение. Появился такой человек который принял наше задачу и через 2 недели молчания мы получили 2 хороших варианта и тут же дали ответ. На следующий день мы уже заключили договор на аренду.

Следующим шагом была регистрация ООО. Мы заплатили 10 000 рублей компании которая сделала все за нас. Потребовалось 1 раз сходить к нотариусу и в налоговую подать документы. В налоговой меня сопровождал сотрудник этой компании.

После этого перезаключили договор аренды на ООО и смогли пдать документы на открытие счета.

Из тех расходов которые мы не планировали было вознаграждение агенту и стоимость офиса была заметно больше чем закладывалось в бюджет. Но офис нам очень понравился и мы его взяли.

Теперь у нас был офис. Но в нем не было мебели. Нам удалось раздобыть сначала 1 стол и кресло, два гостевых стула. Из дома я притащил моник, компьютер и принтер. Все одно рабочее место было готово. Со вторым решили пока подождать — не горело.

В качестве интернета мы выбрали йоту, телефон решили взять у манготелекома. С местными ‘властями’ и интернетами решили не свзяываться — пока телефон протянешь, интернет.

Через месяц мы поставили второй стол и шкафы. Еще один компьютер из дома и второе рабочее место готово.

С самого первого месяца мы были в плюсе.

Далее из расходов не связанных непосредственно с нашими услугами были: покупка 1с, в тч налогоплатильщика, такском для сдачи отчетности в эл.виде,телефон от манго. В пенсионный фонд съездить пришлось для подключения к такскому.

В цифрах:

Всего на открытие заготовили около 120 тысяч рублей.

Примерно половина ушла сразу на аренду офиса, остальное разошлось на услуги по открытию ООО, натариусов, копирование документов, открытие счета в банке, мебель в офис и бухгалтерский счет.

Можно сказать что об открытии это все.

Настройка Eclipse: Pydev Aptana и другие плагины

Здесь я опишу какой софт я буду использовать и как его настроить, где скачать какие плагины и как их активировать.

IDE

Начнем с основного инструмента — IDE.
Использовать я буду Eclipse.

Где скачать:
http://www.eclipse.org/downloads/
Мне нужна версия дл 32битного Linux

http://www.eclipse.org/downloads/download.php?file=/eclipse/downloads/drops/R-3.6.1-201009090800/eclipse-SDK-3.6.1-linux-gtk.tar.gz

Я распаковал архив в домашнюю директорию.
Для запуска потребовалось поставить default-jre

sudo apt-get install default-jre

Это установит Java Runtime Environment.

Плагины

В эклипс поставим Aptana, Pydev(Теперь входит в Aptana — отдельно ставить не надо), редактор django, sql explorer  и mysql jdbc коннектор.

Aptana

Установка почти всех плагинов одинакова.
Идем в меню Help->Install New Software
Вставьте адрес http://download.aptana.com/studio3/plugin/install в поле Work With  и нажмите Enter
В появившейся таблице выберите нужный плагин и нажмите Next, потом еще раз, согласитесь с лицензией. После установки могут потребовать перезапустить Eclipse.

SQL Explorer

Всё как и с Aptana — адрес для скачивания:

http://eclipsesql.sourceforge.net/

Mysql Connector Java

http://www.mysql.com/downloads/mirror.php?id=398132#mirrors

Скачиваем коннектор. Распаковываем архив, кладем mysql-connector-java-5.1.14-bin.jar  любое удобное место.

Установка драйвера Mysql для SQL Explorer

Window->Open Perspective->Other…-> SQL Explorer
Появятся боковые панели данного плагина.
На левой панели жмем иконку Create New Connection Profile.
Жмем кнопку Add/Edit Drivers, В появившемся окне слева переходим в JDBC  Drivers
Выбираем Mysql Driver, Справа жмем Set Default, затем Edit
В появившемся окне переходим на закладку Extra Class Path, жмем Add JARs  выбираем файл mysql-connector-java-5.1.14-bin.jar.  После этого List Drivers  и в выпадающем списке внизу выбираем com.mysql.jdbc.Driver. Жмем OK. Окно Preferences (Filtered) покажет нам Mysql Driver  с установленой галкой. Жмем ОК.

Теперь подключимся к Mysql Server. В окне  Create New Connection Profile введите имя подключения, драйвер, URL
Пример:jdbc:mysql://localhost/baza
Введите Username & Password соответствующие вашему подлюкчению. Ok — Вы подключитесь к БД.

Этой установки мне хватает для работы над Python и Django приложениями.