Всем привет! Эту неделю здесь с вами буду я @dizballanze. Спасибо @dcromster за приглашение.

Я Team Lead и backend разработчик (Python/Node.js). В последнее время больше Python 3.

Говорить будем про #Python, #OSS, котиков и другое )

@backendsecret если подключать экстеншен к ноде, в виде C кода, то гц к нему не прикасается ведь? Т.е. stop the world на этом участке нет?

Насколько я знаю GC в аддонах работает @Umren

@backendsecret скажи, ещё продолжается свистопляска между 2 и 3?

Python 2.7 по фичам зафиксирован, все новое появляется в 3й ветке и сейчас уже, ИМХО, новые проекты нужно начинать на 3ке @Stammru

Основная причина сидеть на 2.7 – поддержка пакетов, но сейчас уже очень многие пакеты поддерживают 3ку @Stammru

304/360 топовых пакетов в PyPI поддерживают Python3 py3readiness.org @Stammru

. @grevtsev @Stammru например, я ) Больше года на 3ке – полет нормальный

. @freiksenet_ru @Stammru не все идеально, конечно, но новая модель типов данных str/unicode мне кажется более удобной и правильной

. @freiksenet_ru @Stammru это довольно старый пост, интересно было бы увидеть свежую статистику

На тему Python 3 – в версии 3.5 будет очень удобный синтаксис для coroutines (async/await), то чего реально не хватало.

@backendsecret Вот ИМХО главная проблема питона - все двигается медленно. В JS async/await появился через месяц после появления стандарта.

@backendsecret В питоне надо годами ждать ценных изменений.

. @freiksenet_ru да, но в 3й ветке все равно добавление новых фич довольно быстро идет. От PEP до реализации async/await около недели

@backendsecret какого типа проекты пишешь на Python и node.js? Какие то веб-сервисы или просто сайтики?

. @wootsup в последнее время больше веб-сервисы, RESTful API для мобильных приложений.

@backendsecret @Stammru а профит, профит-тот в чем?

. @grevtsev unicode, новые конструкции вроде yield from, причесанный API (вызов super без аргументов итд), улучшенная стандартная библиотека

. @grevtsev но куда важнее то, что дальнейшее развитие языка будет в 3й ветке, чтобы начинать проект сейчас на python 2 нужны веские причины

@grevtsev @backendsecret @Stammru «Вы все геронтофилы, один я д`Артаньян», конечно же :D

@backendsecret давайте поговорим про yield from и его применении в продакшне! Серьезно. Я не пробовал просто. Можно пример? :)

. @grevtsev yield from в асинхронном io удобно использовать, чтобы делегировать часть функционала другому генератору

@backendsecret node.js и python в разных проектах или вместе бывает?

. @dmzkrsk бывало что использовал в одном проекте node.js и python. Чтобы, например, добавить какие-нибудь RT-фичи в дефолтный джанго-апп.

. @dmzkrsk в основном из-за того, что было много опыта с node.js и мало опыта с асинхронным python. Так смысла не много зоопарк разводить

@backendsecret К какой парадигме больше душа лежит?

. @grevtsev @mktums EventPool + async/await :)

. @webholt пока не определился ) Интересно и функциональное и ООП, думаю есть смысл под задачу выбирать

. @webholt нет у меня почему-то любимой парадигмы, видимо я как Python – мультипарадигмальный :)

@backendsecret а с какими фреймворкаи ты работаешь

. @dmitr_y django, flask, webapp2 (для app engine проектов), express (Node.js).

@backendsecret Расскажи о best practice для python standalone app пожалуйста!

. @askJuise при разработке long running процессов на #python нужно много внимания уделять расходу памяти. Модель памяти CPython такова...

. @askJuise что память никогда не возвращается системе и нужно мониторить, чтобы такие процессы много памяти не выделяли.

. @askJuise ну и стандартные советы:

Пользуясь случаем попиарю свой pet-проект: debugmail.io. Сервис для совместной работы над email рассылками в dev окружении.

А какие у вас pet-проекты? Присылайте ссылки с описанием – буду ретвитить.

@backendsecret датамайнинг, огромные графы с шахматами и куртизанками. Но не опенсорсю пока что)

@backendsecret *шутка про pet-проекты, идущие в школу через неделю*

@backendsecret mkdev.me, платформа для менторства + курсы по веб-разработке

@backendsecret yupe-project.ru - движочек для сайтиков и интернет-магазинов )

@backendsecret сегодня собираюсь перевести маленькую утилиту для конвертации статей на сайтах в пдф, позже дам ссылучку

kurs585.ru и мобильное предложение к нему. Полезно ювелирам на каждый день расчет цены золота в пробу 585 @backendsecret

@xomaa @backendsecret 2soseda.com - поиск комнаты или соседа для подселения

@backendsecret вот тот проектик для конвертации статейв пдфки про который я говорил github.com/polyx/HTMLtoPDF

. @dmitr_y кстати вот хороший пост о том, как правильно распространять cli-утилиты на Python
gehrcke.de/2014/02/distri…

@backendsecret самодельный аналог HoundCI для Atlassian Stash github.com/vassilevsky/fa… production ready, но ещё не 1.0

Кто что думает про type annotations в Python? ИМХО, фича не особо нужная.

Data streaming in #Python: generators, iterators, iterables rare-technologies.com/data-streaming…

@backendsecret дебажить проще, проверка на тип вывалиться раньше, а не после n вызовов

. @sanek_kh насколько я знаю никаких проверок CPython не делает, т.е. это что-то вроде комментариев

@backendsecret Для js хорошо работает (Flow), для питона думаю тоже. Считай это ещё одним линтером.

. @freiksenet_ru я так и воспринимаю, но мне кажется оно того не стоит, слишком много дополнительного кода, который мешает читабельности

@backendsecret Дело привычки, это может добавить читабельности если в коде много словарей и списков, тк ясно что внутри.

. @freiksenet_ru да, но в отличии от языков со статической типизацией – Python не валидирует аннотации и соответсвенно

. @freiksenet_ru поддерживать аннотации в актуальном состоянии будет достаточно сложно

@backendsecret Да, я это в теории. Нужен валидатор как Flow, с выводом типов.

@backendsecret В текущем состоянии согласен что бесполезно.

@backendsecret aif.io либа по анализу естественного языка, планируем делать чато-бота

. @mktums согласен

Coding style для контрибьютеров Django очень ок. Разумные отступления от PEP8 + специфичные для Django дополнения docs.djangoproject.com/en/1.8/interna…

Недавно углубился в системное программирование под linux и сокеты. Мне кажется всегда полезно копнуть на уровень ниже чем обычно работаешь.

SSH Kung Fu
blog.tjll.net/ssh-kung-fu/
много интересных способов использования ssh

Есть такой проект openresty.org, включает множество компонентов и позволяет разрабатывать полноценные проекты на lua под Nginx

Деплой через `git archive` или `git pull`?

cc @backendsecret

. @kmmbvnr использую git pull, но у git archive есть свои преимущества

HTTP Status Cats
flickr.com/photos/girliem…
котики, как и обещал )

. @RusAlexander крупный китайский e-commerce (вроде alibaba) используют openresty в продакшн

@backendsecret в догонку - песики :) httpstatusdogs.com

@backendsecret @RusAlexander cloudflare юзают. Собсно основной разработчик openresty @agentzh сам оттуда.

Если кто еще не видел – скриншоты обновленной админки #Django 1.9. pic.twitter.com/3Y6KncKuMh

Самое главное, что разметка шаблонов не изменилась – отличная новость для разработчиков пакетов под Django.

@backendsecret оформление админки уже сейчас можно попробовать. pypi.python.org/pypi/django-fl…

Large scale refactoring pocket.co/sojKY6
Хорошие советы о том как убедить начальство в необходимости рефакторинга :)

Что вы используете для dev-окружения? Для меня хорошо работает связка Vagrant+Ansible, которую также использую на CI для запуска тестов.

Минус работы из дома – соседи, которые затеяли громкий ремонт. Видимо сегодня придется работать из кафе.

Mock yourself, not your tests
hernantz.github.io/mock-yourself-…
Полезный пост о том, как не злоупотреблять моками при тестировании.

@backendsecret Очень хорошо! А то есть java стайл написания тестов, где мочится *все* и тестируется каждый implementation detail.

@backendsecret Такие тесты протухают очень быстро.

@backendsecret vagrant+puppet Какой CI используешь ?

Использую Team City на физическом сервере. После срабатывания хуков с гитхаба CI сервер запускает vagrant и затем тесты в нем
@NilzBor

@backendsecret vagrant+chef

@backendsecret Зачем так сложно? virtualenv уже не достаточно? Или для изоляция баз данных и подобного?

Все верно, нужно еще изолировать БД и другие зависимости, которые не поставишь в virtualenv @freiksenet_ru

Несоответствия и странности #Python
gist.github.com/DRMacIver/4751…
нужно знать недостатки и подводные камни языка, на котором работаешь.

Крутая шпаргалка по форматированию строк в #Python pyformat.info

@backendsecret вот еще неплохая библиотека для скрейпинга github.com/datalib/libext…

В uwsgi оч много фич – task queue, reverse proxy, static files serving, caching.Для небольшого проекта самое то, чтобы не разводить зоопарк

Ссылка по этой теме
lincolnloop.com/blog/uwsgi-swi…

Советы по работе с ненадежными API
blog.instavest.com/working-with-u…

@backendsecret Не написали про кешинг. Если данные информационные (взять рейтинг с йелпа), самое оно его закешировать нафиг.

О том как disqus масштабировал #django до 8млрд хитов в месяц.
blog.disqus.com/post/621878061…
Правда там больше про #varnish, но всеравно интересно

Кто как мониторит свою продуктивность? Я уже больше года использую rescuetime.com.

Во время сдачи проектов бывает такая статистика: pic.twitter.com/bexQdzlSN5

@backendsecret wakatime.com, но там только время в текстовом редакторе

И как, дополнительные метрики по коду бывают полезными? @ewnd9

Завтра в @GolangShow будет гость из Docker - и ему можно задавать вопросы! golangshow.com/post/2015/08-2… RT! /cc @rubyunderhood @backendsecret

@backendsecret откуда информацию по разработке черпаешь? часто вижу интересные вещи из pocket у тебя ;)

Раньше читал RSS, сейчас на это времени не хватает и читаю только weekly рассылки ну и твиттер @zulus

как там настраивать, какая активность является продуктивной? В rescuetime приходится часто вручную отмечать @gruz0

А вот здесь можно посмотреть список таких еженедельных рассылок на разные темы github.com/jondot/awesome…
@michael_borisov @zulus

да, с приложениями нет проблем, с сайтами уже сложнее, приходится раз в неделю поднастраивать, чтобы статистика не портилась @gruz0

. @mktums раньше тоже чисто его использовал, потом надоели баги в стиле "а на моей тачке работает" )

.@olebedev у #Django своя ниша - более-менее типичные контентные сайты. Что-то более кастомное, особенно с NoSQL я бы не стал делать.

.@olebedev @mikashkin для проектов своей ниши у #django много преимуществ, куча батареек проверенных, быстрая разработка.

.@olebedev @mikashkin Но нужно понимать, что это все не бесплатно и что-то сильно кастомное будет больно делать.

.@rusgautama @olebedev есть Django non-rel, но оно кажется совершенно не юзабельным. Проще взять Flask+Mongoengine.

.@olebedev @mikashkin также как на любом full-featured фреймворке

.@olebedev в посте вполне удачные способы оптимизации для django описаны.

.@l0kix2 @olebedev @mikashkin например, если проект должен использовать БД, которую не поддерживает ORM.

.@olebedev @l0kix2 @mikashkin realtime - согласен, фоновые задачи вполне ок Celery решает.

.@olebedev @rusgautama к счастью в этом направлении есть улучшения

.@olebedev #golang не панацея, у всех технологий своя сфера для применения и свою преимущества и недостатки.

. @rusgautama @olebedev пост на эту тему, автор рассказывает, как можно преодолеть этот недостаток #django
aeracode.org/2015/6/17/beyo…

.@rusgautama @olebedev сейчас, ИМХО, для асинхронного io нужно смотреть в сторону asyncio, который появился в 3.4

.@l0kix2 @olebedev @mikashkin никакой, ИМХО, в таких случаях проще использовать что-то легкое, чем пытаться делать на django

.@l0kix2 @olebedev @mikashkin т.е. это не специфичные для django проблемы, это проблемы большинства подобных фреймворков

.@olebedev @rusgautama никакой сложности, вполне удачная реализация, поддержка async/await

@backendsecret а ты рассказывал как контролируешь делегированные задачи? @rubyunderhood @iamstarkov

Задачи ставлю в трекер (basecamp) с назначенным сроком выполнения. Когда задача выполнена - разработчик открывает PR, тесты в котором ...

...должны быть зелеными и линтеры все должны успешно проходить. Далее цикл код-ревью и передача задачи в тестирование.

. @kotchuprik basecamp.com/tour

Спасибо @iamstarkov ! Сайт починен backendsecret.ru/stats/

Список всех awesome списков %)
getawesomeness.com

Недавно перевел шпаргалку по #Vim на русский
vim.rtorr.com/lang/ru/

Вот еще полезный ресурс по #vim
vimawesome.com
каталог плагинов с категориями и поиском

Программист получил работу в Google решив спрятанный в поиске тест nyv.me/l/yX4B

Недавно прочитал "Just for fun".
Отличная книга, интересно узнать про историю unix, linux и OSS.
amazon.com/Just-Fun-Story…

В #pocket появилась вкладка "Рекомендации"! pic.twitter.com/ONGodO1zJ7

Есть большая вероятность, что всем нам придется переходить на HTTP/2 в скором будущем docs.google.com/presentation/d…

Протокол в целом стал намного более сложным, по сравнению с относительно простым и текстовым HTTP/1.1.

Как вам кажется стоит ли использовать HTTP/2 с учетом его сложности и усилий на обновление инфраструктуры?

Еще и придется отказаться от костылей используемых годами - вроде спрайтов, склеивание css/js, domain sharding.

.@Borovikov вероятно придется использовать TLS, т.к. браузеры видимо будут только секьюрный HTTP/2 реализовывать.

Всякие прокси/варниши/фаерволы нужно будет переписывать и быстро это не получится сделать.
@Borovikov

Протокол обычно критикуют за то, что он лишь решает старые проблемы HTTP, вместо того, чтобы нацелеваться на будущее varnish-cache.org/docs/trunk/phk…

.@andreypopp @shuvalov_anton в HTTP/2 не нужно отдельные соединения делать для js/css, а значит можно грузить только то что нужно

.@andreypopp @shuvalov_anton а не все css/js хотя на странице возможно только малая часть используется

.@andreypopp @shuvalov_anton да, но с HTTP/2 накладные расходы на "грузить то что нужно" уменьшаются

.@andreypopp @shuvalov_anton согласен

Использование #python без ОС
lwn.net/Articles/64124…
интересный юзкейс от разработчиков железа

@jsunderhood @mishcherin @psyw @SelenIT2 отличная практика, надо предложить @backendsecret ввести подобное.

Code review best practice
kevinlondon.com/2015/05/05/cod…

Как писать модули для #python на Go 1.5 :O
blog.filippo.io/building-pytho…

Import and use #python packages in #nodejs.
github.com/mateogianolio/…

А вы пользуетесь какими-либо техниками повышения производительности? GTD/Pomidoro/etc?

Для меня работает только техника Get Shit Done aka "соберись, тряпка и иди работай" :)

Генератор переключатель на #python:

def toggle():
while True:
yield True
yield False

g = toggle()
next(g)

@backendsecret недавно начал использовать GTD. Pomodoro использую, но только когда сроки горят

.@lowl4tency тоже использую @rescuetime, обсуждали эту тему пару дней назад

Мне очень нравится техника «Если буду волоёбить, то выгонят ссаными тряпками и я не найду работу потому что я дно» 😊 twitter.com/backendsecret/…

@backendsecret, когда какое-нибудь УГ пилю — ставлю помидорки. Но обычно и так код затягивает, и получается продуктивно.

Кто-то спрашивал про long-running процессы на #python, вот проект на тему:
github.com/walkr/oi

Репозиторий с множеством бесплатных книг
github.com/vhf/free-progr…

thefuck - магическая утилита для исправления опечаток при работе в консоле :)
github.com/nvbn/thefuck pic.twitter.com/csIzQVtEWX

Я правильно понимаю, что с появлением ES6 всякие #coffeescript больше не нужны?

Коллекция шаблонов проектирования на #python
github.com/faif/python-pa…

@backendsecret Коллекция решений wordcount в разных стилях программирования на #python github.com/crista/exercis…

Если в вашей #github репе неправильно определяется язык – посмотрите сюда github.com/github/linguist

Письмо Линуса в начале разработке #linux
"small poll for my new operating system"
groups.google.com/forum/#!origin…

Сегодня последний день веду @backendsecret. Так что если есть вопросы – не стесняемся :)

Крутые цветовые темы для текстовых редакторов (Visual Studio, Eclipse, Qt, #SublimeText, LiteIDE, #Vim, Notepad++)
themebow.com

Моя неделя на @backendsecret заканчивается через считанные часы. Всем спасибо за активность :)

Напоминаю что с вами был @dizballanze, если я кому-то вдруг не успел надоесть за эту неделю – подписывайтесь :)