profile и pstats — Performance Analysis — PyMOTW 3

Открытый курс машинного обучения. Тема 6. Построение и отбор признаков

В рамках сегодняшней статьи хочется обзорно описать три похожих, но разных задачи:

• feature extraction and feature engineering – превращение данных, специфических для предметной области, в понятные для модели векторы;
• feature transformation – трансформация данных для повышения точности алгоритма;
• feature selection – отсечение ненужных признаков.

Отдельно отмечу, что в этой статье почти не будет формул, зато будет относительно много кода.

Спектральный анализ сигналов нелинейных звеньев АСУ на Python

В моей статье [1] рассмотрен метод гармонической линеаризации для исследования систем управления, содержащих нелинейные элементы.

Этот метод может быть использован в том случае, когда линейная часть системы является низкочастотным фильтром, т.е. отфильтровывает все возникающие на выходе нелинейного элемента гармонические составляющие, кроме первой гармоники [2]. Поэтому логическим продолжением моей первой статьи будет гармонический анализ рассмотренных нелинейных элементов. Кроме этого нужно рассмотреть аппаратную альтернативу методу гармонической линеаризации.

Украшаем жизнь с помощью gdb PrettyPrinting API

Что gdb можно как-то улучшать на питоне, знает каждый, кто хоть раз заглядывал в документацию. А кто хоть раз просматривал ее по диагонали, знает про такую штуку, как «Pretty Printers» — которые вроде позволяют gdb красиво печатать разные сложные структуры. Я документацию по диагонали просматривал, хотя особо и не вникал. Но однажды, набирая в очередной раз что-то вроде (все примеры из исходников MariaDB, которые я дебажу по много раз каждый божий день, иногда исключая выходные):
 

Django и работа с большими таблицами БД Django

Слайды доклада

PyQt5. Работаем с QML QtQuick (Сигналы и слоты) PyQt Qt QML

Пример приложения с использованием библиотеки PyQt5 и интерфейсом на QML Qt Quick

Создаем бота для Skype. Шаг за шагом, через REST API и на Python

Год назад Microsoft представила платформу для создания ботов под Skype. Платформа предоставляет удобный формат сообщений, можно отправлять карточки с кнопками, как в телеграмме, одним словом, выглядит все очень круто. 

Недавно мне потребовалось написать бота для Skype. И несмотря на то, что тема подымалась на хабре ( например), я столкнулся с некоторыми сложностями, мне очень не хватало step-by-step гайда по работе с REST API. 

PyPy разработка: нативное профилирование в VMProf PyPy profile

Статья о новом пакете vmprof

Скачиваем историю переписки со всеми пользователями ВКонтакте с помощью Python

Для лингвистического исследования мне понадобился корпус прямой речи, порожденной одним человеком. Я решил, что для начала удобнее всего использовать собственную переписку в ВК. Это статья о том, как скачать все сообщения, которые Вы когда-либо отправляли своим друзьям, используя программу на Python и API ВКонтакте. Для работы с API будем использовать библиотеку vk.

Магическое введение в алгоритмы классификации

Разбираемся с построением workflow с Apache Airflow

Apache Airflow - утилита оркестрации сложных workflow и цепочек обработки данных. Если у вас ворох cron задач/скриптов, которые делают всю бизнес логику - вы можете попробовать Airflow для упрощения системы. 

Советы оптимизации производительности для Django Django

Короткая статья с простыми методами

Публикуем твитты из RSS по фильтру слов

Экземпляр класса, класс и статические методы

Статья про статические методы в Python

Docker-Compose: запускаем Flask

Статья описывает, как в PyCharm можно работать с Docker для запуска приложений

Запускаем простой блог на Wagtail CMS (Django) — часть 3, заключительная Django

Третью часть про Wagtail CMS я решил посветить тем моментам, которые помогли мне снова полюбить Django. Благодаря большому сообществу, которое развивает эту CMS, любой найдет в ней что-то для себя.

В заключительной части будут затронуты следующие моменты:

• StreamField
• API + React
• Разработка для e-commerce

Пишем простой сервер для бота на Django и Django-channels

Годы жизни русских писателей – немного кода и графиков

Приготовим CSV с годами жизни русских писателей. Порисуем с Plot.ly и посмотрим на онлайновый редактор графиков.

Трассировка распределенных Python приложений с Zipkin

Вкачай свой Python: классы и ООП