IT-новости про Python, которые стоит знать

Собрали в одном месте самые важные ссылки
консультируем про IT, Python

     14.08.2024       Выпуск 557 (12.08.2024 - 18.08.2024)       Статьи

Правильный инструмент для аналитики нагрузочного тестирования

В данной статье хочу рассказать про сервис load-testing-hub, главная задача которого это сбор, агррегация, анализ и визуализация данных о нагрузочном тестировании. Расскажу о том, какие проблемы решает сервис, как он помогает оценивать производительность выпускаемых релизов, а также поделюсь примерами его использованияРассмотрим основные возможности load-testing-hub, такие как создание наглядных графиков и отчетов, сравнение результатов нагрузочных тестов

     13.08.2024       Выпуск 557 (12.08.2024 - 18.08.2024)       Статьи

Гексы, Uber, или Учим автотесты ориентироваться на карте

Наша команда занимается поддержкой и развитием системы, предназначенной для развития сети пунктов выдачи. Одним из компонентов этой системы является Открытая карта. Хочу рассказать, как мы научили автотесты находить на ней точки, подходящие для открытия нового ПВЗ.

     12.08.2024       Выпуск 557 (12.08.2024 - 18.08.2024)       Статьи

Уроки, извлеченные из масштабирования до многотерабайтных датасетов

В этой статье я расскажу об уроках, которые вынес при работе с многотерабайтными датасетами. Объясню, с какими сложностями столкнулся при увеличении масштабов датасета и как их удалось решить.Я разделил статью на две части: первая посвящена масштабированию на отдельной машине, вторая — масштабированию на множестве машин. Наша цель — максимизировать доступные ресурсы и как можно быстрее выполнить поставленные задачи.

     12.08.2024       Выпуск 557 (12.08.2024 - 18.08.2024)       Статьи

Сводка от pythonz 04.08.2024 — 11.08.2024

А теперь о том, что происходило в последнее время на других ресурсах.

     12.08.2024       Выпуск 557 (12.08.2024 - 18.08.2024)       Статьи

Почему порой так сложно вводить текст в терминал

Как-то раз я спросила у пользователей Mastodon, что их не устраивает в работе с терминалом, и одним из ярких замечаний оказалось «редактирование уже введённой команды». Мне эта проблема тоже реально знакома. Несмотря на то, что ввод текста и его редактирование является «базовой» задачей, мне потребовалось около 15 лет каждодневной работы с терминалом, чтобы привыкнуть к использованию Ctrl+A для перехода к началу строки (или Ctrl+E для перехода в конец — я использовала вместо этого Home/End). Так что сегодня речь пойдёт о том, что ввод текста порой вызывает сложности. Я также поделюсь с вами кое-какими советами, которые сама была бы рада услышать давно.

     10.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

python тестирование с помощью pytest(ч.1)

Я знаю, что разработчики по-разному относятся к тестированию программного обеспечения. Вот некоторые примеры подхода к тестам, которые встречались мне за время работы:

     10.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Как вкусно приготовить «Сельдерей» (Celery)

Celery можно любить или не любить, но избежать работы с ним практически невозможно. Однако, не все инженеры задумываются о том, что происходит в момент вызова Celery задач. И в этой статье я хочу рассказать, как именно происходит вызов и отправка сообщения, к чему может привести игнорирование того, что Celery под собой имеет транспорт, и что может произойти, если этот транспорт начнет сбоить.

     09.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Интеграция LLM в корпоративные чат-боты: RAG-подход и эксперименты

Мы занимаемся генеративными сетями в целом и языковыми моделями в частности. В этой статье мы опишем наш опыт работы с большими языковыми моделями (LLM), их внедрение для обработки корпоративных данных, а также поделимся нашими результатами и выводами.

     09.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Медведь бухгалтер или эксперимент над личными финансами на python и polars

Личные финансы: важная тема в области финансовой грамотности. Хорошо бы понимать, сколько приходит, сколько уходит, откуда и куда, чтобы планировать долгосрочные финансовые цели. Для этого можно использовать базовую аналитику банка, приложения для учета финансов, но у них есть минусы.Но если вы знаете python и хотя бы раз сталкивались с pandas, для вас финансовая аналитика может показаться куда более интересной.

     09.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Playwright: Лучшая альтернатива Selenium. Первое знакомство

Этот фреймворк уже превзошел Selenium по многим параметрам и продолжает набирать популярность. В статье я подробно рассказываю о его преимуществах и особенностях. Материал станет первой частью нового цикла.

     09.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Как на самом деле определять автора с помощью компьютера?

Атрибуция — определение авторства — имеет много применений как в науке, так и в приземленных задачах, например, в судебной практике. Ниже мы будем говорить о текстовой атрибуции, и иногда от того, кто автор текста, зависит судьба крупной суммы денег, иногда — карьера или свобода человека, а иногда людям просто интересно, кто же написал то или иное произведение.

     09.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

От текста к краткому изложению: библиотека Sumy

Sumy — это инструмент для автоматического обобщения текстов на Python. В основе работы лежит задача резюмирования текста, которая позволяет получать краткие и четкие версии больших объемов информации.

     08.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Учебные материалы

Книга: «Программирование на Python с помощью GitHub Copilot и ChatGPT.»

В наши дни люди пишут компьютерные программы совсем не так, как раньше. Используя GitHub Copilot, можно простым языком описать, что должна делать программа, а искусственный интеллект тут же сгенерирует ее. Узнайте, как создавать и улучшать программы на Python с помощью ИИ, даже если прежде вы не написали ни строчки компьютерного кода.

     11.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Релизы

watchdog - 4.0.2

Библиотека и набор утилит для мониторинга событий файловой системы. Скачать можно по ссылке: https://pypi.python.org/pypi/watchdog/

     08.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Рекурсивный отбор признаков. Динамический шаг в танце feature selection

Эта статья основана на ситуации, с которой я столкнулся лично. Моё мнение может не совпадать с чьим-то мнением, но я постараюсь донести свою точку зрения и помочь вам лучше понять и решать аналогичные задачи. Предлагаю начать.

     07.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Как построить асинхронное Python-приложение для рассылки уведомлений о событии

В этой статье рассмотрим создание асинхронного приложения на Python с использованием библиотеки httpx для рассылки уведомлений пользователям о предстоящих событиях, на которые они зарегистрировались.

     07.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Как я разработал собственную рекомендательную систему вакансий c hh.ru, и почему вам это тоже может пригодиться

Недавно, просматривая рекомендации на популярном сайте поиска работы по моему резюме «Senior Python Backend», я заметил, что система предлагает вакансии, весьма «далекие» от моей специализации. Это натолкнуло меня на размышления о том, как можно улучшить процесс подбора вакансий для IT‑специалистов. В результате я решил за два вечера, создать свою собственную рекомендательную систему, которая бы более точно учитывала специфику работы в сфере разработки программного обеспечения.

     07.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Python, CryptoAPI и российские криптопровайдеры

В статье описывается работа в Python с криптопровайдерами, прежде всего российскими, через CryptoAPI. Особое внимание уделено получению штампа времени - рассмотрено взаимодействие между клиентом и Time-Stamp сервером и формирование запроса в соответствии с Time-Stamp протоколом.

     07.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Семантический поиск (homemade)

Основой семантического поиска может являться ML задача Sentence Similarity, а если быть еще конкретнее, то это Semantic Textual Similarity. Модели, обученные под эту задачу, способны оценивать насколько близки предложения по своему смыслу. Всё, что нам дальше остается, так это засунуть модель в некоторую поисковую систему... Но тут давайте по порядку

     06.08.2024       Выпуск 556 (05.08.2024 - 11.08.2024)       Статьи

Практический кейс реализации AutoML в банке

В этой статье мы хотим поговорить про конкретный кейс разработки процесса AutoML для моделей оценки вероятности дефолта клиентов (PD) в рамках экспресс-продуктов малого бизнеса. Расскажем, как выстроен наш процесс, как мы к этому пришли, с какими проблемами столкнулись, как их решили и как в дальнейшем планируем тиражировать на другие продукты банка.