IT-новости про Python, которые стоит знать

Собрали в одном месте самые важные ссылки
читайте нас в Twitter

     28.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Обнаружение вторжений с применением технологий машинного обучения. Часть 2

В первой части статьи я рассказала некоторые теоретические основы про системы обнаружения вторжений и использование машинного обучения при решении задач информационной безопасности. Также рассмотрела данные, которые будут использоваться, их анализ и предварительную подготовку. Во второй части я продолжу рассказывать о реализации системы обнаружения вторжений с применением машинного обучения и подробно рассмотрю обучение моделей, а также анализ их работы и выводы, исходя из полученных результатов.

     27.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Как создать Python-приложение, которое предупредит о приближении астероида

В статье я постарался показать, как объединить космос и технологии в одном приложении, которое через API оповестит пользователей по SMS о приближающемся к Земле астероиде.

     27.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Разделяй и запускай: делим тестовый стенд между департаментами

В настоящей статье делюсь опытом разработки и внедрения в процессы компании оптимизационного решения на базе математического программирования. Материал расширил исследовательскими элементами и локальным мини benchmark'ом.

     27.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Бот авторизаций в Telegram для корпоративных чатов

В статье мы с главным разработчиком нашего бота (спойлер: стажером команды, которая проявила инициативу и вызвалась заняться этой нетривиальной задачкой) рассказываем о своем опыте разработки в Telegram API на основе библиотек Telebot и Telethon. Еще объясним, как смогли обойти ограничение Telegram по выгрузке в 200 пользователей и настроили интеграцию с корпоративным LDAP-каталогом. Ну и куда без дашборда статистики активности Tg-каналов в Fine BI. В свое время нам не хватило прикладного DIY-материала, и мы проходили весь путь с граблями и шишками самостоятельно. Надеемся, что эта статья поможет кому-то из вас. А те, кто уже прошел этот путь, подскажут нам новые пути решения и возможности апгрейднуть наш сервис.

     01.07.2024       Выпуск 551 (01.07.2024 - 07.07.2024)       Статьи

Мега-Учебник Flask Глава 16: Полнотекстовый поиск (издание 2024)

Это шестнадцатая часть серии мега-учебников Flask, в которой я собираюсь добавить возможность полнотекстового поиска в Microblog.

     27.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Классификация комбинаторных объектов на примере латинских квадратов

Хочу поделиться некоторым опытом по написанию программ для перечисления комбинаторных объектов из заданного класса (в примере будут рассматриваться латинские квадраты, хотя на картинке, для зрелищности, показан латинский куб).

     26.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

SVG-виджеты для tcl/tk. Градиентная заливка и прозрачность. Часть II

Продолжим знакомство с svg-виджетами для tcl/tk. Напомним, что рассматриваемые примеры, сам пакет svgwidgets и интерпретаторы tcl/tk с необходимыми пакетами можно найти на github-е

     26.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Разработка фреймворка для автоматизации загрузок данных из источников: Case Study для металлургической компании

Аналитика данных и витрины аналитики — источники аналитической отчетности, на основе которой принимаются стратегические управленческие решения. Однако на рынке нет готовых фреймворков, которые полностью удовлетворяют потребности в извлечении данных.

 

     26.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

strtree — классификатор строк на основе регулярных выражений

Мы поговорим про задачу классификации строк с помощью автоматически определяемых паттернов, а в конце я предоставлю пример такой процедуры с кодом на Python. Пользоваться мы будем небольшой open-source библиотекой strtree.

     25.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Анимация доски Гальтона на Python и manim

Многие видели математические видео с канала 3blue1brown. Оригинальный стиль, отличные визуализации самых разных математических понятий. Как они были сделаны? Грант Сандерсон, автор канала 3blue1brown, написал специальную библиотеку на питоне, manim, для создания своих видео. Библиотека оказалась популярной, был сделан форк и сложилось сообщество для ее дальнейшего развития. Мне стало интересно и я захотел научиться делать похожие видео, для примера будет анимация доски Гальтона. Математика присутствует, анимация интересная, что из этого вышло - написано в статье.

     25.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Об ускорении некоторых тестов на нормальность из библиотеки SciPy

В моей публикации вас ждут: небольшой ликбез по теории вероятностей, развивающий её интуитивное и практическое понимание; детективная история о том, как решение дифференциального уравнения привело нас к двум важнейшим статистическим характеристикам выборочных последовательностей; ревизионизм в области проверки распределений на соответствие гауссовскому и объяснение пресловутого p-value с нуля за 5 минуты.

     25.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Обнаружение вторжений с применением технологий машинного обучения. Часть 1

Совсем недавно я провела несколько вебинаров на тему использования машинного обучения в сфере информационной безопасности и теперь хочу поделиться с вами данной тематикой в нескольких статьях.

     25.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Вопросы и обсуждения

Python Bytes: #389 More OOP for Python?

Очередной выпуск англоязычного подкаста Python Bytes

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Дообучение модели GPT-2 (RUS) для генерации описаний заведений на основании названия, рубрики и оценки

В данной работе представлен процесс дообучения модели генерации текста на основе архитектуры GPT-2. Целью работы является демонстрация возможностей применения дообученной модели для генерации текстов, соответствующих определённым наименованиям заведений, рубрикам и оценкам, выставленных пользователями.

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Как освоить Streamlit для Data Science

Перевод статьи "Как освоить Streamlit для Data Science", Автор: Chanin Nantasenamat Примечание переводчика: я нашла эту статью достаточно полезной при своем погружении в науку о данных, и по гайдам автора смогла решить многие свои научные задачи.

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Обнаруживаем атаки с помощью ML

Использование искусственного интеллекта позволяет существенно увеличить эффективность работы различных средств обеспечения кибербезопасности. Сегодня мы попробуем решить задачу обнаружения использования вредоносного программного обеспечения злоумышленником.

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Мега-Учебник Flask Глава 15: Улучшенная структура приложения (издание 2024)

Это пятнадцатая часть серии мега-учебника Flask, в которой я собираюсь реструктурировать приложение, используя стиль, подходящий для более крупных приложений.

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Python logging — вывод лога на QTextWidget (PyQt6)

Было консольное Python приложение, в котором много где пишутся логи с использованием модуля logging. Затем прикрутил GUI на PyQt6, конечно хочется продублировать логи в какой-нибудь виджет в уголочке. Категорически не хочется ничего менять в консольной части, и спокойно использовать дальше стандартный logging.

     24.06.2024       Выпуск 550 (24.06.2024 - 30.06.2024)       Статьи

Netmiko: упрощение сетевой автоматизации на Python

Если вы, как и мы, когда-то пытались автоматизировать конфигурации и управление сетью через SSH, то вы знаете, насколько это может быть сложным процессом. И тут на сцену помогает Netmiko.Netmiko — это обертка над библиотекой Paramiko, разработанная для сетевых инженеров.

     22.06.2024       Выпуск 549 (17.06.2024 - 23.06.2024)       Статьи

Он победил LLM RAG: реализуем BM25+ с самых азов

Статья началась с того, что я наткнулся на громкий и забавный результат: алгоритм BM25, разработанный аж в восьмидесятые годы, победил продвинутые методы векторного поиска на LLM.