IT-новости про Python, которые стоит знать

Собрали в одном месте самые важные ссылки
читайте нас в Telegram

     22.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Переиграй школьников в YOUNG CODERS PARTY

Предлагаем вам немного размяться и почувствовать себя на месте юных программистов.

Под катом серия предложенных участникам YOUNG CODERS PARTY задач (лишь слегка доработанных — чтобы вам было тоже интересно!). Присылайте свои решения до 28 декабря включительно; мы постараемся подвести итоги конкурса до Нового Года. Победители получат от нас призы — теплые толстовки, маски с принтами и стикерпаки! 

     22.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Как мы распознаем фото документов пользователей. Часть I

В работе нам часто приходится распознавать документы водителей или пассажиров для их верификации в приложении. Наша команда выработала свой подход к идентификации текста и фото, которым я хотел бы поделиться.

В первой части статьи кратко расскажу о том, как мы распознаем фото документов и текст на них. Во второй более предметно поговорю о моделях CRAFT, CRNN и их использовании. Приятного чтения!

     21.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Секреты генерирующего реферирования текстов

Эта статья посвящена основным современным моделям для генерирующего реферирования и генерации текста в целом: BertSumAbs, GPT, BART, T5 и PEGASUS, и их использованию для русского языка.

     21.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Сокеты в Python, чат в 50 строк

На очередной практике по Java, не предвещающей ничего необычного, преподаватель ворвался в аудиторию и с порога заявил: "Сегодня мы с вами познакомимся с сокетами и напишем прототип собственного чата".

     21.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Как работает цикл заказа такси в Яндекс Go. История вопроса

Мы строим цикл заказа такси — процессы, происходящие под капотом после того, как пользователь нажимает «Заказать». Поиск машины, назначение водителя, изменение адреса, оплата поездки — всё это части цикла. Ещё мы делаем инфраструктуру создания циклов, которая используется в Еде, Лавке, Доставке и других направлениях внутри Яндекса.

     21.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Наш опыт создания «Интенсива», или почему избежать ошибок не удастся

Закончился очередной звонок с разработчиком на испытательном сроке. Опять возникло ощущение, что это повторяется в сотый раз: вот уже несколько лет мы встречаем новых участников команды и почти всегда ведем их примерно по одному пути (за редким исключением). Я понимал, что у нас уже достаточно наработок, чтобы оформить их в некий курс. 

 

     20.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Torch Hub Series #1: Introduction to Torch Hub

In this tutorial, you will learn the basics of PyTorch’s Torch Hub.

     20.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Тестируем быстродействие трех библиотек Python

Передо мной стояла задача выбрать библиотеку для расчета на Python, использующего операции над матрицами. Я выбрал и протестировал несколько вариантов, как использующих видеокарту (GPU), так и работающие только на процессоре.

Использовал три библиотеки: Numpy, Pytorch и Numba.

     20.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Война или мир: используем MATLAB и Python вместе

В этом материале расскажу, как использовать MATLAB и Python вместе (в мире и гармонии). Эти два языка часто используются вместе для разработки приложений ИИ (настолько часто, что существуют прямой импорт и экспорт для сетей глубокого обучения через MATLAB, ONNX и TensorFlow). Вот несколько хороших примеров совместного использования MATLAB и Python: приложения для прогнозирования качества воздуха и алгоритм анализа настроения.

     20.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Распределенные сервисы с применением gRPC

Часто бывает так, что эффективная коммуникация – один из основных движущих факторов в современных программных системах, даже в мире, живущем по законам микросервисной архитектуры. Технология gRPC может справляться с этими требованиями. В этой статье будут рассмотрены некоторые основы gRPC, а еще мы реализуем первое клиент-серверное приложение с применением .NET. Кроме того, клиент на основе Python демонстрирует, насколько эффективной может быть коммуникация между различными сервисами.

     20.12.2021       Выпуск 418 (20.12.2021 - 26.12.2021)       Статьи

Странный мир Python, используемого крупными инвестиционными банками

Сегодня мы сквозь замочную скважину взглянем на группу программных систем, о которой общество знает очень мало. Я называю её «банковским Python». Реализации банковского Python, по сути, являются проприетарными форками всей экосистемы Python, которые используются во многих (но не во всех) крупнейших инвестиционных банках. Банковский Python сильно отличается от обычной разновидности Python, которую любят (или ненавидят) большинство людей.

 

     19.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Видео

Moscow Python Podcast. Автоматизация процессов (level: all)

В гостях у Moscow Python Podcast Python руководитель разработки ML систем компании СберДевайсы Денис Усачев. Поговорили с Денисом о том, для чего нужна автоматизация и о возможных вариантах автоматизации.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

О бедном бите замолвите слово

Когда все вокруг измеряют Гигабайтами, Петабайтами, Зетабайтами и т.д., все компании гордятся своей БигДатой, вспоминать о битах в приличном обществе воспринимается как моветон. Однако и биты иногда бывают полезны. Темой для разговора послужила одна типовая классическая задачка, лежащая в области опросов.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Эмуляторы и симуляторы vs реальные устройства для автоматизации тестирования

В этой статье рассмотрим особенности тестирования мобильных приложений с помощью эмуляторов/симуляторов и на реальных устройствах.Содержание:Что такое мобильные эмуляторы и симуляторы;Типы мобильных тестов;Инструменты/фреймворки автоматизации мобильного тестирования;Когда можно использовать эмуляторы/симуляторы, а а когда — стоит тестировать на реальных устройствах.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Стратификация. Как разбиение выборки повышает чувствительность A/B теста

Сегодня подробно обсудим применение стратификации для повышения чувствительности оценки AB экспериментов.

Вы узнаете: что такое стратифицированное семплирование; два способа точечной оценки выборочного среднего; в чём отличие стратификации и постстратификации; как стратификация влияет на дисперсию метрики.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Как сделать telegram-бота для игры в Тайного Санту

Перед Новым годом мы организовали тайного санту. Для упрощения процесса задумались о боте. Да, мы нашли на просторах гитхаба различные варианты, но решили не лишать себя праздничного веселья от создания бота на коленке. Меня зовут Вильданов Ринат, я python разработчик в Технократии, и я расскажу, что мы наделали. Возможно, описание нашего пути поможет и вам.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Заметки по языку R | Часть 2: Используем синтаксический сахар и приёмы Python в R

Заметки по языку R - это серия статей, в которых я собираю наиболее интересные публикации канала R4marketing из рубрики "#заметки_по_R".

В прошлый раз мы говорили о нетипичных визуализациях, сегодняшняя подборка состоит из описания приёмов, которые свойственны и горячо любимы пользователям Python, но большинство пользователей R о них не знают.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Агрегация ответов в краудсорсинге. Пример с открытой библиотекой Яндекса

Краудсорсинг позволяет размечать данные для разных задач, но популярнее всего, конечно, задачи классификации объектов — текстов и картинок. Обычно в краудсорсинге несколько человек размечают каждый объект, что требует агрегации — выбора верного ответа из представленных. Под катом я покажу, как агрегировать результат разметки с помощью двух алгоритмов: голоса большинства и алгоритма Дэвида-Скина.

     17.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Управляем генерацией ruGPT-3: библиотека ruPrompts

Наше семейство моделей ruGPT-3 уже нашло множество применений у сообщества: кто-то генерирует гороскопы, кто-то — факты о лягушках, статьи нейроуголовного кодекса, нейроновости и прочее. Модели накопили в себе массу знаний о нашем мире и способны подстроиться практически под любую задачу. Тем не менее, в данный момент подобная подгонка (fine-tuning) часто требует значительных вычислительных затрат, что не всегда позволяет использовать достаточно большие модели. В этом посте мы предлагаем сообществу новый инструмент для того, чтобы дообучать ruGPT-3 под свои нужды и делиться своими результатами с другими.

     16.12.2021       Выпуск 417 (13.12.2021 - 19.12.2021)       Статьи

Блеск и нищета Ansible

Иногда на своих внутрибанковских тренингах по Ansible я озвучиваю личную точку зрения на экосистему языка Python. На мой взгляд, она токсична, и располагает к боли и унижениям - эдакое садо-мазо, если угодно.