Python Academy — один канал вместо тысячи учебников Чат канала: @python_academy_chat Сотрудничество: @zubar89 Канал включён в перечень РКН: https://rkn.link/TVu
Применяем pathlib взамен os
В Python 3 стандартная библиотека включает модуль pathlib
, предоставляющий функцию Path
, которая обеспечивает все необходимое для эффективной работы с путями к файлам.
Одно из наиболее впечатляющих преимуществ использования pathlib
- это упрощение работы с путями за счет использования Path
вместо os.path.join
, представляя более простой и изящный метод, как показано на изображении.
В общем, этот модуль предлагает замену функциям для работы с файловыми путями из модуля os
, таким как os.mkdir
или os.path
, на более удобные альтернативы.
#path #os
Студенты часто слышат про стажировки в Яндексе, но не все понимают, чем вообще занимаются стажеры и как туда попасть. Ответы на эти вопросы дали Антон и Никита в новом выпуске шоу «1х1» на YouTube канале Яндекса.
Стажеры совмещают учебу с интересными задачами в разработке высоконагруженных сервисов, исправляют баги, а еще ходят на планерки. За каждым новичком закреплен ментор, который помогает решать проблемы и развивать навыки.
Попасть на такую стажировку можно в любое время года.
Реклама. ООО "ЯНДЕКС" ИНН 7736207543
Установление SSH-соединения с сервером
Библиотека paramiko
предоставляет возможность подключения к серверам через протокол SSH2
, позволяя выполнять те же действия, что и при использовании стандартной утилиты ssh
в Linux
.
Модуль paramiko
отличается простотой в использовании, и вы можете ознакомиться с примерами его основных методов на представленном изображении. В качестве любопытного факта, название Paramiko
происходит от слияния слов "параноик" и "друг" на языке эсперанто.
Для установки пакета используйте менеджер пакетов pip
в привычном порядке. Подробную документацию можно найти здесь.
#python #paramiko #ssh
Особенности статических методов
Основное отличие статических методов от методов экземпляра заключается в их привязке к классу, а не к отдельному объекту. Это означает, что их можно вызывать непосредственно через класс.
Статические методы не получают ссылку на экземпляр (self) или класс (cls) в качестве аргументов, что делает их независимыми от состояния объекта или класса. Следовательно, они не могут изменять состояние объекта или класса.
Существует два основных способа определения статического метода. Менее распространенный — назначение метода классу, используя функцию staticmethod
для оборачивания исходного метода.
Однако более предпочтительным является использование staticmethod
как декоратора, что упрощает объявление статических методов непосредственно внутри класса.
#python #staticmethod
Использование аннотаций типов в Python
Python, язык с динамической типизацией, позволяет работать с переменными различных типов. Иногда это может привести к ошибкам из-за неправильного использования типов .
Начиная с версии 3.6, Python поддерживает аннотации типов для переменных, атрибутов классов, аргументов функций и их возвращаемых значений, что помогает улучшить читаемость кода и предотвратить ошибки, связанные с типами данных.
#python #typing
Загрузка файлов асинхронно
Если у нас есть список URL
картинок для загрузки, использование простого цикла for
позволит нам загрузить их последовательно, по одной за раз.
Однако, для задач, включающих загрузку большого количества маленьких файлов, параллелизация может заметно ускорить процесс.
Для параллелизации мы можем использовать ThreadPoolExecutor
из модуля concurrent.futures
. Этот инструмент позволяет выполнить функцию загрузки в нескольких параллельных потоках, где в конструкторе необходимо указать максимальное количество потоков для одновременного выполнения.
С помощью метода .map(download, urls)
можно развернуть функцию загрузки на каждый URL
из списка, обеспечивая их параллельную обработку.
Важно понимать, что так как загрузка файлов является IO-операцией, данный метод не ускоряет выполнение кода в прямом смысле, а скорее позволяет начать загрузку следующего файла, не ожидая завершения предыдущего.
#python #threading
Сортировка списков по ключу
У списков есть метод sort()
, который сортирует элементы. Также есть аргумент reverse
, с помощью которого можно отсортировать в обратном порядке при значении True
.
Но еще есть аргумент key
, отвечающий за критерий сортировки. Он принимает функцию, которая применяется к каждому элементу. Возвращаемый результат и есть критерий, по которому произойдет сортировка.
В коде на картинке у нас есть список из словарей, которые содержать описания машин. И в качестве мы отсортировали список по годам их выпуска, то есть по ключу 'year'
.
Также вместо написания обычных функций были применены анонимные, чтобы закрепить недавнюю тему о них.
#списки
Современный способ сериализации, десериализации и валидации данных
adaptix - гибкая и легко конфигурируемая библиотека для сериализации и десериализации данных.adaptix
работает с нативными dataclass
, NamedTuple
, TypedDict
. Ваши модели не зависят от библиотеки и не требуют наследования от каких-либо специальных классов, позволяя моделям оставаться чистыми, а вам - следовать принципу инверсии зависимостей.
Также, библиотека позволяет легко создавать свои правила для конвертации данных и группировать их, соответствуя принципу DRY.
Особое внимание стоит обратить на возможность преобразования стилей названий полей, что полезно в web приложениях.
Приятным бонусом будет то, что adaptix до двух раз быстрее чем pydantic v2 (бенчмарки).
#python #typing #adaptix
Работаем с атрибутами объектов
Помимо привычного обращения к атрибутам объектов через точку, в Python есть 4 специальных функции: getattr
, setattr
, delattr
и hasattr
.
По названиям можно понять, что первые три отвечают за получение, установку и удаление атрибута. А последний проверяет, существует ли атрибут с указанным названием у объекта или нет.
Во всех функциях первыми двумя аргументами идут объект и название атрибута в виде строки. В setattr
также нужно передать новое значение для атрибута.
На практике использование подобного — довольно редкий случай, но иногда может сильно выручить, так что берите на вооружение.
#python #tips
Запись экрана в Windows с помощью Python
Для записи экрана в Windows используя Python
существует несколько библиотек, однако наиболее эффективной оказалась d3dshot.
Библиотека d3dshot
использует системные библиотеки DXGI
и Direct3D
для быстрого и надежного захвата экрана.
Эта библиотека идеально подходит для создания игровых ботов.
#python #d3dshot
Получила «серебро»: нейросеть Сбера Kandinsky заняла второе место по популярности среди разработчиков по версии AI-ресурса с open-source решениями Hugging Face
При этом лидером стала Stable Diffusion. Однако по темпам роста Kandinsky все же сумела заполучить «золото».
Кроме того, разработчики нейросети поделились итогами года Kandinsky. Всего за 2023 год пользователи сгенерировали с её помощью более 200 млн изображений, а аудитория выросла до 12 млн человек.
#kandinsky
Думаете о карьере в сфере IT — начните с Python. Этот язык рекомендуют в качестве первого языка программирования, и для начала обучения вам не понадобятся технические знания и навыки.
Запишитесь на бесплатный курс Нетологии «Основы Python: создаём телеграм-бота». Программа акцентирована на практике. За 5 занятий вы погрузитесь в логику и синтаксис языка, изучите основные инструменты для написания кода. С нуля разработаете планировщик задач и создадите полезного Telegram-бота, которым сможет пользоваться кто угодно.
Попробуйте
Реклама. ООО “Нетология“. Erid LatgBc2x6
Как парсить данные сторонних сайтов без проблем? Крутим прокси
Если вы занимались сбором данных во «внешнем мире», то знаете, как этот мир жесток. Парсер сторонних сайтов может спокойно наткнуться на блокировки, задержки и другие проблемы, которые замедляют работу или вообще делают парсинг невозможным.
Ребята из финтех-компании Точка сделали свой инструмент, который помогает избежать лимитов по IP и капчи — единый кастомный прокси-сервер со своей логикой ротации. О том, как это делали и как работает инструмент, читайте на Хабре.
Что ещё внутри:
— Как не получились отдельные Python-модули.
— Что такое MITM (этакий хакерский вид атаки) и зачем он тут нужен.
— Схемы запросов и параметры прокси-сервера.
Читать
Делаем планировщик задач
К моему удивлению, далеко не все знают про пакет schedule
, который позволяет планировать задачи и повторять их через промежуток времени.
Основной его плюс в том, что он максимально интуитивный и имеет гибкий функционал. А еще schedule
не требует внешних зависимостей и сам в целом легковесный.
Здесь на самом деле даже объяснять особо нечего, логика методов в этом пакете понятна на примерах.
#python #schedule
Работа с методом str.replace() в PythonPython
предлагает множество удобных встроенных методов для работы со строками. Один из таких методов - str.replace()
, который используется для замены частей строки.
Метод принимает два основных аргумента: первый - это подстрока, которую нужно заменить в исходной строке, а второй - это подстрока, на которую происходит замена.
Кроме того, существует третий необязательный аргумент, определяющий количество замен старой подстроки на новую. Если он не указан, метод заменяет все вхождения.
#python #replace
Картографическая визуализация с использованием FoliumFolium
обеспечивает интеграцию данных на карты, позволяя создавать как фоновые картограммы, так и размещать на картах векторные, растровые и HTML
элементы в виде маркеров.
Эта библиотека поддерживает пользовательские наборы тайлов от MapBox
или Cloudmade
.
В арсенале Folium
имеются различные типы маркеров, от простых маркеров местоположения со стандартными листовками, содержащими всплывающие окна и HTML
подсказки, до возможности встраивания изображений, видео, а также GeoJSON
и TopoJSON
объектов.
Посмотреть результат выполнения кода со скрина можно тут -- https://i.imgur.com/QhNDb5I.png
#python #folium
Слияние аудио и видео потоков
Проблема с получением видео в высоком качестве со звуком с YouTube
связана с использованием технологии DASH (Dynamic Adaptive Streaming over HTTP)
, которая не предусматривает наличие звуковой дорожки в потоке.
Решением является отдельное получение аудио и видео потоков и их последующее объединение с использованием программы ffmpeg
.
Необходимо выбрать соответствующие аудио и видео потоки, затем использовать полученные URL
в команде ffmpeg
для запуска процесса загрузки и слияния потоков.
#python #ffmpeg #pytube
Хотите узнать, подходит ли вам анализ данных? Попробуйте решить 4 задачи аналитика.
У Практикума есть бесплатный курс по основам профессии. Внутри — азы языка Python, интерактивный сюжет и практика на 4 кейсах из разных областей.
→ Пройти курс бесплатно
Сбербанк открыл кампус «Школы 21» в Ярославле на 300 рабочих станций. Его запустили в партнёрстве с правительством Ярославской области. Дизайн помещений создан с учетом региональной айдентики, кластеры школы носят имена людей, прославивших Ярославскую область.
«Наше завтра будет невозможно без цифровых технологий. Все сферы без исключения — наука, сельское хозяйство, архитектура, машиностроение, медицина — будут опираться на суперсовременные цифровые технологии, на специалистов в области искусственного интеллекта», — заявил Глава Сбера Герман Греф, выступая на церемонии открытия кампуса.
Он рассказал, что «Школа 21» готовит специалистов по 14 инженерным специальностям и будет их расширять. Сейчас готовится новых кампусов еще в 16 регионах России. 9 из них откроют уже в этом году.
Jingle Bio — лучший конструктор страниц портфолио
Без особых усилий отображайте свои цифровые достижения на элегантной и удобной странице портфолио. Демонстрируйте свои проекты, навыки, опыт и достижения в одном месте. концепция не оригинальна (аналогов много), но исполнение, пожалуй, самое продвинутое. Тут можно сразу видеть обновления контента, да и вообще персоницифировать страницу.
Создайте свою собственную страницу портфолио и постройте свой персональный бренд, чтобы поднять свою карьеру на новый уровень. И самое главное — это бесплатно!
erid: LjN8KEAmm
1 февраля в 19:00 состоится третий Backend Meetup от X5 Tech
Бэкенд-сообщество вновь собирается, чтобы обсудить 4 доклада от специалистов по Python и Java.
Основные темы: DDD в Django, ElasticSearch в роли базы данных нулевой нормальности, почему кодинг — не главное, а также практический опыт применения чистой архитектуры.
Спикеры:
— Александр Логинов — менеджер направления HR и монетизации, X5 Tech
— Максим Столпасов — руководитель команды разработки, X5 Tech.
— Константин Никифоров — руководитель команды разработки, X5 Tech
— Вадим Ваганов — ведущий эксперт разработки, Газпромбанк
— Павел Лукьянов — руководитель Python практики, ГК Юзтех
Регистрация на YouTube трансляцию
Реклама. ООО "Корпоративный центр ИКС 5", ИНН 7728632689
Из-за дефицита IT-специалистов в РФ до 31 января любой желающий может попробовать себя в IT с полного нуля и начать обучение IT-профессии бесплатно! Узнайте про дальнейшее трудоустройство в ведущие IT-компании для восполнения кадрового дефицита.
Для этого нужно:
- Перейти по ссылке
- Заполнить анкету и ответить на вопросы (занимает менее 3 минут)
- На основании ваших ответов вы сразу узнаете, подходит ли вам сфера IT и сможете ли вы в ней работать
Реклама. ООО "ЭДЭКС". ИНН 1685012824.
Нейронка от Сбера обошла GPT-3.5-turbo по качеству ответов на английском языке. На русском и так всё было хорошо. Теперь же, благодаря тесту MMLU, стало известно, что и на родном языке Шерлока Холмса правильность ответов GigaChat PRO на 6% выше, чем у разработки от OpenAI.
То чувство, когда можешь в англ лучше, чем его носитель.
@bugnotfeature
Python в ЕГЭ
Ты же знаешь, что с помощью этого языка можно решить большинство заданий экзамена по информатике?
23 января Коля Касперский — препод онлайн-школы Вебиум — покажет, как решать самые каверзные задания по информатике, в том числе на Питоне!
❗️ Важно! Чтобы трансляция была для тебя максимально продуктивной, заранее реши эти же задания или хотя бы просто познакомься с ними самостоятельно. Скачивай пробник здесь: /channel/webium_school_bot?start=prob24_python
Кстати, если тебя тревожат баллы и по другим предметам, по этой же ссылке ☝🏻 ты сможешь скачать остальные пробники. Скорее переходи и заканчивай школу без пересдач!
Работа с данными в Python используя PydanticPydantic
- это библиотека для Python
, предназначенная для парсинга и валидации данных. Она использует статическую типизацию для атрибутов классов, что облегчает проверку данных при создании объектов.
Этот инструмент особенно полезен при работе с JSON
: он автоматизирует проверку структуры, необходимых полей и значений. Pydantic
поддерживает не только стандартные типы данных, но и специализированные, такие как email, URL-адреса и номера платежных карт.
Для более подробного примера и документации можно обратиться сюда.
#python #pydantic
Использование функции zip в Python
Функция zip
в Python
формирует итератор, объединяющий элементы из нескольких списков. Это удобно для одновременного перебора элементов нескольких списков в цикле for
или для реализации параллельной сортировки.
Пример:
# Допустим, у нас есть два списка
list1 = [1, 2, 3]
list2 = ['a', 'b', 'c']
# Используем функцию zip для объединения этих списков
zipped = zip(list1, list2)
# Теперь мы можем перебрать объединенные элементы
for num, letter in zipped:
print(f"Число: {num}, Буква: {letter}")
# Вывод:
# Число: 1, Буква: a
# Число: 2, Буква: b
# Число: 3, Буква: c
Обработка видео с помощью MoviePyMoviePy
- это удобный пакет для выполнения различных задач по редактированию видео, включая обрезку и склейку клипов, добавление видеоэффектов и редактирование аудиодорожки.
Пакет достаточно прост в освоении, и базовые принципы его использования можно увидеть на примере. В данном случае, мы открываем два видеофайла, соединяем их в один, обрезаем получившийся клип, уменьшаем громкость звука и сохраняем итоговый результат.
Стоит учитывать, что обработка видео, особенно больших файлов, может занять значительное время.MoviePy
особенно полезен, когда необходимо автоматизировать обработку большого количества видео по единому алгоритму.
#python #moviepy
Управление лимитом рекурсии в Python
В Python
отсутствует оптимизация хвостовой рекурсии, что часто приводит к ошибке RecursionError
при разработке рекурсивных алгоритмов.
Однако, используя модуль sys
, можно узнать и даже изменить максимально допустимую глубину рекурсии. Несмотря на это, следует быть осторожным с увеличением лимита, так как каждый вызов рекурсии потребляет значительное количество памяти.
В большинстве случаев предпочтительнее использовать итеративные подходы, такие как циклы, вместо рекурсии.
#python #recursion
Три шага, чтобы начать переход в IT без волнений
Переходить в неизвестность тревожно. Вот что поможет сделать ситуацию яснее и безопаснее:
1) разобраться, как устроена профессия;
2) попробовать бесплатно выучить основы;
3) узнать больше об учёбе.
У Яндекс Практикума есть эти шаги в бесплатном курсе по основам Python-разработки. Программу составили опытные разработчики и методисты, чтобы вы сами могли освоить базу Python.
На курсе вы:
— узнаете, какие задачи решает бэкенд-разработчик;
— будете писать код на Python — с первого урока;
— создадите программного помощника Анфису;
— узнаете, как устроено полноценное обучение в Практикуме.
После бесплатного курса вы сможете принять спокойное, взвешенное решение.
Начните действовать: разберитесь бесплатно, что к чему в Python
Отправка электронных писем через SMTP в PythonSMTP (Simple Mail Transfer Protocol)
- это протокол, позволяющий отправлять электронные письма. В стандартной библиотеке Python
доступен пакет smtplib
, который реализует функциональность SMTP
.
Для установления соединения с почтовым сервером используется класс SMTP_SSL
, который также обеспечивает шифрование данных. Для этого классу передаются адрес сервера и порт.
Авторизация на сервере осуществляется с использованием метода login
, в который передаются логин и пароль пользователя.
Для отправки электронных писем используется метод sendmail
, который принимает адрес отправителя, адрес получателя и текст сообщения. Важно отметить, что в конце написаного кода следует закрыть соединение с сервером с помощью метода quit()
.
Однако стоит учесть, что некоторые почтовые сервисы могут иметь ограничения и требования к безопасности. Например, для работы с Gmail может потребоваться включить поддержку "доступа к ненадежным приложениям" и настроить двухфакторную аутентификацию.
Пример использования smtplib
для отправки электронного письма:
import smtplib
smtp_server = "smtp.example.com"
smtp_port = 465 # SSL-порт
smtp_username = "your_username"
smtp_password = "your_password"
server = smtplib.SMTP_SSL(smtp_server, smtp_port)
server.login(smtp_username, smtp_password)
from_email = "your_email@example.com"
to_email = "recipient@example.com"
subject = "Тема письма"
message = "Текст письма"
server.sendmail(from_email, to_email, f"Subject: {subject}\n\n{message}")
server.quit()