Простой Python. Современный стиль программирования. 2-е изд.

Введение

Как и обещает название, книга познакомит вас с одним из самых популярных языков программирования — Python. Издание предназначено как для начинающих программистов, так и для тех, кто уже имеет опыт в написании программ и просто желает добавить Python к списку доступных ему языков.

В большинстве случаев изучать компьютерный язык проще, чем человеческий, — в нем меньше двусмысленностей и исключений, которые приходится запоминать. Python — один из самых последовательных и понятных компьютерных языков, он сочетает в себе простоту изучения, простоту использования и большую выразительную силу.

Компьютерные языки состоят из данных — аналогами в разговорной речи являются существительные — и инструкций (или кода), которые можно сравнить с глаголами. Изучить нужно будет и то и другое: вы освоите основы кода и структур данных и узнаете, как их объединить. Затем перейдете к более сложным темам, а программы, которые вы будете читать и писать, станут длиннее и сложнее. Если провести аналогию с работой по дереву, мы начнем с молотка, гвоздей и небольших кусков древесины, а во второй половине книги обратимся к более специализированным инструментам, которые можно сравнить с токарными станками и другими более сложными устройствами.

Вам нужно знать не только сам язык, но и то, что с его помощью можно делать. Мы начнем с языка Python и его стандартной библиотеки, готовой к работе прямо «из коробки». Помимо этого, я покажу вам, как находить, загружать, устанавливать и использовать качественные сторонние пакеты: касаться узких тем или рассматривать сложные трюки не буду, а сделаю акцент на том, что после десяти лет работы с Python считаю действительно полезным.

Несмотря на то что книга представляет собой введение в Python, в ней мы затронем и несколько дополнительных тем, с которыми, на мой взгляд, следует ознакомиться еще на начальном этапе. Работе с базами данных и Интернетом мы тоже уделим внимание, однако не станем забывать, что технологии меняются очень быстро — теперь от программиста на Python общество ждет знаний об облачных технологиях, машинном обучении и создании потоков событий: основную информацию по этим темам вы также здесь найдете.

Язык Python имеет некоторые специальные функции, работающие лучше, чем адаптированные стили программирования из других языков. Например, использование ключевого слова for и итераторов — более прямой способ создания цикла: пользоваться им гораздо удобнее, нежели вручную инкрементировать переменную-счетчик.

Когда вы изучаете что-то новое, бывает трудно определиться с тем, какие слова являются терминами и какие понятия на самом деле важны. Иначе говоря, тестировалась ли эта функциональность? Я выделю некоторые термины и понятия, которые имеют особое значение в Python. Код, написанный на языке Python, можно будет увидеть даже в самых первых главах.

Подобные примечания я буду делать, когда что-то может быть непонятным или же существует более питонский способ решить проблему.

Python неидеален. Я обращу ваше внимание на то, что кажется сомнительным и чего следует избегать, и предложу альтернативные варианты.

По некоторым темам, таким как наследование объектов, MVC или проектирование REST для работы с Интернетом, мое мнение может отличаться от общепринятого. Вам самим решать, к кому прислушаться.

Для кого эта книга

Эта книга для всех, кто заинтересован в изучении одного из самых популярных во всем мире языков программирования. Наличие или отсутствие опыта с другими языками программирования не имеет значения.

Что нового во втором издании

Что изменилось со времени выхода первого издания?

• Добавилось около 100 страниц, в том числе с изображением котиков.

• Количество глав удвоилось, но сами главы стали короче.

• В начале книги появилась глава, посвященная типам данных, переменным и именам.

• Рассмотрены новые особенности Python, такие как f-строки.

• Рекомендованы новые или улучшенные сторонние библиотеки.

• Во всей книге присутствуют новые примеры кода.

• Для начинающих разработчиков добавлен текст с описанием аппаратного и программного обеспечения.

• Более опытные разработчики могут ознакомиться с библиотекой asyncio.

• Рассмотрен новый стек технологий: контейнеры, облачные технологии, наука о данных и машинное обучение.

• Добавлены подсказки, с помощью которых вы сможете найти работу программиста на Python.

Что не изменилось? Примеры, в которых используются плохие стихотворения и утки. Они с нами навсегда.

Структура книги

В первой части излагаются основы языка программирования Python: главы 1–11 следует читать по порядку. Я оперирую простейшими структурами данных и кода, постепенно составляя из них более сложные и реалистичные программы. Во второй части (главы 12–22) показывается, каким образом язык программирования Python используется в определенных прикладных областях, таких как Интернет, базы данных, сети и т.д.: эти главы можно читать в любом порядке.

Вот краткое содержание всех глав и приложений и обзор новых терминов, с которыми вы там встретитесь.

•Глава 1. «Python: с чем его едят». Компьютерные программы не так уж и отличаются от других инструкций, с которыми вы сталкиваетесь каждый день. Мы рассмотрим небольшие программы, написанные на Python. Они продемонстрируют синтаксис языка, его возможности и способы применения в реальном мире. Вы узнаете, как запустить программу внутри интерактивного интерпретатора (оболочки), а также из текстового файла, сохраненного на вашем компьютере.

• Глава 2. «Данные: типы, значения, переменные и имена». В компьютерных языках используются данные и инструкции. Компьютер по-разному хранит и обрабатывает разные типы данных. Их значения или можно изменять (такие типы называются изменяемыми), или нельзя (неизменяемые типы). В программе, написанной на Python, данные могут быть представлены как литералами (числами вроде 78 или текстовыми строками вроде waffle), так и именованными переменными. В отличие от многих других языков программирования Python относится к переменным как к именам, и это влечет за собой некоторые важные последствия.

• Глава 3. «Числа». В этой главе показываются простейшие типы данных, применяемые в языке программирования Python: булевы переменные, целыечисла и числа с плавающей точкой. Вы также изучите простейшую математику. В примерах этой главы интерактивный интерпретатор Python используется как калькулятор.

• Глава 4. «Выбираем с помощью оператора if». С существительными (типами данных) и с глаголами (программными структурами) мы поработаем в нескольких главах. Код, написанный на Python, обычно выполняется по одной строке за раз: от начала программы до ее конца. Структура if позволяет запускать разные строки кода исходя из результата сравнения определенных данных.

• Глава 5. «Текстовые строки». Здесь мы обратимся к существительным и миру текстовых строк. Вы научитесь создавать, объединять, изменять и получать строки, а также выводить их на экран.

• Глава 6. «Создаем циклы с помощью ключевых слов while и for». Снова глаголы. Вы научитесь создавать цикл двумя способами — с помощью for и с помощью while, а также узнаете, что такое итераторы — одно из основных понятий Python.

• Глава 7. «Кортежи и списки». Пришло время рассмотреть первые структуры данных более высокого уровня: списки и кортежи. Они представляют собой последовательности значений, которыми вы будете пользоваться как конструктором Lego для того, чтобы создавать более сложные структуры. Вы научитесь проходить по ним с помощью итераторов, а также быстро создавать списки с помощью списковых включений.

• Глава 8. «Словари и множества». Словари и множества позволяют сохранять данные не по позиции, а по их значению. Вы увидите, насколько это удобно, — данная особенность Python станет одной из ваших любимых.

• Глава 9. «Функции». Соединяйте структуры данных из предыдущих глав со структурами кода, чтобы выполнять сравнение, выборку или повторение операций. Упаковывайте код в функции и обрабатывайте ошибки с помощью исключений.

• Глава 10. «Ой-ой-ой: объекты и классы». Слово «объект» недостаточно конкретно, но имеет большое значение во многих компьютерных языках, в том числе и в Python. Если вы уже занимались объектно-ориентированным программированием на других языках, то в сравнении с ними Python покажется вам более простым. В этой главе объясняется, когда следует использовать объекты и классы, а когда лучше выбрать другой путь.

• Глава 11. «Модули, пакеты и программы». Вы узнаете, как перейти к более крупным структурам кода — модулям, пакетам и программам, а также где можно разместить код и данные, как ввести и вывести данные, обработать различные параметры, просмотреть стандартную библиотеку Python и то, что находится вне ее.

• Глава 12. «Обрабатываем данные». Вы научитесь профессионально обрабатывать данные и управлять ими. Эта глава полностью посвящена текстовым и двоичным данным, особенностям использования символов стандарта Unicode, а также поиску текста с помощью регулярных выражений. Вы познакомитесь с типами данных byte и bytearray — соперниками типа string, в которых содержатся необработанные бинарные значения вместо текстовых символов.

• Глава 13. «Календари и часы». С датой и временем работать бывает непросто. Здесь мы рассмотрим распространенные проблемы и способы их решения.

• Глава 14. «Файлы и каталоги». Простые хранилища данных используют файлы и каталоги. В этой главе речь пойдет о создании и использовании файлов и каталогов.

• Глава 15. «Данные во времени: процессы и конкурентность». Это первая глава, в которой мы приступаем к изучению системы. Начнем с данных во времени — вы научитесь использовать программы, процессы и потоки для того, чтобы выполнять больше работы за один промежуток времени (конкурентность). Среди прочего будут упомянуты последние добавления в async (более подробно они рассматриваются в приложении В).

• Глава 16. «Данные в коробке: надежные хранилища». Данные могут храниться в простых файлах и каталогах внутри файловых систем и структурироваться с помощью распространенных форматов, таких как CSV, JSON и XML. Однако по мере того, как объем и сложность данных будут расти, вам, возможно, придется использовать базы данных — как традиционные реляционные, так и современные базы данных NoSQL.

• Глава 17. «Данные в пространстве: сети». Отправляйте ваш код и данные через пространство по сетям с помощью служб, протоколов и API. В качестве примеров рассматриваются как низкоуровневые сокеты, библиотеки обмена сообщениями и системы массового обслуживания, так и развертывание в облачных системах.

• Глава 18. «Распутываем Всемирную паутину». Всемирной сети посвящена отдельная глава, в которой рассматриваются клиенты, серверы, извлечение данных, API и фреймворки. Вы научитесь искать сайты и извлекать из них данные, а затем разработаете реальный сайт, используя параметры запросов и шаблоны.

• Глава 19. «Быть питонщиком». В этой главе содержатся советы для программистов, пишущих на Python: вы получите рекомендации по установке (с помощью pip и virtualenv), использованию IDE, тестированию, отладке, журналированию, контролю исходного кода и документации. Узнаете также, как найти и установить полезные пакеты сторонних разработчиков, как упаковать свой код для повторного использования и где получить более подробную информацию.

• Глава 20. «Пи-Арт». При помощи языка программирования Python можно создавать произведения искусства: в графике, музыке, анимации и играх.

• Глава 21. «За работой». У Python есть специальные приложения для бизнеса: визуализация данных (графики, графы и карты), безопасность и регулирование.

• Глава 22. «Python в науке». За последние несколько лет Python стал главным языком науки, он используется в математике, статистике, физике, биологии и медицине. Его сильные стороны — наука о данных и машинное обучение. В этой главе демонстрируются возможности таких инструментов, как NumPy, SciPy и Pandas.

• Приложение А. «Аппаратное и программное обеспечение для начинающих программистов». Если вы новичок в мире программирования, из этого приложения вы можете узнать, как на самом деле работает аппаратное и программное обеспечение и что означают некоторые термины, с которыми в дальнейшем вам придется сталкиваться.

• Приложение Б. «Установка Python 3». Если вы еще не установили Python 3 на свой компьютер, в этом приложении вы найдете информацию о том, как это сделать независимо от того, какая операционная система у вас установлена: Windows, Mac OS/X, Linux или другой вариант Unix.

• Приложение В. «Нечто совершенно иное: async». В разных релизах Python добавляется функциональность для работы с асинхронностью — разобраться с ней может быть сложно. Я упоминаю о ней в тех главах, в которых заходит речь об асинхронности, но в этом приложении рассматриваю тему более подробно.

• Приложение Г. «Ответы к упражнениям». Здесь содержатся ответы на упражнения, приведенные в конце каждой главы. Не подглядывайте туда, пока не попробуете решить задачи самостоятельно, в противном случае вы рискуете превратиться в козленочка.

•Приложение Д. «Вспомогательные таблицы». В этом приложении содержатся справочные данные.

Версии Python

Языки программирования со временем изменяются — разработчики добавляют в них новые возможности и исправляют ошибки. Примеры этой книги написаны и протестированы для версии Python 3.7. Версия 3.7 является наиболее современной на момент выхода этой книги, и о самых значимых нововведениях я расскажу. Версия 3.8 вышла в конце 2019 года — я рассмотрю самую ожидаемую функциональность¹. Узнать, что и когда было добавлено в язык программирования Python, можно, посетив страницу https://docs.python.org/3/whatsnew/: там представлена техническая информация. Она, скорее всего, покажется трудной для понимания, если вы только начинаете изучать Python, но может пригодиться в будущем, если вам нужно будет писать программы для компьютеров, на которых установлены другие версии Python.

Условные обозначения

В этой книге приняты следующие шрифтовые соглашения.

Курсив

Им обозначаются новые термины и понятия.

Моноширинный шрифт

Используется в листингах программного кода, а также для имен и расширений файлов, названий путей, имен функций, команд, баз данных, переменных, операторов и ключевых слов.

Зеленый моноширинный шрифт

Указывает текст, который необходимо заменить пользовательскими значениями или значениями, определяемыми контекстом.

Так оформлены совет, предложение или замечание.

Таким образом оформлено предупреждение.

Использование примеров кода

Примеры кода и упражнения, приведенные в тексте, доступны для загрузки по адресу https://github.com/madscheme/introducing-python. Эта книга написана, чтобы помочь вам в работе: вы можете применить код, содержащийся в ней, в ваших программах и документации и не связываться с нами, чтобы спросить разрешения, если собираетесь воспользоваться небольшим фрагментом кода. Например, если вы пишете программу и кое-где вставляете в нее код из книги, никакого особого разрешения не требуется. Однако если вы запишете на диск примеры из книги и начнете раздавать или продавать такие диски, разрешение на это получить необходимо. Если вы цитируете это издание, отвечая на вопрос, или воспроизводите код из него в качестве примера, разрешения не требуется. Но если включаете значительный фрагмент кода из данной книги в документацию по вашему продукту, необходимо разрешение.

Ссылки на источник приветствуются, но не обязательны. В такие ссылки обычно включаются название книги, имя ее автора, название издательства и номер ISBN. Например: «Простой Python. Современный стиль программирования. 2-е изд. Билл Любанович. Питер, 2020. 978-5-4461-1639-3».

При любых сомнениях относительно превышения разрешенного объема использования примеров кода, приведенных в данной книге, можете обращаться к нам по адресу [email protected].

От издательства

Ваши замечания, предложения, вопросы отправляйте по адресу [email protected] (издательство «Питер», компьютерная редакция).

Мы будем рады узнать ваше мнение!

На веб-сайте издательства www.piter.com вы найдете подробную информацию о наших книгах.

1 Оригинальное издание выпущено до выхода версии 3.8. Текущая версия — 3.8.2. — Примеч. ред.

Благодарности

Искренне благодарю обозревателей и читателей, помогавших сделать эту книгу лучше: Корбина Коллинза, Чарльза Гивра, Нейтана Стокса, Дейва Джорджа и Майка Джеймса.

Об авторе

Билл Любанович программировал в операционной системе Unix с 1977 года, разрабатывал GUI с 1981 года, базы данных — с 1990 года, а веб-разработкой занимался с 1993 года. Кроме того:

• 1982–1988 (Intran) — разрабатывал приложение Metaform на первой коммерческой графической рабочей станции;

• 1990–1995 (Northwest Airlines) — написал визуальную систему управления доходами, а также первый тест для анализа онлайн-маркетинга в Сети;

• 1994 (Tela) — стал сооснователем одного из первых интернет-провайдеров;

• 1995–1999 (WAM!NET) — разрабатывал веб-доски сообщений и 3М Digital Media Repository;

• 1999–2005 (Mad Scheme) — стал сооснователем компании, занимающейся веб-разработкой и хостингом;

• 2005 (O’Reilly) — в соавторстве написал несколько глав книги Linux Server Security²;

• 2007 (O’Reilly) — в соавторстве написал книгу Linux System Administration³;

• 2010–2013 (Keep) — разработал и построил службы Core Services, соединяющие веб-фронтенды и бэкенды, работающие с базами данных;

• 2014 (O’Reilly) — написал книгу Introducing Python (первое издание)⁴;

• 2015–2016 (Internet Archive) — работал над API и адаптацией Wayback Machine на Python;

• 2016–2018 (CrowdStrike) — управлял сервисами на базе Python, которые обрабатывают миллиарды ежедневных событий, связанных с безопасностью.

Билл счастливо живет в горах Сангре-де-Сасквоч в штате Миннесота со своей чудесной семьей: женой Мэри, сыном Томом (и его женой Рокси) и дочерью Кэрин (и ее мужем Эриком), ухаживает за кошками Ингой и Люси и котом Честером.

2 Bauer M. Linux Server Security, 2nd Edition. — O’Reilly, 2009.

3 Адельштайн Т., Любанович Б. Системное администрирование в Linux. — СПб.: Питер, 2010.

4 Любанович Б. Простой Python. Современный стиль программирования. — СПб.: Питер, 2019.

Часть I. Основы Python

Глава 1. Python: с чем его едят

Популярными становятся только уродливые языки. Python — исключение из этого правила.

Дональд Кнут

Тайны

Начнем с двух небольших тайн и их разгадок. Что, по-вашему, означают следующие две строки?

(Ряд 1): (RS) K18, ssk, k1, turn work.

(Ряд 2): (WS) Sl 1 pwise, p5, p2tog, p1, turn.

Выглядит как некая компьютерная программа. На самом деле это схема для вязания — точнее, фрагмент, который описывает, как связать пятку носка. Похожие носки показаны на рис. 1.1.

Рис. 1.1. Вязаные носки

Для меня эти строки имеют не больше смысла, чем судоку для одного из моих котов, но вот моя жена совершенно точно понимает написанное. Если вы вяжете, то тоже поймете.

Рассмотрим еще один таинственный текст, который можно увидеть записанным на листочке из блокнота. Вы сразу поймете его предназначение, даже если и не догадаетесь о том, каким будет конечный продукт:

  1/2 столовой ложки масла или маргарина;

  1/2 столовой ложки сливок;

  2 1/2 стакана муки;

  1 чайная ложка соли;

  1 чайная ложка сахара;

  4 стакана картофельного пюре (охлажденного).

Перед тем как добавить муку, убедитесь, что все ингредиенты охлаждены.

Смешайте все ингредиенты.

Тщательно замесите.

Сделайте 20 шариков.

Держите их охлажденными до следующего этапа.

Для каждого шарика:

  присыпьте разделочную доску мукой;

  раскатайте шарик при помощи рифленой скалки;

  жарьте на сковороде до подрумянивания;

  переверните и обжарьте другую сторону.

Даже если вы не готовите, вы сможете распознать кулинарный рецепт: список продуктов, за которым следуют указания по приготовлению. Но что получится в итоге? Это лефсе, норвежский деликатес, который напоминает тортилью (рис. 1.2). Полейте блюдо маслом, вареньем или чем-либо еще, сверните и наслаждайтесь.

Рис. 1.2. Лефсе

Схема для вязания и рецепт имеют несколько схожих моментов:

• фиксированный словарь, состоящий из слов, аббревиатур и символов: какие-то могут быть вам знакомы, какие-то — нет;

• правила, описывающие, что и где можно говорить, — синтаксис;

• последовательность операций, которые должны быть выполнены в определенном порядке;

• в некоторых случаях — повторение определенных операций (цикл), например способ приготовления каждого кусочка лефсе;

• в некоторых случаях — ссылка на еще одну последовательность операций (говоря компьютерными терминами, функцию). Например, когда вы прочтете приведенный выше рецепт, вам может понадобиться рецепт приготовления картофельного пюре;

• предполагаемое знание контекста. Рецепт подразумевает ваше знание о том, что такое вода и как ее кипятить. Схема для вязания подразумевает, что вы умеете держать спицы в руках;

• кое-какие данные, которые нужно использовать, создать или изменить, — картофель и нитки;

• инструменты, которые используются для работы с данными, — горшки, миксеры, духовки, вязальные спицы;

• ожидаемый результат. В наших примерах результатом будет предмет для ног и предмет для желудка. Главное — не перепутать.

Как ни назови — идиомы, жаргон, — примеры их использования можно встретить везде. Жаргон помогает сэкономить время тем, кто его знает, а для других людей оставляет информацию совершенно непонятной. Попробуйте расшифровать колонку газеты, посвященную бриджу, если вы не играете в эту игру, или научную статью — если вы не ученый (или ученый, но в другой области).

Маленькие программы

Подобные идеи вы встретите и в компьютерных программах, которые сами по себе являются маленькими языками: через них люди говорят компьютеру, что делать. Схему для вязания и рецепт я использовал для демонстрации того, что программы не так страшны, как может показаться, — всего лишь нужно выучить верные слова и правила.

Понять этот маленький язык гораздо легче, если в нем не очень много слов и правил и если вам не нужно изучать их все одновременно: за один раз наш мозг может воспринять только ограниченное количество знаний.

Пришло время обратиться к настоящей программе (пример 1.1). Как вы думаете, что она делает?

Пример 1.1. countdown.py

for countdown in 5, 4, 3, 2, 1, hey!:

    print(countdown)

Если вы считаете, что это программа, написанная на языке программирования Python, которая выводит на экран следующее:

5

4

3

2

1

hey!

то вы знаете, что Python выучить проще, чем понять рецепт или схему для вязания. К тому же тренироваться писать на этом языке вы можете, сидя за удобным и безопасным столом и избегая опасностей вроде горячей воды и спиц.

Программа, написанная на языке программирования Python, содержит некоторое количество специальных слов и символов: for, in, print, запятые, точки с запятой, скобки и т.д. — все они являются важной частью синтаксиса (правил) языка. Хорошая новость заключается в том, что Python имеет более доступный и менее объемный синтаксис по сравнению с большинством других языков программирования: текст кажется почти понятным — как и рецепт.

Пример 1.2 — тоже небольшая программа на Python: она позволяет выбрать одно из заклинаний Гарри Поттера, хранящееся в списке, и вывести его на экран.

Пример 1.2. spells.py

spells = [

    Riddikulus!,

    Wingardium Leviosa!,

    Avada Kedavra!,

    Expecto Patronum!,

    Nox!,

    Lumos!,

    ]

print(spells[3])

Отдельные заклинания являются в Python строками (последовательностями текстовых символов, заключенных в кавычки). Они разделены запятыми и помещены в список — это можно определить по квадратным скобкам ([ и ]). Слово spells — это переменная, являющаяся именем списка, — с ее помощью мы можем работать со списком. В нашем случае на экран будет выведено четвертое заклинание:

Expecto Patronum!

Почему мы сказали 3, если нам нужно было четвертое заклинание? Списки Python, такие как spells, представляют собой последовательность значений, доступ к которым осуществляется с использованием смещения от начала списка. Смещение для первого элемента списка равно 0, а для четвертого — 3.

Люди обычно считают с единицы, поэтому считать с нуля может показаться странным. Однако в программировании удобнее оперировать смещениями, а не позициями. Да, это пример того, как компьютерная программа иногда отличается от обычного языка.

Список — очень распространенная структура данных в языке программирования Python. О том, как им пользоваться, будет рассказано в главе 7.

Программа из примера 1.3 выводит на экран цитату одного из участников комедийного трио The Three Stooges («Три балбеса»), однако на выбор фразы влияет не позиция в списке, а то, кто ее сказал.

Пример 1.3. quotes.py

quotes = {

    Moe: A wise guy, huh?,

    Larry: Ow!,

    Curly: Nyuk nyuk!,

    }

stooge = Curly

print(stooge, says:, quotes[stooge])

Если вы запустите эту небольшую программу, она выведет следующее:

Curly says: Nyuk nyuk!

quotes — переменная, которая именует словарь Python: коллекцию уникальных ключей (в примере ключом является имя участника трио) и связанных с ними значений (в нашем примере — значимое высказывание участника «Балбесов»). Используя словарь, вы можете сохранять элементы и выполнять их поиск по именам: зачастую это удобнее, чем работать со списком.

В примере с заклинаниями для создания списка использовались квадратные скобки ([ и ]), а в примере с цитатами для создания словаря — фигурные скобки ({ и }). Также мы использовали двоеточие (:) для того, чтобы связать каждый ключ словаря с соответствующим значением. Более подробно о словарях можно прочитать в главе 8.

Надеюсь, я не перегрузил вас синтаксисом. В следующих нескольких разделах вы познакомитесь и с другими простыми правилами.

Более объемная программа

Теперь рассмотрим что-то совершенно иное: в примере 1.4 представлена программа, которая выполняет более сложную серию задач. Не рассчитывайте, что сразу поймете, как она работает, — книга для того и предназначена, чтоб научить вас этому! Таким образом я даю вам возможность увидеть и прочувствовать типичную полноразмерную программу, написанную на языке Python. Если вы знаете другие языки программирования, то можете сравнить их с Python прямо сейчас. Сможете ли вы, не зная Python и еще не прочтя расшифровку, примерно представить, что делает каждая строка? Вы уже видели примеры использования списка и словаря, а эта программа демонстрирует еще несколько новых возможностей.

В первом издании книги программа из примера подключалась к сайту YouTube и получала информацию о самых популярных роликах, таких как Charlie Bit My Finger. Она хорошо работала до того момента, как компания Google отключила поддержку этой службы. Во втором издании уже в новом примере (пример 1.4) мы подключаемся к другому сайту, который, очевидно, просуществует гораздо дольше, — Wayback Machine из Internet Archive (http://archive.org/) (бесплатного сервиса, сохраняющего миллиарды веб-страниц, в том числе фильмы, телешоу, музыкальные композиции, игры и иные цифровые артефакты за последние 20 лет). Еще несколько примеров таких веб-API вы увидите в главе 18.

Программа попросит вас ввести URL и дату. Затем она спросит у Wayback Machine, имеется ли копия этого веб-сайта за указанную дату. Если копия есть, API вернет информацию о ней программе, которая, в свою очередь, выведет URL и отобразит его в веб-браузере. Суть заключается в том, чтобы увидеть, как Python справляется с разнообразными задачами — принимает пользовательские данные, общается с веб-сайтами в Интернете и получает от них данные, извлекает оттуда URL и убеждает веб-браузер отобразить этот URL.

Если бы мы получали обычную веб-страницу, заполненную текстом, отформатированным как HTML, нам пришлось бы сначала придумать, как отобразить ее, а потом выполнить много действий — все это можно радостно перепоручить веб-браузеру. Мы также можем попробовать извлечь именно те данные, которые нам нужны (более подробно о веб-скрапинге читайте в главе 18). Любой из выбранных вариантов потребует выполнения большего количества работы и увеличит программу. Вместо этого Wayback Machine возвращает данные в формате JSON. JSON, или JavaScript Object Notation, — это читабельный для человека текстовый формат, который описывает типы и значения, а также выстраивает данные в определенном порядке. Он немного похож на языки программирования и уже стал популярным способом обмена данными между разными языками программирования и системами. Подробнее о JSON вы узнаете в главе 12.

Программы, написанные на языке Python, могут преобразовывать текст формата JSON в структуры данных (с которыми вы познакомитесь в следующих нескольких главах), как если бы вы написали программу для их создания самостоятельно. Наша небольшая программа выбирает лишь один фрагмент данных (URL старой веб-страницы, хранящейся в архиве). И опять же это полноценная программа, которую вы можете запустить самостоятельно. Мы почти не проверяли данные на ошибки, чтобы пример оставался коротким. Номера строк не являются частью программы и включены только для того, чтобы вам было проще следовать описанию, представленному после кода.

Пример 1.4. archive.py

1 import webbrowser

2 import json

3 from urllib.request import urlopen

4

5 print(Let's find an old website.)

6 site = input(Type a website URL: )

7 era = input(Type a year, month, and day, like 20150613: )

8 url = http://archive.org/wayback/available?url=%s×tamp=%s % (site, era)

9 response = urlopen(url)

10 contents = response.read()

11 text = contents.decode(utf-8)

12 data = json.loads(text)

13 try:

14     old_site = data[archived_snapshots][closest][url]

15     print(Found this copy: , old_site)

16     print(It should appear in your browser now.)

17     webbrowser.open(old_site)

18 except:

19     print(Sorry, no luck finding, site)

Такая небольшая программа, написанная на языке Python, делает многое с помощью всего нескольких строк. Не все термины вы уже знаете, однако сможете познакомиться с ними в следующих главах.

1. Импортируем (делаем доступным для этой программы) весь код из модуля стандартной библиотеки, который называется webbrowser.

2. Импортируем весь код из модуля стандартной библиотеки, который называется json.

3. Импортируем только функциюurlopen из модуля стандартной библиотеки urllib.request.

4. Пустая строка (мы не хотим перегрузить восприятие).

5. Выводим на экран приветственный текст.

6. Выводим на экран вопрос об URL, считываем пользовательский ввод и сохраняем это в переменной с именем site.

7. Выводим на экран еще один вопрос и на этот раз считываем год, месяц и день, а затем сохраняем их в переменной с именем era.

8. Создаем строковую переменную с именем url, чтобы сайт Wayback Machine искал копию требуемого сайта по дате.

9. Соединяемся с сервером, расположенным по этому адресу, и запрашиваем определенный веб-сервис.

10. Получаем ответ и присваиваем его переменной contents.

11. Дешифруем содержимое переменной contents в текстовую строку формата JSON и приписываем ее переменной text.

12. Преобразуем переменную text в data — структуру данных языка Python, предназначенную для работы с видео.

13. Проверяем на ошибки: помещаем следующие четыре строки в блок try и, если находим ошибку, запускаем последнюю строку программы (она идет после ключевого слова except).

14. Получив совпадение по сайту и дате, извлекаем нужное значение из трехуровневого словаря Python. Обратите внимание на то, что в этой и двух последующих строках используются отступы — тем самым Python легче понять, что данные строки находятся в блоке try.

15. Выводим на экран полученный URL.

16. Сообщаем о том, что случится, когда выполнится следующая строка.

17. Отображаем полученный URL в браузере.

18. Если во время выполнения предыдущих строк что-то пошло не так, Python перейдет сюда.

19. Если программа дала сбой, выводим сообщение и имя сайта, который мы искали. Эта строка также имеет отступ, поскольку должна выполняться только в том случае, если выполняется строка except.

Когда я сам запустил эту программу в окне терминала, то ввел URL сайта и дату и получил следующий результат:

$ python archive.py

Let's find an old website.

Type a website URL: lolcats.com

Type a year, month, and day, like 20150613: 20151022

Found this copy: http://web.archive.org/web/20151102055938/http://www.lolcats.com/

It should appear in your browser now.

На рис. 1.3 показано то, что появилось в моем браузере.

Рис. 1.3. Результат обращения к Wayback Machine

В предыдущем примере мы задействовали стандартные библиотечные модули (программы, включаемые в Python при установке), но совсем не обязательно ограничиваться только ими: на языке Python написано много отличного стороннего ПО. В примере 1.5 показывается та же программа, получающая доступ к архиву Интернета (Internet Archive), но в ней использован внешний пакет ПО для Python, который называется requests.

Пример 1.5. archive2.py

1 import webbrowser

2 import requests

3

4 print(Let's find an old website.)

5 site = input(Type a website URL: )

6 era = input(Type a year, month, and day, like 20150613: )

7 url = http://archive.org/wayback/available?url=%s×tamp=%s % (site, era)

8 response = requests.get(url)

9 data = response.json()

10 try:

11     old_site = data[archived_snapshots][closest][url]

12     print(Found this copy: , old_site)

13     print(It should appear in your browser now.)

14     webbrowser.open(old_site)

15 except:

16     print(Sorry, no luck finding, site)

Новая версия короче и, как мне кажется, более читабельна для большинства людей. О requests вы узнаете в главе 18, а о других авторских программах для Python в главе 11.

Python в реальном мире

Стоит ли тратить время и силы на изучение Python? Язык программирования Python существует примерно с 1991 года (он старше Java, но моложе С) и является одним из пяти самых популярных языков программирования. Людям платят деньги за написание программ на Python — очень важных и значимых, которыми мы пользуемся каждый день: Google, YouTube, Instagram, Netflix и Hulu.

Я использовал Python для создания приложений в самых разных областях. Python имеет репутацию высокопроизводительного языка программирования, и это особенно нравится динамично развивающимся компаниям.

Python используется во многих компьютерных приложениях, таких как:

• командная строка на мониторе или в окне терминала;

• пользовательские интерфейсы (Graphical User Interface, GUI), включая сетевые;

• веб-приложения, как клиентские, так и серверные;

• бэкенд-серверы, поддерживающие крупные популярные сайты;

• облака (серверы, управляемые сторонними организациями);

• приложения для мобильных устройств;

• приложения для встроенных устройств.

Программы, написанные на Python, могут быть как одноразовыми сценариями — вы видели их ранее в этой главе, так и сложными системами, содержащими миллионы строк.

В опросе The 2018 Python Developers’ Survey (https://www.jetbrains.com/research/python-developers-survey-2018/) вы можете увидеть числа и графики, показывающие текущее место языка Python в мире вычислительных машин.

Мы рассмотрим применение Python для создания сайтов, системного администрирования и манипулирования данными. Рассмотрим также использование Python в искусстве, науке и бизнесе.

Python против языка с планеты Х

Насколько Python хорош по сравнению с другими языками программирования? Где и когда следует использовать тот или иной язык? В этом разделе я покажу примеры кода, написанные на других языках, чтобы вы могли оценить, с чем конкурирует Python. Вы не обязаны понимать каждый из приведенных фрагментов, если не работали с этими языками. (А когда увидите последний фрагмент, написанный на Python, то почувствуете облегчение из-за того, что не работали с некоторыми другими языками.) Если же вам интересен только Python — вы ничего не потеряете, если не станете читать этот раздел.

Каждая программа должна напечатать число и немного рассказать о языке, на котором она написана.

Если вы пользуетесь терминалом или терминальным окном, программа, которая читает то, что вы вводите, выполняет это и отображает результат, называется программой-оболочкой. Оболочка операционной системы Windows называется cmd (https://ru.wikipedia.org/wiki/Cmd.exe), она выполняет пакетные файлы, имеющие расширение .bat. Для Linux и других операционных систем семейства Unix (включая macOS) существует множество программ-оболочек. Самая популярная из них называется bash (https://www.gnu.org/software/bash/) или sh. Оболочка обладает простейшими возможностями вроде выполнения простой логики и разворачивания символа-джокера наподобие * в полноценные имена файлов. Вы можете сохранять команды в файлы, которые называются сценариями оболочки, и выполнять их позже. Подобные программы могли быть в числе самых первых в вашей карьере программиста. Проблема в том, что возможности для масштабирования у сценариев оболочки ограничиваются несколькими сотнями строк, а сами сценарии выполняются гораздо медленнее, чем программы, написанные на других языках. В следующем фрагменте кода демонстрируется небольшая программа-оболочка:

#!/bin/sh

language=0

echo Language $language: I am the shell. So there.

Если вы сохраните этот файл под именем test.sh и запустите его с помощью команды shtest.sh, то на экране увидите следующее:

Language 0: I am the shell. So there.

Старые добрые С (https://ru.wikipedia.org/wiki/Си_(язык_программирования)) и С++ (https://ru.wikipedia.org/wiki/C++) являются довольно низкоуровневыми языками программирования, которыми пользуются в том случае, когда важна скорость. Ваша операционная система и множество других программ (включая программу python на вашем компьютере), скорее всего, написаны на C и C++.

Эти языки программирования труднее выучить и труднее поддерживать знания в актуальном состоянии. Вам придется отслеживать множество деталей, таких как управление памятью, что может привести к падениям программы и проблемам, которые трудно диагностировать. Так выглядит небольшая программа на языке С:

#include

int main(int argc, char *argv[]) {

    int language = 1;

    printf(Language %d: I am C! See? Si!\n, language);

    return 0;

}

С++ происходит из одного семейства с С, но имеет несколько отличительных особенностей:

#include

using namespace std;

int main() {

    int language = 2;

    cout << Language << language << \

        : I am C++!  Pay no attention my little brother! << \

        endl;

    return(0);

}

Java (https://www.java.com/ru/) и C# (https://docs.microsoft.com/en-us/dotnet/csharp/) являются преемниками языков С и С++. Они избавлены от некоторых недостатков предшественников (особенно в управлении памятью), но при этом могут быть немного избыточными. Следующий пример написан на Java:

public class Anecdote {

    public static void main (String[] args) {

        int language = 3;

        System.out.format(Language %d: I am Java! So there!\n, language);

    }

}

Если вы никогда не писали ни на одном из этих языков, у вас может возникнуть вопрос, что все это такое? Ведь мы хотели всего лишь вывести на экран простую строку — действительно, некоторые языки нагружены значительным синтаксическим багажом. Подробнее об этом вы узнаете из главы 2.

С, С++ и Java являются примерами статических языков. Они требуют, чтобы вы указали компьютеру некоторые низкоуровневые детали, например типы данных. В приложении А говорится, что для разных типов данных выделяется разное количество памяти и для них можно выполнять лишь заранее определенный набор операций. Динамические языки (они также называются скриптовыми) — полная противоположность статическим, они не заставляют вас определять тип переменной перед тем, как ее использовать.

Многоцелевым динамическим языком многие годы был Perl (https://www.perl.org/), очень мощный и с обширными библиотеками. Однако его синтаксис достаточно труден для понимания, а сам язык теряет в популярности из-за появления языков программирования Python и Ruby. Следующий пример побалует вас острым привкусом Perl:

my $language = 4;

print Language $language: I am Perl, the camel of languages.\n;

Язык программирования Ruby (http://www.ruby-lang.org/en/) появился немного позже. Он отчасти позаимствовал функционал у языка Perl, а свою популярность приобрел благодаря фреймворку для веб-разработки Ruby on Rails. Используется Ruby примерно в тех же областях, что и Python, и, выбирая между этими языками, вам придется руководствоваться в большей степени вкусом и доступностью библио­тек. Следующий фрагмент кода написан на Ruby:

language = 5

puts Language #{language}: I am Ruby, ready and aglow.

Язык программирования PHP (http://www.php.net/) из следующего примера очень популярен в области веб-разработок, поскольку позволяет довольно легко объединять HTML и код. Однако язык PHP имеет несколько подводных камней, и с ним довольно трудно работать за пределами сферы веб-разработок. Вот так выглядит программа, написанная на PHP:

$language = 6;

echo Language $language: I am PHP, a language and palindrome.\n;

?>

Язык Go (https://golang.org/) (в поисковике лучше искать Golang) появился относительно недавно и пытается быть эффективным и быстрым:

package main

import fmt

func main() {

  language := 7

  fmt.Printf(Language %d: Hey, ho, let's Go!\n, language)

}

Еще одной современной альтернативой языкам С и С++ является Rust (https://www.rust-lang.org/learn):

fn main() {

    println!(Language {}: Rust here!, 8)

Кто остался? Ах да, Python (https://www.python.org/):

language = 9

print(fLanguage {language}: I am Python. What's for supper?)

Почему же Python?

Одной из причин, не обязательно самой важной, является популярность. Есть такие факты:

• Python — это наиболее быстро набирающий популярность основной язык программирования, как показано на рис. 1.4 (https://stackoverflow.blog/2017/09/06/incredible-growth-python/);

• редакторы TIOBE Index (https://www.tiobe.com/tiobe-index/) в июне 2019 года заявили: «В этом месяце Python снова достиг высочайшей позиции в TIOBE Index, его результат составил 8,5 %. Если Python удержит такой темп, то в течение ближайших трех-четырех лет он сможет заменить С и Java, став самым популярным языком программирования в мире»;

• Python стал языком программирования 2018 года по версии TIOBE и занял первые места в рейтингах IEEE Spectrum (https://spectrum.ieee.org/at-work/innovation/the-2018-top-programming-languages) и PyPL (http://pypl.github.io/PYPL.html);

• Python является самым популярным языком программирования для курсов введения в информатику в лучших американских колледжах (https://cacm.acm.org/blogs/blog-cacm/176450-python-is-now-the-most-popular-introductory-teaching-language-at-top-u-s-universities/fulltext);

• Python официально используется для обучения во французских гимназиях.

Рис. 1.4. Python опережает в росте остальные основные языки программирования

В последнее время Python стал чрезвычайно популярным языком программирования в науке о данных и машинном обучении. Если вы хотите получить высокооплачиваемую работу разработчика в интересной области, Python — хороший выбор. А если вы занимаетесь набором персонала, имейте в виду, что пул опытных разработчиков на Python постоянно растет.

Но почему Python так популярен? Ведь языки программирования не имеют харизмы. В чем же причина?

Python — многоцелевой высокоуровневый язык программирования. Его дизайн позволяет писать хорошо читаемый код, что на самом деле гораздо важнее, чем кажется на первый взгляд. Каждая компьютерная программа пишется всего однажды, но впоследствии к ней обращаются множество раз. Благодаря удобочитаемости программу легко запомнить, а также легко ее воспроизвести. По сравне­нию с другими популярными языками программирования кривая обучения языку Python более гладкая, что позволяет ученику быстрее стать продуктивным. Однако есть и сложные моменты, с которыми вы столкнетесь по мере приобретения опыта.

Относительный лаконизм языка Python позволяет создавать гораздо более короткие программы — аналогичная программа, но написанная на статическом языке, будет намного длиннее. Исследования показали, что программисты пишут примерно одинаковое количество строк кода каждый день независимо от языка, поэтому Python может значительно повысить вашу продуктивность. Язык программирования Python — самое несекретное оружие многих компаний, которым важна продуктивность работы сотрудников.

С помощью Python вы можете написать все, что хотите, и совершенно бесплатно использовать это где угодно. Никто не скажет, прочитав вашу программу: «Ах, какая милая программка! Будет жаль, если с ней что-нибудь случится».

Python запускается практически везде и имеет «встроенные батарейки» — огромное количество разнообразного ПО в стандартных библиотеках. В этой книге имеется множество примеров использования стандартной библиотеки и полезного стороннего кода.

Но основная причина использования Python вам, возможно, покажется неожиданной: как правило, люди любят работать с этим языком, а не рассматривают его как необходимое зло для решения задачи — он подходит их образу мышления. Часто разработчики, когда им приходится программировать на другом языке, говорят, что им не хватает какой-то возможности Python. И это выделяет Python на фоне всех его «коллег».

Когда не стоит использовать Python

Python не всегда будет наилучшим выбором.

Он не установлен по умолчанию. В приложении Б показано, как установить Python, если он еще не установлен на вашем компьютере.

Python достаточно быстрый для большинства приложений, но его скорости может оказаться недостаточно для наиболее требовательных из них. Если ваша программа проводит большую часть времени за вычислениями, что в технических терминах называется «ограничена быстродействием процессора (CPU-bound)», то языки С, С++, Java, Rust или Go справятся с задачей гораздо лучше, чем Python. Но не всегда!

Учтите следующие обстоятельства.

• Иногда более качественный алгоритм (пошаговое решение) в Python превосходит неэффективный алгоритм в С. Более высокая скорость разработки в Python дает больше времени для экспериментов в поисках альтернативных решений.

• Во многих приложениях (особенно в веб-приложениях) программа «бьет баклуши» в ожидании ответа от сервера. Центральный процессор (компьютерный чип, который делает все расчеты) обычно не задействован, поэтому время выполнения статических и динамических программ будет примерно одинаковым.

• Стандартный интерпретатор Python написан на С и может быть улучшен с помощью дополнительного кода. Я рассмотрю этот вопрос в главе 19.

• Интерпретаторы Python становятся быстрее. Java, когда только появился, был чрезвычайно медленным, и на его ускорение ушло много времени и денег. Языком программирования Python не владеет ни одна корпорация, поэтому он улучшается последовательно и более плавно. В подразделе «PyPy» на с. 465 я расскажу о проекте PyPy и его приложениях.

• У вас в работе может быть очень сложное приложение, и тогда, независимо от того, что вы делаете, Python не сможет удовлетворить все ваши требования. Обычной альтернативой в таком случае являются языки программирования С,