Курс Python → Параллельные вычисления в Python
Модуль concurrent.futures в Python предоставляет высокоуровневый интерфейс для работы с параллельными задачами. Он позволяет создавать пулы потоков и процессов для выполнения функций асинхронно, что позволяет улучшить производительность при работе с большими объемами данных. В данном примере мы рассмотрим использование ThreadPoolExecutor для параллельного выполнения функции над элементами списка.
Для начала необходимо импортировать модуль concurrent.futures:
import concurrent.futures
Затем мы создаем пул потоков с помощью ThreadPoolExecutor:
with concurrent.futures.ThreadPoolExecutor() as executor:results = executor.map(square, numbers)
Здесь функция square будет применена к каждому элементу списка numbers параллельно. Результаты будут возвращены в том же порядке, в котором задачи были отправлены. Метод map позволяет передать каждый элемент из списка в функцию и получить список результатов после завершения выполнения всех задач.
Аналогично, можно использовать ProcessPoolExecutor для выполнения задач в отдельных процессах. Это особенно полезно, когда необходимо выполнить вычисления, которые могут блокировать потоки (например, взаимодействие с вводом-выводом). Пример использования ProcessPoolExecutor:
with concurrent.futures.ProcessPoolExecutor() as executor:results = executor.map(square, numbers)
Таким образом, модуль concurrent.futures предоставляет удобный способ реализации параллельных вычислений в Python, что помогает улучшить производительность при работе с большими объемами данных.
Другие уроки курса "Python"
- Работа с OpenCV
- Цепные операции в Python
- %pinfo: получение информации об объекте
- List Comprehension Tutorial
- Метод invert для побитового отрицания
- Управление пакетами с pip
- Импорт модулей и пакетов в Python
- Комментарии в Python
- Хешируемые ключи в Python
- kwargs в Python
- Вывод переменной и строки в Python
- Сравнение строк в Python
- Преобразование range в итератор
- Оптимизация памяти с slots
- Обработка ошибок в Python
- Декоратор защиты анонимных пользователей
- Списки в Python: основы
- Распаковка аргументов в Python
- Сортировка HTML-элементов
- Подсказки типов в Python
- Генераторы в Python
- Выборка чисел
- Оптимизация памяти с помощью __slots__
- Профилирование с Pandas
- Конкатенация строк в Python
- Множественные конструкторы в Python
- Отправка HTTP-запросов с User-Agent
- Создание вкладок с TKinter
- Модуль pprint
- Вычисление фазы комплексного числа
- Карта бомбоубежищ в Москве и Питере
- Генерация QR-кодов с библиотекой qrcode
- Поиск самого частого элемента
- Лимиты на ресурсы Python
- Названия столбцов в Python таблицах
- Python 3.12: Псевдонимы типов
- Создание матрицы в Python
- Импорт модуля из другого каталога
- Роль запятой в Python
- Метод __index__ в Python
- Модуль xkcd: добавление юмора в Python
- Создание виртуальной среды
- Удаление элемента по индексу в Python
- Установка библиотек в Python
- Делегирование в Python
- Форматирование строк в Python















