python-multiprocessing — все вопросы

1ответ
4 голоса
Карта многопроцессорного пула Python: AttributeError: Невозможно выбрать локальный объект
У меня есть метод внутри класса, который должен выполнять большую работу в цикле, и я хотел бы распределить работу по всем моим ядрам. Я написал следующий код, который работает, если я использую
3ответа
4 голоса
Как убить процесс с помощью многопроцессорного модуля?
У меня есть процесс, который по сути является просто бесконечным циклом, и у меня есть второй процесс, который является таймером. Как я могу завершить процесс цикла, когда таймер будет сделан? def
2ответа
4 голоса
PicklingError: Невозможно выбрать <тип 'function'> с исполнителем пула процессов Python
util.py def exec_multiprocessing(self, method, args): with concurrent.futures.ProcessPoolExecutor() as executor: results = pool.map(method, args) return results clone.py
3ответа
4 голоса
Почему этот небольшой фрагмент зависает при использовании многопроцессорной обработки с maxtasksperchild, numpy.random.randint и numpy.random.seed?
У меня есть скрипт на python, который одновременно обрабатывает массивы и изображения случайным образом. Чтобы иметь надлежащую случайность внутри порожденных процессов, я передаю случайное семя от
1ответ
4 голоса
Многопроцессорная обработка медленнее, чем последовательная обработка в Windows (но не в Linux)
Я пытаюсь распараллелить for loop, чтобы ускорить мой код, поскольку все операции обработки цикла независимы. После онлайн-уроков, похоже, что стандартная библиотека multiprocessing в Python - хорош
1ответ
4 голоса
Невозможно передать объект etx lxml в отдельный процесс
Я работаю над проектом для одновременного анализа нескольких файлов xml в python с использованием lxml. Когда я инициализирую процесс, я хочу, чтобы мой основной класс выполнил некоторую работу над
1ответ
4 голоса
Замените pickle в многопроцессорной библиотеке Python
Мне нужно выполнить код ниже (упрощенная версия моей реальной базы кода в Python 3.5):Для того, чтобы создать новый процесс, Python должен выбрать функцию, и лямбда-выражение передается в качестве цел
1ответ
4 голоса
Возврат больших объектов из дочерних процессов в многопроцессорной среде Python
Я работаю с многопроцессорной обработкой Python для порождения некоторых рабочих. Каждый из них должен возвращать массив размером в несколько МБ. Правильно ли, что, поскольку мой возвращаемый ма
3ответа
4 голоса
Могу ли я использовать map /imap /imap_unordered с функциями без аргументов?
Иногда мне нужно использовать многопроцессорность с функциями без аргументов.Я хотел бы сделать что-то вроде:Я мог бы сделать ---- +: = 1 =: + ---- , но я предпочитаю синтаксис ---- +: = 2 =: + ---- /
1ответ
4 голоса
Многопроцессорность работает в Ubuntu, не в Windows
Я пытаюсь использовать этот пример в качестве шаблона для системы очередей в моем приложении cherrypy.Я смог преобразовать его из Python 2 в Python 3 (изменить ---- +: = 0 =: + ---- в ---- +: = 1 =: +
1ответ
4 голоса
Чтение CSV с помощью многопроцессорного пула занимает больше времени, чем чтение CSV
Исходя из одного из требований нашего клиента, я должен разработать приложение, которое должно обрабатывать огромные файлы CSV.Размер файла может быть в диапазоне от 10 МБ до 2 ГБ.В зависимости от раз
3ответа
4 голоса
Мультипроцессинг - Ткинтер трубопроводной связи
У меня вопрос по многопроцессорности и ткинтеру.У меня возникли некоторые проблемы, когда мой процесс работал параллельно с графическим интерфейсом tkinter.Я создал простой пример для практики и читал
3ответа
4 голоса
Методы многопроцессорных классов Python
Я пытаюсь изменить поле класса, используя его метод, но когда метод помещается в него, он не работает.из многопроцессорного процесса импортаПосле запуска этой программы Mx все еще 20. Как это возможно
2ответа
4 голоса
Многопроцессорная обработка Python на генераторе, который читает файлы в
Я пытаюсь прочитать и обработать тысячи файлов, но, к сожалению, для обработки файла требуется примерно в 3 раза больше времени, чем для чтения его с диска, поэтому я хотел бы обрабатывать эти файлы п
2ответа
4 голоса
Многопроцессорная обработка Python - отладка OSError: [Errno 12] Невозможно выделить память
Я сталкиваюсь со следующей проблемой.Я пытаюсь распараллелить функцию, которая обновляет файл, но я не могу запустить ---- +: = 0 =: + ---- из-за ---- +: = 1 =: + ---- .Я начал осматриваться на сервер
2ответа
4 голоса
Python разделяет значения
в моем проекте есть несколько флагов, как это:и я пытаюсь запустить два процесса, один (назовите его A с этого момента) обрабатывает входящие сообщения в очереди сообщений, второй (назовите его B с эт
1ответ
6 голосов
В unix, многопроцессорный Python печатает только один процесс
У меня есть скрипт, в который я загружаю файл, который занимает некоторое время, потому что там достаточно много данных для чтения и для предотвращения завершения процесса пользователем, я хочу пока
2ответа
7 голосов
сельдерей: демонические процессы не могут иметь детей
В Python (2.7) я пытаюсь создать процессы (с многопроцессорностью) в задаче celery (celery 3.1.17), но выдает ошибку: daemonic processes are not allowed to have children Погуглив, я обнаружил,
2ответа
9 голосов
понимание scikit выучить требование к памяти Random Forest для прогнозирования
У меня есть набор из 2000 обученных деревьев случайной регрессии (из рекурсора случайных лесов scikit learn с n_estimators=1). Параллельное обучение деревьев (50 ядер) в большом наборе данных (~ 100
1ответ
9 голосов
Как процесс Python завершается корректно после получения SIGTERM во время ожидания на семафор?
У меня есть процесс Python, который порождает 5 других процессов Python, используя многопроцессорный модуль. Давайте назовем родительский процесс P0, а остальные P1-P5. Требование состоит в том, что
1 2

Популярные теги

security × 330linux × 316macos × 2827 × 268performance × 244command-line × 241sql-server × 235joomla-3.x × 222java × 189c++ × 186windows × 180cisco × 168bash × 158c# × 142gmail × 139arduino-uno × 139javascript × 134ssh × 133seo × 132mysql × 132