Я хочу написать программу (я на гибкий язык, C / C + + была моя идея, но скриптовый язык, возможно, будет лучше), что проходит сотни программ, но только в N \u003d 4 (говорят) одновременно. Идея заключается в том, чтобы сохранить все сердечники на многоядерных машина занята.

Как я могу это сделать? В частности, я хотел библиотека вызова я могу внести в некоторые соответствующие формулировки, которые могут

• Начать новую тему
• Запустите командную строку процесса в нить с произвольными аргументами
• Признать, когда процесс будет завершен, возврат информации к основной нити и прекратить помощник / Славянский нить
• В идеале, передавать и получать информацию от стандартных IN / OUT

Это кажется очень основные вещи задавать, я просто смотрю на то, что бы сделать это просто. Я, возможно, собирается написать много программ, например для разных задач, и я подумал, что было бы неплохо спросить примерно до погружения во что-нибудь не совсем уместно. Я начал читать о (новых) Python Threading ранее, прежде чем я думал, чтобы спросить совета / помощи.

Не могли бы вы дать нам больше информации?

• Каким образом вы получите список программ, предназначенный для запуска?
• Существуют ли какие-либо зависимости между программами? Если да, то как бы вы описать их?
• Что должно произойти для вывода / STDERR? Вывод на консоль или сохранить то?
• У программы требует какой-то вклад, когда они уже работает?

Какой ОС вы планируете использовать эту программу? Можете ли вы контроль процессор близость этой ОС?

Программа будет идти в виде текстового файла с кучей цифр, что-нибудь на их обработку, а затем создать массив на основе этих цифр. Каждый элемент массива будут передаваться с помощью функции, которая будет создать соответствующий набор данных для этой записи. Эти данные будут использоваться для создания временного файла и аргументы командной строки с использованием этого файла.

Я не думаю, что это имеет значение, прежде чем я не упомянул его. В принципе, программа делает определенную работу, и появляется в списке команд для выполнения.

Ах, что это довольно важный вопрос, который я забыл адрес! Эти программы являются независимыми. Зависимости делать сложные программы; мини просто базовой.

Я хочу ей быть переданы обратно в программу в виде строки, если это возможно. Он не должен быть отображен.

Это я работаю на нет, но я, как метод, который мог бы направить ввода, поскольку другие подобные программы Я напишу, вероятно, должны сделать это.

----- ----- Обновление темы

Я только что изменил мою ОС для 64-битных Ubuntu 9.04. Эти программы являются процессора, 64-разрядные программы с небольшим средним памяти следы.

Так у вас есть куча данных, перенести его в другую форму И тогда процесс, кроме того, верно? Если у вас есть доступ к источнику для последней части обработки, возможно, его можно переписать, используя OpenMP (Википедия)? Таким образом, было бы портативных различных ОС ', процессоры и количество ядер, а также нужно исключить необходимость создания центрального управления программой.

Индивидуальные программы не очень parallelizable. (В CS жаргонизмов, они гипотезу для С полнойВне НК.) Они делают много последовательных операций на одном куске данные. Вот почему я хочу использовать их по отдельности.

Таким образом, вместо я пишу программу, чтобы найти наиболее эффективное решение для каждого произведения, рассчитать вероятность ее выполнения, решить приближенного бен-упаковке проблемы, и каждый график через настраиваемую пользователем количества процессоров.

Хорошо, от того, что Вы отправили 'до сих пор, основные структуры будет нечто вроде этого (псевдо-код)
Введите это не является проблемой, так как вилка () Эд процессы наследуют родители файл описателей. Результат есть, поскольку, насколько я знаю, это трудно вернуть данные ребенка к родителю, не разделяемой памяти или нечто подобное. Вы можете сохранить вывод в файл, на каждого ребенка в моих меняющихся вывода непосредственно перед системой ().
Кроме того, можно запустить EXEC () программа самостоятельно, чтобы уменьшить вилка курсов, но я не уверен, насколько хорошо это будет работать.
Кроме того, с shed_setaffinity Вы можете установить родство тех процессов (прямые, которые он для использования процессора), но вы должны отслеживать, какие процессоры последнего процесса используются.

Любое лицо, которое имеет больше опыта с алгоритмами есть лучшие идеи?