Вопросы с меткой [parallel-processing]

Я играю со сценарием, и я очень увлекся (он все еще работает, и все же мой компьютер еще не умер). Я запускаю 17 итераций сценария (с целью сбить мой компьютер). Глядя на монитор активности, я вижу, ...

Я просто переехал и обнаружил после некоторой проб и ошибок, что где-то между моим домом и моим удаленным сервером происходит некоторое регулирование ... но регулирование не очень разумно. Это только ...

У нас есть команда фабрики Python, которая выполняется параллельно на нескольких хостах, что-то вроде этого: $ fab --hosts=prod1.server,prod2.server,prod3.server --parallel copy_cache Это скопирует ...

Последовательный: for i in {1..1000}; do do_something $i; done - слишком медленно Параллельно: for i in {1..1000}; do do_something $i& done - слишком большая нагрузка Как выполнять команды ...

С уменьшением стоимости кремния и растущими потребностями потребителей производители, похоже, настаивают на одном из двух: тактовая частота и / или количество ядер. С ходом дела не похоже, что ...

Вот несколько вопросов, я бы хотел, чтобы вы меня просветили. Можно ли объединить вычислительную мощность 2 компьютеров? Как мне это сделать?

Мне обычно приходится копировать содержимое папки в сетевой файловой системе на мой локальный компьютер. В удаленной папке много файлов (1000 с), которые все относительно малы, но из-за сетевых ...

Кто-нибудь знает, есть ли cmd-скрипт, который делает это и / или инструмент командной строки, готовый к работе?

Я использую netcat для запуска простого сервера, подобного этому: while true; do nc -l -p 2468 -e ./my_exe; done Таким образом, любой может подключиться к моему хосту через порт 2468 и поговорить с ...

Я хочу обработать много файлов, и, поскольку у меня здесь куча ядер, я хочу сделать это параллельно: for i in *.myfiles; do do_something $i `derived_params $i` other_params; done Я знаю решение ...

Я хочу ограничить время, в течение которого команда процесса grep может запускаться или работать. Например. Я хочу выполнить следующее: grep -qsRw -m1 "parameter" /var Но перед запуском команды grep ...

Я пытаюсь сделать уникальный набор строк, извлеченных из файла с помощью egrep с помощью sort -u, а затем сосчитать их. Около 10% строк (все 100 символов из алфавита [ATCG]) дублируются. Есть два ...

Мне было интересно, превзошел ли мой компьютер вычислительную мощность Deep Blue, который классно выиграл у чемпиона мира среди людей Гарри Каспарова. Какова была скорость обработки Deep Blue по ...

Я иногда сижу с кучей выходных данных от программ, которые работают параллельно. Я хотел бы объединить эти пятерки. Наивное решение: cat fifo* > output Но для этого необходимо завершить первый fifo ...

Я думаю, что здесь ответ на вопрос, но я все еще задаюсь вопросом, в чем разница между единицами, на которые он ссылается. Например, GTX 570 имеет 480 ядер CUDA, в то время как ATI, эквивалентный HD ...

ArchLinux (Манджаро). Я запускаю один файл Bash. Он запускает 2 процесса (команды), используя & . Но когда я нажимаю Ctrl+C, чтобы остановить программу - один процесс умирает, а другой продолжает ...

РЕДАКТИРОВАТЬ: Для тех, кто сталкивается с этим в будущем: Imagemagick использует библиотеку MP. Быстрее использовать доступные ядра, если они рядом, но если у вас есть параллельные задания, это ...

Я долго искал лучшую практику для этого сценария. Если у меня есть process2, это зависит от процесса, запущенного заранее. Я создал псевдоним как: alias both='process1 & process2' Затем, когда ...

Я знаю, что подобные вопросы задавались, но я думаю, что мой случай немного отличается. Допустим, у меня есть компьютер с 8 ядрами и бесконечной памятью с ОС Linux. У меня есть программное ...

Этот вопрос является расширением Hyper-Threading и Dual-Core. В чем разница? Процессоры AMD FX на базе Bulldozer продаются с четырьмя, шестью или восемью ядрами, но физически состоят из двух, трех ...

У меня 5 жестких дисков, и я очень устал ждать 3 часа, пока антивирусный сканер сканирует каждый диск по одному. Я не вижу абсолютно никакой причины, по которой вирусный сканер не может быть пронизан ...

У меня есть большое количество больших файлов (сотни файлов, сотни МБ каждый), которые мне нужно передать через несколько программ для их фильтрации и преобразования. Я использую преимущества ...

Что-то, чего я никогда не понимал, - это то, как компьютер может работать без использования всей его вычислительной мощности. (Вероятно, эта путаница проистекает из ужасного урока ОС в колледже.) ...

Работы, которые в данный момент выполняются, показывают две записи, одна из которых имеет суффикс .extern . Завершенные (или неудачные) задания также имеют третью запись: .batch . Есть ли способ ...

У меня есть каталог, содержащий около 500 тыс. Файлов, и я хочу разделить их на файлы t tar. Говоря формально, давайте назовем файлы file_0, ..., file_{N-1} , где N около 500k. Я хочу создать t ...

У меня ноутбук серии Lenovo G50 с AMD A8-6410 @ 2 ГГц, 8 ГБ оперативной памяти с R5 230M и картами Radeon HD 8550M внутри. В Windows 10 можно ли запустить программу на основе интерфейса командной ...

У меня есть встроенный графический процессор, то есть он работает на той же оперативной памяти, что и мой процессор. (ATI Radeon HD 4200, встроенный в M4A785TD-V EVO) Означает ли это также, что мой ...

Gnu Parallels - это мощный инструмент, который я использую для запуска множества независимых команд BASH в виде одного набора параллельно. Я хотел бы иметь возможность запускать те же команды ...

Мне нужно выполнить ~ 1500 заданий на сервере моей лаборатории. Программа, которую я использую (blastpgp если кому-то все равно), способна работать в параллельном режиме, опция -a устанавливает, ...

У меня в начале 2011 года Quad Core i7 Mac. Из-за гиперпоточности многие программы сообщают о 8 "ядрах". Если бы я написал программу, которая выполняется параллельно, мог бы я запустить 8 экземпляров ...

Я хотел бы иметь возможность сравнивать производительность многоядерных компьютеров с точки зрения пользователя, который выполняет типичные повседневные задачи в Linux. Моя текущая цель - собрать ...

У меня есть 6 компьютеров (4 ядра каждое и идентичные по аппаратному обеспечению) со статическими IP-адресами, и мне нужно параллельно запускать программное обеспечение NAMD для вычислительной химии ...

Можно ли сжать несколько файлов и объединить их в один большой файл, но делать это параллельно на многоядерной машине? Например, сейчас я делаю: gunzip -c file1.gz > final gunzip -c file2.gz >> final ...

Действительно ли Intel Core 2 Duo / AMD Athlon X2 имеет 2 отдельных процессора? т.е. способны ли они выполнять реальную параллельную обработку? Чего я не понимаю, так это разницы, когда кто-то ...

Можно ли использовать оперативную память с других компьютеров для поддержки параллельных вычислений Mathematica Light Grid Server 7? Если так, то как?

Так много процессоров теперь имеют 2/4 ядра и 4/8 потоков. Есть также несколько процессоров с 4 ядрами и 4 потоками. Означает ли это, что не имеющий аналогов процесс будет работать медленнее на одном ...

Можно ли выполнять вычисления Simulink в параллельном режиме на кластере? И если это возможно, то что на самом деле делает Simulink, когда число процессов, которые мне нужны, больше, чем кластер, ...

В течение некоторого времени я принимал участие в проекте Stanford's Folding @ Home с большинством компьютеров, которыми я владею. Я только что установил клиент Windows на новую машину под ...

У меня есть алгоритм, который нужно повторять («репликация») как минимум 30 раз: каждая репликация может выполняться в собственном ядре. Станции разработки ниндзя имеют «Рыцарскую посадку» (72 ядра) ...

У нас есть шестьдесят терабайтное блочное устройство, которое мы хотим обнулить с помощью dd. Можно ли распараллелить эту операцию, чтобы уменьшить количество времени, которое требуется? Я попытался ...

Я использую gnu -rallel для параллельного запуска нескольких сценариев Python на нескольких компьютерах в моей гигабитной сети. Обрабатываемые файлы находятся в папке tmpfs (RAM) на моем главном ...

Я новичок в суперкомпьютерах, недавно я создал экземпляр Amazon EC2 со 128 процессорами и Microsoft server 2012. У меня есть одна папка, которая имеет 100 подпапок, в каждой подпапке есть файл .bat. ...

Я ищу аппаратное обеспечение, которое должно выполнять около 256 параллельных задач в реальном времени, требующих большого объема вычислений, в 24-часовом режиме. Каждая задача занимает около 40-50 ...

Процессор Intel Pentium E5700 (2M Cache, 3,00 ГГц, 800 МГц FSB) не имеет гиперпоточности, но имеет 2 ядра, поэтому я предполагаю, что он имеет 2 потока Теперь, если я напишу программу обработки ...

При суперскалярной обработке более чем одна инструкция выполняется параллельно на каждом ядре, так чем же тогда это будет отличаться от параллельной обработки? Спасибо.

Я действительно очарован идеей GPGPU и использованием GPU для интенсивной обработки. Я вижу, что APU (процессоры ускоренной обработки, CPU+GPU на одном чипе) набирают постоянную популярность. Все APU ...

У нас есть кластер Perceus (Warewulf), состоящий из 4-ядерного мастера и нескольких 4-ядерных узлов. Я могу запустить PVM на главном компьютере, а затем добавить все узлы - все работает нормально. ...

Как вы, возможно, знаете, Apple предлагает программу под названием Xgrid для разделения вычислительной мощности между компьютерами Mac. Это также позволяет легко кластеризоваться. Есть ли способ ...

Есть ли способ узнать, поддерживают ли GPU функции, которые я использую в сценарии MATLAB? Кажется, что нет полного списка (хотя см. Эту ссылку для списка функций обработки изображений с поддержкой ...

Когда я использую OpenMP в FORTRAN для распараллеливания программы в linux, команда top показывает мне только один процессор, работающий ~ 800% вместо ~ 100 x 8 процессоров. Это ожидаемая ситуация?