Multicore-Codierung unter Linux

[Karistian]

Das Folgende hilft natürlich nicht, wenn man nur eine Datei hat, aber ab zwei Dateien kann man unter Linux auf beiden Kernen parallel codieren, und es werden nur so viele Prozesse benutzt, wie man angibt:

1. Als root ruby und rubygems installieren
2. Als root gem install fork_manager -r
3. Für den User folgendes kleine Ruby-Script (verbesserungsfähig, aber mir reicht es ;-):

---schnipp---
#!/usr/bin/ruby

require 'fork_manager'

wavlist = Dir.glob("*.wav")

puts "Processing #{wavlist.length} files ..."

fm = ForkManager.new(2)

fm.manage do

wavlist.each do |file|
fm.fork do
system( "lame --quiet --preset extreme -F \"#{file}\" \"$(basename \"#{file}\" .wav).mp3\"")
puts file
end
end

end
---schnapp---

Dann einfach das Skript im gleichen Verzeichnis starten, in dem auch die wav-Dateien sind. Diese werden dann automatisch auf zwei Kerne aufgeteilt und in MP3-Dateien umgewandelt. (Theoretisch funktioniert das auch für beliebige andere Dateien, aber dafür habe ich keine Verwendung.)

Wer Perl bevorzugt: Für Perl gibt es auch "Parallel::ForkManager".

Wer xargs bevorzugt: Dort soll es auch einen Parameter --max-procs geben.

Viel Spaß! :-)

[Bash]

Dein Tipp in Ehren - aber warum um Himmels Willen soll man sich für nen Dreizeiler Ruby installieren?

[Karistian]

Bash schrieb:
--------------------------------------------------------------------------------
> Dein Tipp in Ehren - aber warum um Himmels Willen soll man sich für nen
> Dreizeiler Ruby installieren?

Naja, soll man ja nicht unbedingt - kann man aber, wenn man will. ;-)

Ich verwende ohnehin Ruby und habe deshalb auch eine fertiges Skript parat. Wer will, kann ja mal die Python- oder xargs-Versionen posten. :-)

[nate]

> Ich verwende ohnehin Ruby und habe deshalb auch eine fertiges Skript parat.
> Wer will, kann ja mal die Python- oder xargs-Versionen posten. :-)

Gerne:

echo *.mp3 | xargs -n 1 -P 4 lame --quiet --alt-preset standard

OK, das macht dann ".wav.mp3"-Dateien, aber einfacher als so kommt man wirklich nicht an parallel codierte MP3s :)

[Brooklyn]

Kleiner Hinweis: --alt-preset macht inzwischen das Gleiche wie --preset und ist im man als depreciated gekennzeichnet:

>This option is deprecated and offers the same as the --preset option above. Do not use it anymore, it will go away in a later version.