Erstellung persönlicher adaptiver Cluster zur Verwaltung wissenschaftlicher Aufgaben in einer verteilten Computing-Umgebung

Wir beschreiben ein System zur Erstellung persönlicher Cluster im Benutzerspeicher, um die Einreichung und Verwaltung von Tausenden rechenintensiven seriellen Aufgaben an die netzwerkverbundenen Rechenressourcen des NSF TeraGrid zu unterstützen. Das System implementiert eine robuste Infrastruktur, die Job-Proxys in einer verteilten Computing-Umgebung einreicht und verwaltet. Diese Job-Proxys tragen Ressourcen zu persönlich, dynamisch auf Abruf für einen Benutzer erstellten Clustern bei. Das System passt sich den vorherrschenden Bedingungen der Aufgabenlast an den verteilten Standorten an, indem es Job-Proxys zu Standorten migriert, die voraussichtlich schneller Ressourcen bereitstellen können. Die in diesem Papier beschriebene Version des Systems ermöglicht es Benutzern, große persönliche Condor- und Sun Grid Engine-Cluster auf dem TeraGrid aufzubauen. Benutzer können dann ihre wissenschaftlichen Aufgaben über eine einzige einheitliche Benutzeroberfläche einreichen, überwachen und steuern, mithilfe der funktionsreichen Funktionalität, die in diesen Jobmanagement-Umgebungen zu finden ist. Bisher wurden bis zu 100.000 Benutzerjobs über das System eingereicht, was etwa 900 Teraflops wissenschaftlicher Berechnungen ermöglicht.