Auswertung von Batchsystemdaten mit Elasticsearch, Logstash und Kibana: Difference between revisions
From Lsdf
Jump to navigationJump to search
(Created page with "= Beschreibung = = Aufgaben = * research existing algorithms for allocation in combinatorial auctions = Anforderungen = * good knowledge of C++ and Python * some theoretica...") |
|||
| (2 intermediate revisions by the same user not shown) | |||
| Line 1: | Line 1: | ||
= Beschreibung = |
= Beschreibung = |
||
Daten aller Jobs im HTCondor Batchsystem [0] sollen in Elasticsearch [2] erfasst werden und der zeitliche Verlauf von Metriken wie z.B. Speicherbedarf und Netzwerknutzung einzelner Jobs und von Gruppen von Jobs sollen mit Kibana [3] dargestellt werden. |
|||
= Voraussetzungen = |
|||
* Grundkenntnisse in der Nutzung von Batchsystemen, Elasticsearch und Kibana sind hilfreich aber nicht zwingend. |
|||
= Aufgaben = |
|||
* research existing algorithms for allocation in combinatorial auctions |
|||
= Anforderungen = |
|||
* good knowledge of C++ and Python |
|||
* some theoretical computer science background or machine learning knowledge would be a plus |
|||
= References = |
= References = |
||
: [0] [http://research.cs.wisc.edu/htcondor/ http://research.cs.wisc.edu/htcondor/] |
|||
: [1] [http://elastic.co http://elastic.co] |
|||
: [2] [https://www.elastic.co/de/products/kibana https://www.elastic.co/de/products/kibana] |
|||
= |
= Ansprechpartner = |
||
[mailto:andreas.petzold@kit.edu Andreas.Petzold@kit.edu] |
[mailto:andreas.petzold@kit.edu Andreas.Petzold@kit.edu] |
||
Latest revision as of 12:52, 26 October 2016
Beschreibung
Daten aller Jobs im HTCondor Batchsystem [0] sollen in Elasticsearch [2] erfasst werden und der zeitliche Verlauf von Metriken wie z.B. Speicherbedarf und Netzwerknutzung einzelner Jobs und von Gruppen von Jobs sollen mit Kibana [3] dargestellt werden.
Voraussetzungen
- Grundkenntnisse in der Nutzung von Batchsystemen, Elasticsearch und Kibana sind hilfreich aber nicht zwingend.
References
- [0] http://research.cs.wisc.edu/htcondor/
- [1] http://elastic.co
- [2] https://www.elastic.co/de/products/kibana
