Auswertung von Filesystemmetadaten mit Elasticsearch and Kibana: Difference between revisions
From Lsdf
Jump to navigationJump to search
(Created page with "= Beschreibung = = Aufgaben = * research existing algorithms for allocation in combinatorial auctions = Anforderungen = * good knowledge of C++ and Python * some theoretica...") |
No edit summary |
||
Line 1: | Line 1: | ||
= Beschreibung = |
= Beschreibung = |
||
Das GPFS Filesystem [0] bietet die Möglichkeit die Metadaten aller Files sehr schnell auszulesen. Diese Metadaten werden regelmäßig ausgelesen (Dumps) und sollen zur Auswertung in einer Elasticsearch [1] Datenbank gespeichert werden. Dafür soll ein System entwickelt werden, um den zeitlichen Verlauf verschiedener Metriken über mehrere Dumps hinweg ermitteln zu können. |
|||
= Aufgaben = |
|||
* research existing algorithms for allocation in combinatorial auctions |
|||
= Anforderungen = |
= Anforderungen = |
||
Line 10: | Line 7: | ||
= References = |
= References = |
||
: [0] [http://en.wikipedia.org/wiki/IBM_General_Parallel_File_System http://en.wikipedia.org/wiki/IBM_General_Parallel_File_System] |
|||
: [1] [http://elastic.co http://elastic.co] |
|||
= Contact = |
= Contact = |
Revision as of 14:12, 13 September 2016
Beschreibung
Das GPFS Filesystem [0] bietet die Möglichkeit die Metadaten aller Files sehr schnell auszulesen. Diese Metadaten werden regelmäßig ausgelesen (Dumps) und sollen zur Auswertung in einer Elasticsearch [1] Datenbank gespeichert werden. Dafür soll ein System entwickelt werden, um den zeitlichen Verlauf verschiedener Metriken über mehrere Dumps hinweg ermitteln zu können.
Anforderungen
- good knowledge of C++ and Python
- some theoretical computer science background or machine learning knowledge would be a plus