Podrška za specifične formate izvorišnih podataka
Izazov
Operatori prijenosnog sustava suočavaju se s velikim izazovom: brojni sekundarni sustavi, od digitalnih releja, nadzornih uređaja do IT platformi, generiraju goleme količine podataka.
Ti podaci dolaze u različitim i često neusklađenim formatima, što drastično otežava njihovu centraliziranu analizu, optimizaciju i upravljanje.
Rješenje
Ukoliko Cloudera platforma ne podržava neke od formata izvorišnih podataka postoji mogućnost nadogradnje platforme interno razvijenim aplikacijama za pretvorbu podataka iz specifičnih formata u formate podržane od strane Cloudera platforme.
Primjer takvih rješenja su:
Interno razvijen procesor za Apache NiFi koji vrši pretvorbu datoteka iz COMTRADE formata u JSON ili Avro format koji su pogodni za naknadne transformacije i analizu alatima dostupnim unutar Cloudera platforme.
Interno razvijena aplikacija dizajnirana za prikupljanje, dekodiranje TCP podataka s krajnjeg PDC (Phasor Data Concentrator) uređaja koji prikuplja podatke s više desetaka PMU (Phasor Measurement Unit) uređaja, te slanje transformiranih podataka u “kafka-topic”, čineći ih dostupnima za naknadnu obradu i analizu.
