Distribuované zpracování dat o IP tocích

but.committeedoc. Dr. Ing. Petr Hanáček (předseda) doc. Ing. Vladimír Drábek, CSc. (místopředseda) Ing. Miroslav Balík, Ph.D. (člen) doc. Ing. Radek Burget, Ph.D. (člen) doc. Mgr. Lukáš Holík, Ph.D. (člen) Ing. Petr Matoušek, Ph.D., M.A. (člen)cs
but.defenceStudent nejprve prezentoval výsledky, kterých dosáhl v rámci své práce. Komise se poté seznámila s hodnocením vedoucího a posudkem oponenta práce. Student následně odpověděl na otázky oponenta a na další otázky přítomných. Komise se na základě posudku oponenta, hodnocení vedoucího, přednesené prezentace a odpovědí studenta na položené otázky rozhodla práci hodnotit stupněm A. Otázky u obhajoby: V práci je uvedeno srovnání navrženého řešení s programem NfDump a ukázána škálovatelnost na čtyřech počítačích. Jaké vidíte u navrženého řešení limity ve škálovatelnosti? Kde by vzniklo úzké místo navrženého systému? Plánuje se nasazení vytvořené implementace DistDump v produkční síti?cs
but.jazykčeština (Czech)
but.programInformační technologiecs
but.resultpráce byla úspěšně obhájenacs
dc.contributor.advisorŽádník, Martincs
dc.contributor.authorKrobot, Pavelcs
dc.contributor.refereeKořenek, Jancs
dc.date.accessioned2018-10-21T20:57:40Z
dc.date.available2018-10-21T20:57:40Z
dc.date.created2015cs
dc.description.abstractTato práce se zabývá distribuovaným zpracování dat o IP tocích. Konkrétně je pak hlavním cílem poskytnutí řešení softwarového kolektoru, který bude umoţňovat zpracování a ukládání masivního objemu dat. V rámci této práce je zkoumána volně dostupná implementace rámce pro distribuované ukládání a výpočty nad daty Hadoop, která vyuţívá modelu MapReduce. Nad tímto systémem byly následně provedeny experimenty, jejichţ smyslem bylo získat představu o výkonnosti tohoto řešení oproti řešením stávajícím a odhalit slabiny systému. Na základě získaných poznatků byla pak vytvořena specifikace a návrh rozšíření stávajícího softwarového kolektoru. Dle vytvořeného návrhu následně vznikla implementace dotazovací části navrhovaného kolektoru, která se při distribuovaném zpracování dat o IP tocích jeví jako nejvíce kritická. Výsledky experimentů s touto implementací ukázaly výrazné zvýšení výkonu při dotazování a schopnost lineární škálovatelnosti na některých typech dotazů.cs
dc.description.abstractThis thesis deals with the subject of distributed processing of IP flow. Main goal is to provide an implementation of a software collector which allows storing and processing huge amount of a network data in particular. There was studied an open-source implementation of a framework for the distributed processing of large data sets called Hadoop, which is based on MapReduce paradigm. There were made some experiments with this system which provided the comparison with the current systems and shown weaknesses of this framework. Based on this knowledge there was created a specification and scheme for an extension of current software collector within this work. In terms of the created scheme there was created an implementation of query framework for formed collector, which is considered as most critical in the field of distributed processing of IP flow data. Results of experiments with created implementation show significant performance growth and ability of linear scalability with some types of queries.en
dc.description.markAcs
dc.identifier.citationKROBOT, P. Distribuované zpracování dat o IP tocích [online]. Brno: Vysoké učení technické v Brně. Fakulta informačních technologií. 2015.cs
dc.identifier.other88684cs
dc.identifier.urihttp://hdl.handle.net/11012/64074
dc.language.isocscs
dc.publisherVysoké učení technické v Brně. Fakulta informačních technologiícs
dc.rightsStandardní licenční smlouva - přístup k plnému textu bez omezenícs
dc.subjectDistribucecs
dc.subjectvýpočetcs
dc.subjectúloţištěcs
dc.subjectdatabázecs
dc.subjectMapReducecs
dc.subjectHadoopcs
dc.subjectNfdumpcs
dc.subjectIPFIXcs
dc.subjectDistributionen
dc.subjectcomputationen
dc.subjectstorageen
dc.subjectdatabaseen
dc.subjectMapReduceen
dc.subjectHadoopen
dc.subjectNfdumpen
dc.subjectIPFIXen
dc.titleDistribuované zpracování dat o IP tocíchcs
dc.title.alternativeDistributed Processing of IP flow Dataen
dc.typeTextcs
dc.type.drivermasterThesisen
dc.type.evskpdiplomová prácecs
dcterms.dateAccepted2015-06-19cs
dcterms.modified2020-05-10-16:12:06cs
eprints.affiliatedInstitution.facultyFakulta informačních technologiícs
sync.item.dbid88684en
sync.item.dbtypeZPen
sync.item.insts2021.11.12 17:14:51en
sync.item.modts2021.11.12 16:02:22en
thesis.disciplineBezpečnost informačních technologiícs
thesis.grantorVysoké učení technické v Brně. Fakulta informačních technologií. Ústav počítačových systémůcs
thesis.levelInženýrskýcs
thesis.nameIng.cs
Files
Original bundle
Now showing 1 - 4 of 4
Loading...
Thumbnail Image
Name:
final-thesis.pdf
Size:
1.17 MB
Format:
Adobe Portable Document Format
Description:
final-thesis.pdf
Loading...
Thumbnail Image
Name:
Posudek-Vedouci prace-17592_v.pdf
Size:
85.54 KB
Format:
Adobe Portable Document Format
Description:
Posudek-Vedouci prace-17592_v.pdf
Loading...
Thumbnail Image
Name:
Posudek-Oponent prace-17592_o.pdf
Size:
89.55 KB
Format:
Adobe Portable Document Format
Description:
Posudek-Oponent prace-17592_o.pdf
Loading...
Thumbnail Image
Name:
review_88684.html
Size:
1.44 KB
Format:
Hypertext Markup Language
Description:
review_88684.html
Collections