Automatizirano prikupljanje podataka pomoću automatizacije preglednika

diplomski rad

• Naslov (engleski): Automated data collection using headless browser automation
• Autor: Ante Barić
• Mentor: Tonimir Kišasondi (mentor); MBZ: 304134
• Član povjerenstva: Markus Schatten; MBZ: 291806
• Ustanova koja je dodijelila akademski / stručni stupanj: Sveučilište u Zagrebu; Fakultet organizacije i informatike; (Katedra za informatičke tehnologije i računarstvo); Varaždin
• Datum i država obrane: 2018-07-16, Hrvatska
• Znanstveno / umjetničko područje, polje i grana: DRUŠTVENE ZNANOSTI; Informacijske i komunikacijske znanosti; Organizacija i informatika

Sažetak

Cilj rada je prikazati primjenu automatizacije preglednika za automatizirano prikupljanje podataka sa stranica u realnom vremenu. Ispitat će se da li je ovakav način prikupljana podataka prikladan i koliko je primjenjiv u produkcijskim okruženjima i unutar postojećih tehnologija. Primjena automatiziranih preglednika je korisna kod razvoja OSINT platformi (eng. Open Source Intelligence) ili razvoja API-a za sustave koji ne podržavaju sučelje s trećim stranama. Dodatni naglasak rada je na metode koje se koriste u interakciji sa stranicama tijekom prikupljanja podataka i metode za sprječavanje takvih metoda. U sklopu rada su razvijene dvije aplikacije. Jedna je web aplikacija koja poslužuje REST servis, a druga je klijentska koja prikazuje korištenje servisa.

• Ključne riječi: sigurnost; osint; headless browsing
• Jezik: hrvatski
• URN:NBN: urn:nbn:hr:211:144614
• Studijski program: Naziv: Organizacija poslovnih sustava; Vrsta studija: sveučilišni; Stupanj studija: diplomski; Akademski / stručni naziv: magistar/magistra informatike (mag.inf.)
• Vrsta resursa: Tekst
• Način izrade datoteke: Izvorno digitalna
• Prava pristupa: Otvoreni pristup
• Datum i vrijeme pohrane: 2019-03-04 11:06:53