Automatizirano prikupljanje podataka pomoću automatizacije preglednika

master's thesis

• Title (english): Automated data collection using headless browser automation
• Author: Ante Barić
• Mentor: Tonimir Kišasondi (mentor); MBZ: 304134
• Committee member: Markus Schatten; MBZ: 291806
• Granter: University of Zagreb; Faculty of Organization and Informatics; (Department of Computing and Technology); Varaždin
• Defense date and country: 2018-07-16, Croatia
• Scientific / art field, discipline and subdiscipline: SOCIAL SCIENCES; Information and Communication Sciences; Organization and Informatics

Abstract

Cilj rada je prikazati primjenu automatizacije preglednika za automatizirano prikupljanje podataka sa stranica u realnom vremenu. Ispitat će se da li je ovakav način prikupljana podataka prikladan i koliko je primjenjiv u produkcijskim okruženjima i unutar postojećih tehnologija. Primjena automatiziranih preglednika je korisna kod razvoja OSINT platformi (eng. Open Source Intelligence) ili razvoja API-a za sustave koji ne podržavaju sučelje s trećim stranama. Dodatni naglasak rada je na metode koje se koriste u interakciji sa stranicama tijekom prikupljanja podataka i metode za sprječavanje takvih metoda. U sklopu rada su razvijene dvije aplikacije. Jedna je web aplikacija koja poslužuje REST servis, a druga je klijentska koja prikazuje korištenje servisa.

• Keywords: sigurnost; osint; headless browsing
• Language: croatian
• URN:NBN: urn:nbn:hr:211:144614
• Study programme: Title: Business Systems Organization; Study programme type: university; Study level: graduate; Academic / professional title: magistar/magistra informatike (magistar/magistra informatike)
• Type of resource: Text
• File origin: Born digital
• Access conditions: Open access
• Created on: 2019-03-04 11:06:53