Automatizuotas informacijos apie objektą surinkimas ir santraukų sudarymas
Gaidamavičiūtė, Vytautė |
Baigiamajame magistro darbe nagrinėjamos kintančios didelės apimties duomenų problemos, duomenų apdorojimo būtinumas ir taikomumas. Išnagrinėti pagrindiniai principai, kuriais remiantis renkami duomenys iš laisvai prieinamos informacijos internete. Aptarti pagrindiniai informacijos rinkimo ir apdorojimo metodai. Sukurtas interneto skaitytuvas surenkantis informaciją apie norimą objektą iš konkrečių interneto svetainių ir ją apdorojantis. Remiantis sukurtu skaitytuvu išnagrinėtas skirtingais metodais surinktos informacijos aktualumas ir jos apdorojimas. Išnagrinėjus teorinius ir praktinius informacijos surinkimo ir apdorojimo aspektus pateikiamos baigiamojo darbo išvados ir siūlymai. Darbą sudaro 5 dalys: įvadas, literatūros analizė, interneto skaitytuvo ir teksto apdorojimo metodas, interneto skaitytuvo ir teksto apdorojimo įrankio realizacija, eksperimentinis tyrimas, išvados ir rezultatai, literatūros sąrašas. Darbo apimtis -54 p. teksto be priedų, 24 iliustr., 2 lent., 34 bibliografiniai šaltiniai.Atskirai pridedami darbo priedai.
The final master's thesis analizes changing large-scale data problems, the necessity and applicability of data processing. The main principles for collecting data from freely accessible information on the Internet are analyzed together with main data collecting and processing methods. A web crawler was created that collects information about the desired object from specific web sites and processes it. Based on developed crawler, information collected by different methods was examined and after analyzing theoretical and practical aspects of information gathering and processing, conclusions and suggestions of the final thesis are presented.The work consists of 5 parts: introduction, literature analysis, web crawler and text processing method, realization of the web crawler and word processing tool, experimental research, conclusions and results, references.Thesis scope -54 p. text without appendixes, 24 iliustrations, 2 tables, 34 references.Appendixes are attached separately.