Donetsk National Technical University
Please use this identifier to cite or link to this item:
https://ea.donntu.edu.ua/jspui/handle/123456789/30263| Title: | Системи програмного забезпечення для збору даних з веб - ресурсів |
| Other Titles: | Software systems for data collection from web resources |
| Authors: | Тищенко, Ганна Валентинівна |
| Keywords: | BIG DATA WEB MINING |
| Issue Date: | Jun-2018 |
| Publisher: | Покровськ: ДонНТУ |
| Citation: | Тищенко, Г.В. Системи програмного забезпечення для збору даних з веб-ресурсів / Г. В. Тищенко Випускна кваліфікаційна робота на здобуття освітнього ступеня «магістр» за спеціальністю 123 «Комп’ютерна інженерія». – ДВНЗ ДонНТУ, Покровськ, 2018. - 119 с. |
| Abstract: | Мета роботи полягає в прискоренні швидкодії системи збору даних з веб-ресурсів за рахунок побудови нового підходу до парсинга даних, а також, удосконаленні системи за рахунок відстеження змін на веб-порталах. Проведені дослідження показали, що розроблена система Scraper збирає дані в два рази швидше систем Datacol та Content Downloader. Система тестувалася протягом двох місяців, за які вона продемонструвала свою стабільність. Вона надає відомості про те, скільки даних зібрано з порталу, аналітичні дані про кожне зібране поле. Завдяки цьому є можливість запобігти втраті даних. |
| URI: | http://ea.donntu.edu.ua/jspui/handle/123456789/30263 |
| Appears in Collections: | ОС "Магістр" КНТ |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| 2018_КІм-16_Тищенко_ПЗ.pdf | 2,74 MB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.