"Az-buki" National Publishing House
Ministry of Education and Science
Wikipedia
  • Login
  • Registration
Az-buki Weekly
Няма резултати
Вижте всички резултати
  • Main Page
  • About
  • Team
  • Archive
    • Вестник “Аз-буки” онлайн издание
  • Contact
  • Advertising
  • Subscribe now
  • en_US
  • Main Page
  • About
  • Team
  • Archive
    • Вестник “Аз-буки” онлайн издание
  • Contact
  • Advertising
  • Subscribe now
  • en_US
Няма резултати
Вижте всички резултати
Az-buki Weekly
Няма резултати
Вижте всички резултати
Main Page Uncategorized

Challenges in Web Crawling for Data Collection

„Аз-буки“ от „Аз-буки“
08-03-2024
in Uncategorized
A A

Georgi Cholakov 1), Emil Doychev 1),
Svetla Koeva 2)
1) Plovdiv University „Paisii Hilendarski“ Faculty of Mathematics and Informatics
2) Institute for Bulgarian Language „Prof. Lyubomir Andreychin“ - Bulgarian Academy of Sciences

https://doi.org/10.53656/math2024-1-1-cha

Abstract. The article presents the challenges of implementing a System for data retrieval and visualisation from the Internet by crawling language resources from the Hugging Face repository and extracting the associated data. The data in the system is updated at regular intervals to track the dynamics of language resource creation for different time periods. The article presents: a) the analysis of the available data and its structure; b) the chosen method for crawling the pages and extracting the data. The shared experience of overcoming the specific challenges can serve to solve similar problems related to the extraction of data from the Internet, a task that often has to be solved in various projects (including school projects).
Keywords: web crawling; automatic data extraction; linguistic datasets

 

Log in to read the full text Your Image Description

Свързани статии:

Default ThumbnailTwo-Parametric Problem for Optimal Distribution of Resources Default ThumbnailDeveloping a Positive Mindset to Entrepreneurship and Social Activity through the Innovative Learning System (InnoSchool) Default ThumbnailRESULTS OF THE EXTERNAL ASSESSMENT IN BIOLOGY AND HEALTH EDUCATION – VIII GRADE (2018/2019 SCHOOL YEAR) Default ThumbnailИма ли място „Новото изкуство“ в класните стаи? Алтернатива ли е моделът 1:1
Tags автоматично извличане на даннинабори от езикови данниуебобхождане

Последвайте ни в социалните мрежи

shareTweet
Previous article

Видеопослание за Левски

Next article

An Approach and a Tool for Euclidean Geometry

Next article

An Approach and a Tool for Euclidean Geometry

Are Established Taxonomies Relevant for e-Learning?

Student Satisfaction with the Quality of a Blended Learning Course

Последни публикации

  • Иво Величков, психотерапевт: Не децата, а родителите имат нужда от психолог
  • Министър Красимир Вълчев се срещна с новоизбрания Управителен съвет на АБУЧ
  • С внимание към всяко дете
  • Четири медала за България от Международната олимпиада по география
  • Това е истински събор – с хора́ и песни на мегдана
  • Образователната комисия в НС даде зелена светлина на промените в Просветния закон
  • Учредиха асоциация на учителите по ромски език
  • Лекар от „Пирогов“ е сред отличниците на Европейското дружество по кардиология
  • Приложение за уверени майки
  • Снимка на броя: Лятно вдъхновение
  • Отпуска поради лични и семейни причини
  • Електронни бази данни или електронни база данни
  • 2,6 млн. лева за осигуровки на учениците в дуално обучение
  • 37 млн. лева за работа с деца и ученици, застрашени от отпадане от образованието
  • Още 202 млн. лв. по Програма „Образование“
  • МОН проверява социално-педагогически интернат
  • Започнаха дебати за промените в Закона за предучилищното и училищното образование
  • Лятна програма за деца в Националния археологически институт с музей при БАН
  • 485 учители обучени по „Успех за теб“
  • В Антарктида за 6 години не се е натрупал нов лед
  • Четири медала за България от Международната олимпиада по биология
  • Филиалът на Русенския университет „Ангел Кънчев“ официално получи сградата на бившия Тараклийски университет

София 1113, бул. “Цариградско шосе” № 125, бл. 5

+0700 18466

izdatelstvo.mon@azbuki.bg
azbuki@mon.bg

Полезни линкове

  • Къде можете да намерите изданията?
  • Вход за абонати
  • Main Page
  • Contact
  • Subscribe now
  • Projects
  • Advertising

Az-buki Weekly

  • Вестник “Аз-буки”
  • Subscribe now
  • Archive

Scientific Journals

  • Strategies for Policy in Science and Education
  • Български език и литература
  • Pedagogika-Pedagogy
  • Mathematics and Informatics
  • Natural Science and Advanced Technology Education
  • Vocational Education
  • Istoriya-History journal
  • Chuzhdoezikovo Obuchenie-Foreign Language Teaching
  • Filosofiya-Philosophy

Newsletter

  • Accsess to public information
  • Условия за ползване
  • Профил на купувача

© 2012-2025 Национално издателство "Аз-буки"

Welcome Back!

Login to your account below

Forgotten Password? Sign Up

Create New Account!

Fill the forms bellow to register

All fields are required. Log In

Retrieve your password

Please enter your username or email address to reset your password.

Log In
en_US
bg_BG en_US
  • Login
  • Sign Up
Няма резултати
Вижте всички резултати
  • Main Page
  • About
  • Team
  • Archive
    • Вестник “Аз-буки” онлайн издание
  • Contact
  • Advertising
  • Subscribe now
  • en_US

© 2012-2025 Национално издателство "Аз-буки"