- Tytuł:
-
Usage of dedicated data structures for URL databases in a large-scale crawling
Zastosowanie dedykowanych struktur danych w bazach adresów URL crawlingu dużej skali - Autorzy:
- Dorosz, K.
- Tematy:
-
przeglądanie sieci
robot internetowy
Berkeley DB
baza danych URL
repozytorium URL
struktury danych
crawling
crawler
large-scale
URL database
URL repository
data structures - Pokaż więcej
- Wydawca:
- Akademia Górniczo-Hutnicza im. Stanisława Staszica w Krakowie. Wydawnictwo AGH
- Powiązania:
- https://bibliotekanauki.pl/articles/305583.pdf Link otwiera się w nowym oknie
- Opis:
-
The article discuss usage of Berkeley DB data structures such as hash tables and b-trees for implementation of a high performance URL database. The article presents a formal model for a data structures oriented URL database, which can be used as an alternative for a relational oriented URL database.
W artykule omówiono zastosowanie struktur danych z pakietu Berkeley DB, takich jak: tablice z haszowaniem i b-drzewa do implementacji wysoko wydajnych baz danych adresów URL. Przedstawiono model formalny bazy danych zorientowanej na struktury pamieci, która może być alternatywa dla relacyjnie zorientowanej bazy danych linków URL. - Dostawca treści:
- Biblioteka Nauki
Artykuł