indeksowanie solr

1. Co to jest indeksowanie SOLR?
2. Skąd mam wiedzieć, czy Solr indeksuje?
3. Jak długo trwa indeksowanie SOLR?
4. Co to jest SOLR i jak działa?
5. Co jest lepsze SOLR lub Elasticsearch?
6. Co oznacza SOLR?
7. Co oznacza indeksowanie?
8. Czy SOLR może być używany jako baza danych?
9. Gdzie jest przechowywany indeks SOLR?
10. Ile pamięci RAM potrzebuje SOLR?
11. Ile danych może obsłużyć SOLR?
12. Jak obliczany jest rozmiar indeksu SOLR?

Co to jest indeksowanie SOLR?

Dodając zawartość do indeksu, umożliwiamy jej przeszukiwanie przez Solr. Indeks Solr może akceptować dane z wielu różnych źródeł, w tym pliki XML, pliki z wartościami rozdzielanymi przecinkami (CSV), dane wyodrębnione z tabel w bazie danych oraz pliki w popularnych formatach plików, takich jak Microsoft Word lub PDF.

Skąd mam wiedzieć, czy Solr indeksuje?

Sprawdzanie stanu indeksowania za pomocą głównego administratora

Aby sprawdzić stan indeksowania, otwórz Solr Admin i kliknij Core Admin.

Jak długo trwa indeksowanie SOLR?

Mówimy użytkownikom, że przejście zmian do SOLR zajmuje około 5 minut i jak dotąd wszyscy są z tego zadowoleni. Z mojego doświadczenia wynika, że ​​indeksowanie dużych fragmentów danych może trochę potrwać. Indeks, nad którym pracuję, ma 2m elementów (rozmiar: 10G). Pełny indeks trwa około 40 godzin przy użyciu DB.

Co to jest SOLR i jak działa?

Solr używa Lucene do stworzenia odwróconego indeksu, ponieważ odwraca strukturę danych skoncentrowaną na stronie (dokumenty ⇒ słowa) do struktury skoncentrowanej na słowach kluczowych (słowo ⇒ dokumenty). Przypomina indeks, który widzisz na końcu każdej książki, w którym można znaleźć miejsce, w którym występują określone słowa. ... Solr używa pól do indeksowania dokumentu.

Co jest lepsze SOLR lub Elasticsearch?

Solr lepiej pasuje do aplikacji korporacyjnych, które już implementują narzędzia ekosystemu Big Data, takie jak Hadoop i Spark. ... Elasticsearch koncentruje się bardziej na skalowaniu, analizie danych i przetwarzaniu danych szeregów czasowych w celu uzyskania znaczących spostrzeżeń i wzorców. Jego wydajność analizy dzienników na dużą skalę sprawia, że ​​jest dość popularny.

Co oznacza SOLR?

SOLR

Co oznacza indeksowanie?

Indeksowanie to praktyka polegająca na zestawianiu danych ekonomicznych w jedną metrykę lub porównywaniu danych z taką miarą. W finansach istnieje wiele indeksów, które odzwierciedlają aktywność gospodarczą lub podsumowują aktywność rynkową - stają się punktami odniesienia wyników, według których mierzone są portfele i zarządzający funduszami.

Czy SOLR może być używany jako baza danych?

Tak, możesz używać SOLR jako bazy danych, ale jest kilka naprawdę poważnych zastrzeżeń: ... Co więcej, SOLR NIE przesyła strumieniowo danych - więc nie możesz leniwie przechodzić przez miliony rekordów na raz. Oznacza to, że podczas projektowania wzorców dostępu do danych na dużą skalę za pomocą SOLR trzeba być bardzo rozważnym.

Gdzie jest przechowywany indeks SOLR?

Solr przechowuje ten indeks w katalogu o nazwie index w katalogu danych.

Ile pamięci RAM potrzebuje SOLR?

Z reguły minimalny zalecany rozmiar pamięci bezpośredniej to 8G dla systemu produkcyjnego, jeśli docValues ​​nie jest używany w schemacie i 12-16G, jeśli jest używany docValues. Powiązana konfiguracja to liczba płyt w pamięci podręcznej bloków (Cloudera Manager->Konfiguracja Solr->liczba płyt), która musi odpowiadać rozmiarowi pamięci bezpośredniej.

Ile danych może obsłużyć SOLR?

Zakładam, że dane 5 TB będą wynosić 7 TB, gdy solr indeksuje je zgodnie z filtrem, którego używam. A potem dodam prawie 50 MB danych na godzinę do tego samego indeksu.

Jak obliczany jest rozmiar indeksu SOLR?

Jeśli szukasz fizycznego rozmiaru indeksu na dysku, możesz spojrzeć na folder 'data / index' w 'dataDir' zgodnie z definicją w solrconfig. xml. Np. w przykładowym indeksie jest to folder example / solr / data / index.