Elasticsearch

Kurz je určen pro vývojáře a administrátory, kteří pracují s velkým množstvím dat nebo logů a chtějí je efektivně ukládat, prohledávat a vizualizovat. Nevyžaduje předchozí znalost Elasticsearch — stačí základní povědomí o databázích, HTTP protokolu a formátu JSON.

📅  Den 1 — Základy, datový model a vyhledávání

• Úvod do Elasticsearch Pochopíte, co Elasticsearch je, kde se používá v praxi a co ho odlišuje od relačních databází. Seznámíte se se základní terminologií — index, dokument, shard, replika — a spustíte první dotazy.
• Mapping a datové typy Naučíte se navrhovat mapping pro různé typy dat — text, keyword, number, date, geo a další. Pochopíte rozdíl mezi dynamickým a explicitním mapováním a kdy který přístup zvolit. Projdete si práci s index templates, aliasy a reindexací. Zvládnete hromadné úpravy a mazání dat i modelování složitějších relací pomocí nested type.
• Vyhledávání — základy Naučíte se psát dotazy pomocí query string i request body search. Pochopíte klíčový rozdíl mezi vyhledáváním a filtrováním dat a kdy každý přístup použít. Projdete si term-level queries pro přesnou shodu a compound queries pro kombinování podmínek.
• Fulltextové vyhledávání do hloubky Pochopíte, jak funguje invertovaný index — základ každého fulltextového vyhledávání. Naučíte se pracovat s analyzéry: předdefinovanými i vlastními (normalizace, tokenizace, filtry). Zvládnete vyhledávání s překlepy, našeptávání, synonyma a budete rozumět tomu, jak Elasticsearch řadí výsledky podle relevance.

📅  Den 2 — Agregace, skriptování a Elastic Stack

• Agregace Agregace jsou jednou z nejsilnějších funkcí Elasticsearch — umožňují analyzovat data podobně jako SQL GROUP BY, ale mnohem flexibilněji. Naučíte se psát bucket agregace (seskupování), metric agregace (průměry, součty, percentily) a pipeline agregace (výpočty nad výsledky jiných agregací). Výsledky vizualizujete přímo v Kibaně.
• Skriptování Naučíte se využívat Painless skripty pro výpočty za běhu — skriptovaná pole, vlastní řazení výsledků nebo úpravy dokumentů při indexaci. Pochopíte, kdy skriptování dává smysl a jak ho bezpečně používat v produkci.
• Elastic Stack — Kibana, Logstash a Beats Projdete celý ekosystém okolo Elasticsearch. Kibana poslouží jako vizualizační vrstva — naučíte se v ní tvořit dashboardy, spouštět dotazy a monitorovat cluster. Logstash vám umožní přijímat, transformovat a odesílat data z libovolného zdroje. Beats jsou lehcí agenti pro sběr logů, metrik a síťového provozu přímo ze serverů. Propojíte všechny části do funkčního pipeline pro zpracování logů.
• Konfigurace pro produkční provoz Závěr kurzu je věnován provozu Elasticsearch v produkci — konfiguraci clusteru, nastavení replikace a shardů, zálohování pomocí snapshots a základům monitoringu. Odcházíte s přehledem o tom, na co si dát pozor při nasazení do ostrého prostředí.

Po absolvování tohoto dvoudenního kurzu budete rozumět tomu, jak Elasticsearch funguje uvnitř, a budete schopni ho efektivně využívat — od návrhu datového modelu přes psaní složitých dotazů až po provoz v produkčním prostředí.

Konkrétně se naučíte:

• správně navrhnout mapping a datový model pro různé typy dat
• psát fulltextové i strukturované dotazy včetně filtrování, řazení a relevance
• stavět vlastní analyzéry pro češtinu a další jazyky
• využívat agregace pro analýzu a vizualizaci dat
• zpracovávat logy pomocí Logstashe, Beats a Kibany
• nakonfigurovat Elasticsearch pro produkční provoz a zálohování

Co je Elasticsearch a k čemu se používá?
Elasticsearch je open source vyhledávací a analytický nástroj postavený nad knihovnou Lucene, který slouží k rychlému fulltextovému vyhledávání ve velkém množství dat. Využívá se pro vyhledávání na webu a v e-shopech, analýzu logů, monitoring aplikací i jako škálovatelné úložiště dokumentů.

Co je Elastic Stack (ELK Stack) a jak souvisí s Elasticsearch?
Elastic Stack je sada nástrojů kolem Elasticsearch – Kibana slouží k vizualizaci a analýze dat, Logstash a Beats ke sběru a zpracování dat, například logů z serverů a aplikací. Elasticsearch v tomto celku funguje jako centrální úložiště a vyhledávací engine, do kterého ostatní nástroje data ukládají nebo z něj čtou.

Potřebuji před kurzem znát Elasticsearch nebo mít programátorské zkušenosti?
Ne, žádná předchozí znalost Elasticsearch není nutná – kurz je určen začátečníkům. Vhodným základem je znalost libovolného databázového systému a základní povědomí o HTTP protokolu a formátu JSON.

Jaký je rozdíl mezi Elasticsearch a klasickou relační databází (např. MySQL)?
Relační databáze jsou optimalizované na strukturovaná data a přesné shody v dotazech. Elasticsearch je naopak navržený pro fulltextové vyhledávání s hodnocením relevance, částečnou shodou, opravou překlepů a rychlou prací s velkým objemem nestrukturovaných nebo polostrukturovaných dat, jako jsou texty nebo logy.

Co jsou to analyzéry v Elasticsearch a proč jsou důležité pro vyhledávání?
Analyzéry určují, jak se text při indexaci rozdělí na jednotlivá slova (tokenizace) a jak se normalizuje – například na malá písmena nebo bez diakritiky. Správně nastavený analyzér je klíčový pro to, aby fulltextové vyhledávání fungovalo přesně, počítalo s překlepy, synonymy nebo českou diakritikou.

Naučím se v kurzu i práci s agregacemi a analytickými dotazy?
Ano, kurz obsahuje samostatný blok o agregacích – bucket, metric i pipeline agregacích – včetně jejich vizualizace v nástroji Kibana, takže se naučíte data nejen vyhledávat, ale i statisticky vyhodnocovat.

Je Elasticsearch vhodný i pro zpracování a analýzu logů?
Ano, to je jedno z hlavních praktických využití probíraných v kurzu. Účastníci se seznámí s nástroji Beats a Logstash pro sběr logů a s Kibanou pro jejich vizualizaci a analýzu.

Jak dlouho kurz trvá a v jaké formě probíhá?
Kurz je dvoudenní a lze ho absolvovat prezenčně v učebně v Praze nebo online formou virtuální učebny, včetně samostatně vypracovávaných praktických úkolů.

Pro koho je kurz Elasticsearch určen?
Kurz je vhodný pro každého, kdo se zajímá o fulltextové vyhledávání, ukládání velkého množství dat nebo analýzu logů – typicky pro vývojáře, administrátory i analytiky pracující s daty.

Řeší kurz i provoz Elasticsearch v produkčním prostředí?
Ano, poslední část kurzu se věnuje konfiguraci Elasticsearch pro produkční provoz, zálohování a monitoringu, takže získáte přehled i o praktických aspektech mimo samotné vyhledávání a agregace.