Pořádáte podobný kurz/školení?
Pořádáte podobné kurzy, školení a/nebo studium. Vložte Vaše kurzy na web. Kurs / kurzy nemusí být rekvalifikační,
stačí když kurzy budou mít termín konání školení pro on-line objednávku kurzu
Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake - Následující kurzy: APACHE SPARK FOR DATA ENGINEERS ADVANCED OPTIMIZATIONS A DELTA LAKEViz také následující kurzy :
- Kubernetes Advanced
 - Apache Kafka
- Apache Spark - od jednoduchých transformací po vysoce výkonné joby
- Automatizovaná správa linuxových serverů pomocí Foreman
- SAP R3 - S4 HANA: Kmenová data a kalkulace výrobku
|
Kurz - Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake
DataScript s.r.o.
Apache Spark je distribuovaný výpočetní engine, který poskytuje unifikovaný framework pro zpracování velkých objemů dat, interaktivní analýzu, machine learning, analýzu grafu a streaming. V průběhu posledních několika let se stává standardem pro zpracování těchto workloadů a to nejen v prostředí velkých dat. Jedním z důvodů proč roste popularita Sparku je také jeho programové API, neboli tzv. DataFramy, které nabízejí univerzální datovou abstrakci, již je možné použít ve všech výše zmíněnýc ...
Cena kurzu:
...
15.000
Kč / Kurz
... včetně DPH: 18.150 Kč / Kurz
Objednat - pro přihlášení na kurz/školení klikněte na zvolený termín školení a místo konání
Popis kurzu
Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake
Kurz je určen pro ...Cílová skupina: Datoví inženýři, scientisti, analysti a další uživatelé Sparku, kteří již mají se Sparkem nějakou zkušenost a chtějí se naučit optimalizovat Sparkové joby pro dosažení maximálního výkonu.
Lektoři kurzu: David pracuje v Emplifi (dříve Socialbakers) jako datový inženýr. Na denní bázi se zabývá optimalizací Spakových aplikací a vyvíjí Sparkové joby, které zpracovávají data na různých škálách od jednotek GBs až po desítky TBs. Vedle toho se zabývá výukou Sparkových trainingů a jeho školeními již prošla celá řada týmů zejména datový analytici, scientisti a inženýři. David je také Sparkovým kontributorem, přispěl do zdrojového kódu a pravidelně mluví na konferencích a meetupech jako je Spark + AI Summit, MLPrague nebo Spark + AI Prague meetup.
[Kurz] Program kurzu (obsah přednášky/semináře/rekvalifikace/studia) ...Cíle kurzu : - Rozumět a orientovat se ve fyzických plánech Spark SQL
- Přepsat query za účelem dosažení efektivnějšího plánu
- Používat některá konfigurační nastavení
- Připravit Sparkem data pro efektivní analytiku ve Sparku
- Diagnostikovat botlneck Sparkoveho jobu Pochopit význam moderních tabulkových formátů Naučit se pracovat s Delta tabulkami
* : - Rozumět a orientovat se ve fyzických plánech Spark SQL
- Přepsat query za účelem dosažení efektivnějšího plánu
- Používat některá konfigurační nastavení
- Připravit Sparkem data pro efektivní analytiku ve Sparku
- Diagnostikovat botlneck Sparkoveho jobu Pochopit význam moderních tabulkových formátů Naučit se pracovat s Delta tabulkami
Garant kurzu : David pracuje v Emplifi (dříve Socialbakers) jako datový inženýr. Na denní bázi se zabývá optimalizací Spakových aplikací a vyvíjí Sparkové joby, které zpracovávají data na různých škálách od jednotek GBs až po desítky TBs. Vedle toho se zabývá výukou Sparkových trainingů a jeho školeními již prošla celá řada týmů zejména datový analytici, scientisti a inženýři. David je také Sparkovým kontributorem, přispěl do zdrojového kódu a pravidelně mluví na konferencích a meetupech jako je Spark + AI Summit, MLPrague nebo Spark + AI Prague meetup. Osnova : Spark SQL internals (Query Execution) - Logical planning (Catalog, Analyzer, Cache Management, Optimizer)
- Physical planning
- Query planner, strategies
- Spark plan
- Executed plan
- Understanding operators in the physical plan
Query optimization - Shuffle elimination
- Bucketing
- Data repartition (when and how)
- Data reuse
Optimization tips - Choose the appropriate number of shuffle partitions
- Nondeterministic expressions
- Configuration settings
Data layout - Partitioning and bucketing
- How bucketing works
- When it makes sense
- Hive tables
- Data upsert
- Schema evolution
- Discussing various problems and challenges
- Delta-Lake
- Basic features (table history, timel travel, optimize, cacuum)
- Schema evolution
- Data Change Feed
- Advanced features (Liquid Clustering, Deletion Vectors,...)
Předpoklady účastníka: Tento kurz je navazujícím kurzem ke školení Apache Spark - od jednoduchých transformací po vysoce výkonné joby , ve kterém člověk mimo jiné získá dobrou znalost DataFramového API a základní přehled o interních procesech ve Sparku. Pro absolvování tohoto kurzu je tedy dobré mít předchozí zkušenosti se Sparkem (např. na úrovni výše zmíněného kurzu ), znát DataFramové API a chápat základní principy distribuovaného počítání.
[Kurz] Cíl školení / poznámka ke kurzu...Cíle kurzu : - Rozumět a orientovat se ve fyzických plánech Spark SQL
- Přepsat query za účelem dosažení efektivnějšího plánu
- Používat některá konfigurační nastavení
- Připravit Sparkem data pro efektivní analytiku ve Sparku
- Diagnostikovat botlneck Sparkoveho jobu Pochopit význam moderních tabulkových formátů Naučit se pracovat s Delta tabulkami
|
[Školení] Další popis kurzu (úroveň, minimální znalosti, informace o cenách kurzu) ...Předpoklady účastníka: Tento kurz je navazujícím kurzem ke školení Apache Spark - od jednoduchých transformací po vysoce výkonné joby , ve kterém člověk mimo jiné získá dobrou znalost DataFramového API a základní přehled o interních procesech ve Sparku. Pro absolvování tohoto kurzu je tedy dobré mít předchozí zkušenosti se Sparkem (např. na úrovni výše zmíněného kurzu ), znát DataFramové API a chápat základní principy distribuovaného počítání.
[dotaz na školení/kurz] Formulář pro komentáře, dotazy a odpovědi
DataScript s.r.o. ::
DataScript je autorizovaným poskytovatelem IT kurzů a certifikací. V našich školících prostorách poskytujeme řadu vysoce odborných a respektovaných IT kurzů, specializovaných technologických školení i certifikací IT specialistů, systémových administrátorů a techniků. V nabídce naší činnosti nechybí ani speciální tréninky určené ke zvýšení profesionálních dovedností a schopností odborných pracovníků. DataScript klade důraz nejen na dokonalou teoretickou přípravu a odborné znalosti, ale rovněž na jejich praktické využití a řešení konkrétních situací. DataScript je součástí koncernu Servodata. Společnost Servodata je významným Value Added Distributorem komponent a infrastruktury podnikových ICT řešení. Dlouhodobě se specializuje na distribuci ...Platební podmínky pro účast na kurzuObjednavateli bude zaslána závazná přihláška k podpisu. Poté bude účastník na školení registrován. Objednavatel uhradí částku kurzovného za výše uvedeného posluchače na základě faktury vystavené poskytovatelem.
Další kurzy a školení: Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake Odkaz na podobné školení a/nebo školení od jiné firmy a v jiné ceně:
| Podobný kurz |
Popis kurzu |
Další kurzy a školení |
Apache Spark - od jednoduchých transformací po vysoce výkonné joby
|
Jiný kurz v jiné ceně : IT konference Kurzy a certifikace Open Source Big data Recenze - Apache Spark - od jednoduchých transformací po vysoce výkonné joby Zpět Tomáš Ďuríček 16. 8.
|
Další podobné školení nebo kurzy
|
Apache Kafka Advanced
|
Jiný kurz v jiné ceně : Tento kurz se zaměřuje na použití Apache Kafky pro rozsáhlé systémy, které jsou typicky provozovány ve velkých datových centrech. Zaměříme se především na zajičtení dostupnosti dat a na zrcadlení dat mezi datovými centry.
|
Další podobné školení nebo kurzy
|
Advanced Zabbix SNMP monitoring
|
Jiný kurz v jiné ceně : Cílem kurzu je plně vysvětlit monitorování SNMP a poskytnout praktické znalosti o konfiguraci monitorování SNMP pomocí Zabbixu. Kurz pokrývá SNMP dotazování, konfiguraci Zabbixu pro SNMP trapy a optimalizaci shromažďování dat SNMP pro hardware na podnikové úrovni s využití
|
Další podobné školení nebo kurzy
|
Kubernetes Advanced
|
Jiný kurz v jiné ceně : IT konference Kurzy a certifikace Open Source Cloud Recenze - Kubernetes Advanced Zpět Jan Hes 5. 11.
|
Další podobné školení nebo kurzy
|
Advanced Architecting on AWS
|
Jiný kurz v jiné ceně : IT konference Kurzy a certifikace Amazon Web Services Architect Recenze - Advanced Architecting on AWS Zpět Lukáš Pour 22. 12.
|
Další podobné školení nebo kurzy
|
Aruba Switching ADVANCED (TD-ASA)
|
Jiný kurz v jiné ceně : Aruba Switching ADVANCED (TD-ASA) * Aruba Switching ADVANCED je pokročilé technické školení, jehož absolvováním získáte znalosti potřebné pro návrh a implementaci pokročilých technologií drátových sítích na Aruba CX platformě. Školení je zaměřeno na síťovou bezpečnost a př
|
Další podobné školení nebo kurzy
|
Apache Kafka
|
Jiný kurz v jiné ceně : IT konference Kurzy a certifikace Open Source Messaging Recenze - Apache Kafka Zpět Petr Hebký 14. 10.
|
Další podobné školení nebo kurzy
|
Apache Cassandra
|
Jiný kurz v jiné ceně : Apache Cassandra * Účastníci kurzu se seznámí se správou distribuované databáze Apache Casssandra. Kurz bude vedený z pohledu DevOps, kdy budou vysvětleny základní principy práce s touto databází, návrh datového modelu aplikace a její následná optimalizace.
|
Další podobné školení nebo kurzy
|
Kurz-školení Pokročilá analýza a dolování dat pomocí Oracle Data Miner a R Enterprise # pro Programátory, analytiky
|
Jiný kurz v jiné ceně : Kurz-školení Pokročilá analýza a dolování dat pomocí Oracle Data Miner a R Enterprise je zaměřen na posluchače, kteří již mají zkušenosti s dotazováním a analyzováním dat v jazyce SQL v prostředí databází Oracle. Navíc jim ukáže možnosti na dolování dat a vytváření prediktiv
|
Další podobné školení nebo kurzy
|
Kurz Oracle databáze - Optimalizace SQL dotazů # pro Administrátory, programátory
|
Jiný kurz v jiné ceně : Kurz Oracle databáze - Optimalizace SQL dotazů je určen pro databázové administrátory, vývojáře a analytiky, kteří chtějí rozšířit své znalosti nad standardní úroveň. Je směřován ke schopnosti optimalizovat kód a data takovým způsobem, aby dokázali maximálně využít možnost
|
Další podobné školení nebo kurzy
|
 = Podobný kurz nebo školení
Poslední aktualizace: 2025-04-28 02:48:57
DataScript s.r.o. |
Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake # Počítačové kurzy a semináře - grafika, databáze, programování, web & internet, office, GIS
Téma kurzů nebo školení:
  Počítačové a IT kurzy
Programování
Typ kurzu/školení: Kurz
Klíčová slova pro dané školení: apache, spark, data, engineers, advanced, optimizations, delta, lake
[RSS] Nechte si posílat nové termíny kurzu
Chcete vědět kdy bude další termín kurzu? - Využijte RSS a nechte si posílat každé změny a/nebo nové termíny kurzu do Vaší čtečky RSS (bez registrace)
Apache Spark for Data Engineers - Advanced Optimizations & Delta-Lake [RSS] - Novinky a nové termíny kurzu
© DataScript s.r.o. -
Praha 7
::
- DataScript je autorizovaným poskytovatelem IT kurzů a certifikací. V našich školících prostorách poskytujeme řadu vysoce odborných a respektovaných IT kurzů, specializovaných technologických školení i certifikací IT specialistů, systémových administrátorů a techniků. V nabídce naší činnosti nechybí ani speciální tréninky určené ke zvýšení profesionálních dovedností a schopností odborných pracovníků. DataScript klade důraz nejen na dokonalou teoretickou přípravu a odborné znalosti, ale rovněž na jejich praktické využití a řešení konkrétních situací. DataScript je součástí koncernu Servodata. Společnost Servodata je významným Value Added Distributorem komponent a infrastruktury podnikových ICT řešení. Dlouhodobě se specializuje na distribuci ...
Platební podmínky pro účast na kurzuObjednavateli bude zaslána závazná přihláška k podpisu. Poté bude účastník na školení registrován. Objednavatel uhradí částku kurzovného za výše uvedeného posluchače na základě faktury vystavené poskytovatelem.
Komentáře a dotazy na školení a nebo kurz
Hledáte náhodou nějakou práci?GLAMI [Senior] Data Analyst Praha Full-time-oriented [Senior] Data Analyst to join our Monetisation/BI team! 🏋️♀️THE CHALLENGE… In this role, you will ensure the... integrity and flow of our data, oversee complex data structures, and provide key insights to help optimise our monetisation..., Praha 8 Junior auditorzpracování informací do přehledné formy. Smysl pro detail, pečlivost a důslednost při práci s daty i textem. Data jsou pro vás..., Praha 2 Podobné kurzy # apache + spark + data + engineers + advanced + optimizations + deltalake
|
|
