logo skoleni-kurzy

KURZ : APACHE SPARK FOR DATA ENGINEERS ADVANCED OPTIMIZATIONS
DATASCRIPT S R O


skoleni-kurzy.eu


< Poslední zobrazené kurzy
[SHOPILO.cz]



Podrobné hledání kurzů, školení a rekvalifikací



Pořádáte podobný kurz/školení?


Pořádáte podobné kurzy, školení a/nebo studium. Vložte Vaše kurzy na web. Kurs / kurzy nemusí být rekvalifikační, stačí když kurzy budou mít termín konání školení pro on-line objednávku kurzu


 
Apache Spark for Data Engineers - Advanced Optimizations - Následující kurzy:

 

 

APACHE SPARK FOR DATA ENGINEERS ADVANCED OPTIMIZATIONS

Viz také následující kurzy :
  • Security Engineering on AWSPodrobnosti
  • NSE4 FortiGate SecurityPodrobnosti
  • Kubernetes AdvancedPodrobnosti
  • Apache Spark - od jednoduchých transformací po vysoce výkonné jobyPodrobnosti
  • Zátěžové testování s Apache JMeterPodrobnosti


Kurz - Apache Spark for Data Engineers - Advanced Optimizations


DataScript s.r.o.


Apache Spark je distribuovaný výpočetní engine, který poskytuje unifikovaný framework pro zpracování velkých objemů dat, interaktivní analýzu, machine learning, analýzu grafu a streaming. V průběhu posledních několika let se stává standardem pro zpracování těchto workloadů a to nejen v prostředí velkých dat. Jedním z důvodů proč roste popularita Sparku je také jeho programové API, neboli tzv. DataFramy, které nabízejí univerzální datovou abstrakci, již je možné použít ve všech výše zmíněných ...


Cena kurzu:
     ...   15.000 Kč / Kurz  

     ... včetně DPH: 18.150 Kč / Kurz

Objednat - pro přihlášení na kurz/školení klikněte na zvolený termín školení a místo konání



Přihláška na školení:

   NEZÁVAZNÁ PŘIHLÁŠKA - Termín školení zatím není k dispozici | Podobné kurzy a školení | Žádost o kontakt - Zavolejte mi, prosím



  • Podobný kurz     Praha 7  
    (??)   Apache Spark - od jednoduchých transformací po vysoce výkonné joby - DataScript s.r.o.

    - ... cena: 24.900 Kč/Kurz (30.129 Kč/Kurz včetně DPH)





  • -- ... pro objednání kurzu klikněte na zvolený termín školení a/nebo je možno poslat:



    Popis kurzu
    Apache Spark for Data Engineers - Advanced Optimizations


    Kurz je určen pro ...

    Cílová skupina Datoví inženýři, scientisti a další uživatelé Sparku, kteří již mají se Sparkem nějakou zkušenost a chtějí se naučit optimalizovat Sparkové joby pro dosažení maximálního výkonu.


    Lektoři kurzu

    David Vrba Ph.D.
    David pracuje v Socialbakers jako data scientist a data engineer. Na denní bázi se zabývá optimalizací Spakových aplikací a vyvíjí Sparkové joby, které zpracovávají data na různých škálách od jednotek GBs až po desítky TBs. Vedle toho se zabývá výukou Sparkových trainingů a jeho školeními již prošla celá řada týmů zejména datoví analytici, scientisti a inženýři. David je také Sparkovým kontributorem, přispívá do zdrojového kódu a pravidelně mluví na konferencích a meetupech jako je Spark + AI Summit, MLPrague nebo Spark + AI Prague meetup.


    [Kurz] Program kurzu (obsah přednášky/semináře/rekvalifikace/studia) ...



    Cíle kurzu

    • Rozumět a orientovat se ve fyzických plánech Spark SQL
    • Přepsat query za účelem dosažení efektivnějšího plánu
    • Používat některá konfigurační nastavení
    • Připravit Sparkem data pro efektivní analytiku ve Sparku
    • Diagnostikovat botlneck Sparkoveho jobu

    *
    • Rozumět a orientovat se ve fyzických plánech Spark SQL
    • Přepsat query za účelem dosažení efektivnějšího plánu
    • Používat některá konfigurační nastavení
    • Připravit Sparkem data pro efektivní analytiku ve Sparku
    • Diagnostikovat botlneck Sparkoveho jobu

    Garant kurzu David Vrba Ph.D.
    David pracuje v Socialbakers jako data scientist a data engineer. Na denní bázi se zabývá optimalizací Spakových aplikací a vyvíjí Sparkové joby, které zpracovávají data na různých škálách od jednotek GBs až po desítky TBs. Vedle toho se zabývá výukou Sparkových trainingů a jeho školeními již prošla celá řada týmů zejména datoví analytici, scientisti a inženýři. David je také Sparkovým kontributorem, přispívá do zdrojového kódu a pravidelně mluví na konferencích a meetupech jako je Spark + AI Summit, MLPrague nebo Spark + AI Prague meetup.
    Osnova Spark SQL internals (Query Execution)
    • Logical planning (Catalog, Analyzer, Cache Managerm, Optimizer)
      • Catalyst API
      • Extending the optimizer
      • Limiting the optimizer

    • Physical planing
      • Query planner, strategies
      • Spark plan Executed plan
      • Understanding operators in physical plan

    • Cost based optimizer
      • How cost based optimizations work
      • Statistics collection
      • Statistics usage

    Lab I
    • Implement simple optimization rule
    • Fix a query based on the information from the query plan
    Query optimization
    • Shuffle elimination
      • Bucketing
      • Data repartition (when and how)

    • Optimizing joins
      • Shuffle-free join
      • One-side shuffle-free join
      • Broadcast join vs sort-merge join

    • Data reuse
      • Caching
      • Checkpointing
      • Exchange reuse

    Lab II
    • Optimize queries
    Optimization tips
    • Choose appropriate number of shuffle partitions
    • Nondeterministic expressions
    • Configuration settings
    Data layout
    • Different file formats
      • Parquet vs Json

    • Partitioning and bucketing
      • How bucketing works
      • How to ensure appropriate number of files

    • Delta-io
      • Open source storage layer with ACID transactions

    Lab III
    • Prepare data for analytical queries

    Předpoklady účastníka Tento kurz je navazujícím kurzem ke školení Apache Spark - od jednoduchých transformací po vysoce výkonné joby , ve kterém člověk mimo jiné získá dobrou znalost DataFramového API a základní přehled o interních procesech ve Sparku. Pro absolvování tohoto kurzu je tedy dobré mít předchozí zkušenosti se Sparkem (např. na úrovni výše zmíněného kurzu ), znát DataFramové API a chápat základní principy distribuovaného počítání.


    [Kurz] Cíl školení / poznámka ke kurzu...



    Cíle kurzu
    • Rozumět a orientovat se ve fyzických plánech Spark SQL
    • Přepsat query za účelem dosažení efektivnějšího plánu
    • Používat některá konfigurační nastavení
    • Připravit Sparkem data pro efektivní analytiku ve Sparku
    • Diagnostikovat botlneck Sparkoveho jobu


    [Školení] Další popis kurzu (úroveň, minimální znalosti, informace o cenách kurzu) ...

    Předpoklady účastníka Tento kurz je navazujícím kurzem ke školení Apache Spark - od jednoduchých transformací po vysoce výkonné joby , ve kterém člověk mimo jiné získá dobrou znalost DataFramového API a základní přehled o interních procesech ve Sparku. Pro absolvování tohoto kurzu je tedy dobré mít předchozí zkušenosti se Sparkem (např. na úrovni výše zmíněného kurzu ), znát DataFramové API a chápat základní principy distribuovaného počítání.




    [dotaz na školení/kurz] Formulář pro komentáře, dotazy a odpovědi


    Dotaz ke kurzu: Apache Spark for Data Engineers - Advanced Optimizations
    text dotazu, ostatní data (tel/email) se samozřejmě nezveřejňují a nezobrazují, pouze budou přeposlána školící firmě

       ... a pro kontrolu zadejte prosím znova Váš email
    Někdy je zadaná špatná emailová adresa a odpověď se vrátí, proto prosím zadejte email dvakrát

                



    Chci poslat přihlašovací údaje na server skoleni-kurzy.eu
    [Registrovat jako uživatele Ano/Ne]

    Pokud jste přihlášeni, email nemusíte zadávat




    Vložte potvrzovací kód Vložte číslo             

    Pro změnu potvrzovacího kódu je možno znovu načíst stránku

    Komentáře a dotazy na školení / kurz / seminář


    DataScript s.r.o.

    :: DataScript je autorizovaným poskytovatelem IT kurzů a certifikací. V našich školících prostorách poskytujeme řadu vysoce odborných a respektovaných IT kurzů, specializovaných technologických školení i certifikací IT specialistů, systémových administrátorů a techniků. V nabídce naší činnosti nechybí ani speciální tréninky určené ke zvýšení profesionálních dovedností a schopností odborných pracovníků. DataScript klade důraz nejen na dokonalou teoretickou přípravu a odborné znalosti, ale rovněž na jejich praktické využití a řešení konkrétních situací. DataScript je součástí koncernu Servodata. Společnost Servodata je významným Value Added Distributorem komponent a infrastruktury podnikových ICT řešení. Dlouhodobě se specializuje na distribuci ...

    Platební podmínky pro účast na kurzu

    Objednavateli bude zaslána závazná přihláška k podpisu. Poté bude účastník na školení registrován. Objednavatel uhradí částku kurzovného za výše uvedeného posluchače na základě faktury vystavené poskytovatelem.





    Podobné kurzy #Apache Spark for Data Engineers - Advanced Optimizations >>


    Další kurzy a školení: Apache Spark for Data Engineers - Advanced Optimizations
    Odkaz na podobné školení a/nebo školení od jiné firmy a v jiné ceně:

    Podobný kurz Popis kurzu Další kurzy a školení
    Apache Spark - od jednoduchých transformací po vysoce výkonné joby
    Kurz
    Jiný kurz v jiné ceně : Apache Spark je distribuovaný výpočetní engine, který poskytuje unifikovaný framework pro zpracování velkých objemů dat, interaktivní analýzu, machine learning, analýzu grafu a streaming. V průběhu posledních několika let se stává standardem pro zpracování těchto workloadů Další podobné školení nebo kurzy
    Oracle - Optimalizace a ladění aplikacíOracle - optimization and debugging applications
    Kurz
    Jiný kurz v jiné ceně : Cílem kurzu je seznámit účastníky se základními aspekty ovlivňujícími výkonové paramety Oracle, naučit se optimalizovat a kontrolovat existující aplikace pro zlepšení výkonu. Účastníci se naučí interpretovat výsledky exekučních plánů, optimalizovat jednotlivé SQL dotazy a Další podobné školení nebo kurzy
    Security Engineering on AWS
    Kurz
    Jiný kurz v jiné ceně : This course demonstrates how to efficiently use AWS security services to stay secure in the AWS Cloud. The course focuses on the security practices that AWS recommends for enhancing the security of your data and systems in the cloud. Další podobné školení nebo kurzy
    Security Engineering on AWS - for APN partners
    Kurz
    Jiný kurz v jiné ceně : This course demonstrates how to efficiently use AWS security services to stay secure in the AWS Cloud. The course focuses on the security practices that AWS recommends for enhancing the security of your data and systems in the cloud. Další podobné školení nebo kurzy
    EX294 - Red Hat Certified Engineer (RHCE) exam for Red Hat Enterprise Linux 8
    Kurz
    Jiný kurz v jiné ceně : Study points for the exam As an RHCE exam candidate, you should be able to handle all responsibilities expected of a Red Hat Certified System Administrator, including these tasks: Be able to perform all tasks expected of a Red Hat Certified System Administrator Další podobné školení nebo kurzy
    Security Engineering on AWS
    Kurz
    Jiný kurz v jiné ceně : Předpokládané znalosti We recommend that attendees of this course have the following prerequisites: AWS Cloud Practitioner Essentials, AWS Security Fundamentals, Architecting on AWS, Working knowledge of IT security practices and infrastructure co Další podobné školení nebo kurzy
    Zátěžové testování s Apache JMeter
    Kurz
    Jiný kurz v jiné ceně : IT konference Kurzy a certifikace Dev & Test Testing Recenze - Zátěžové testování s Apache JMeter Zpět Petr Kunčar 20. 4. Další podobné školení nebo kurzy
    Apache CassandraApache Cassandra
    Kurz
    Jiný kurz v jiné ceně : Účastníci kurzu se seznámí se správou distribuované databáze Apache Casssandra. Kurz bude vedený z pohledu DevOps, kdy budou vysvětleny základní principy práce s touto databází, návrh datového modelu aplikace a její následná optimalizace. Další podobné školení nebo kurzy
    Apache WicketApache Wicket
    Kurz
    Jiný kurz v jiné ceně : Cílem kurzu je seznámit Java vývojáře s komponentně orientovaným webovým frameworkem Apache Wicket. Během kurzu se nejen naučíte snadno vytvářet nové aplikace v Apache Wicket, ale osvojíte si i postupy a techniky, které jsou klíčové pro jejich efektivní a dlouhodobou udr Další podobné školení nebo kurzy
    Oracle Database 11g/12c Workshop: Administrace databáze - pokročilý kurzOracle 11g/12c Workshop: Advanced Database Administration
    Kurz
    Jiný kurz v jiné ceně : V tomto kurzu si administrátoři, vývojáři nebo další zájemci o správu Oracle databází doplní znalosti o témata týkající se zálohování, obnovy, přenosu dat a základní konfigurace sítí. Získají dovednosti s použitím komponent jako Recovery manager, Resource manger, Scheduler Další podobné školení nebo kurzy

    Podobný    = Podobný kurz nebo školení




    Poslední aktualizace: 2022-10-04 00:41:19

    DataScript s.r.o.
    Apache Spark for Data Engineers - Advanced Optimizations #

    Počítačové kurzy a semináře - grafika, databáze, programování, web & internet, office, GIS

    Téma kurzů nebo školení:
  • MAIL RSS Počítačové a IT kurzy
  • MAIL RSS Programování

    Typ kurzu/školení: Kurz



    Klíčová slova pro dané školení:
    advanced, apache, br, brapache, data, distribuovaný, engineers, optimizations, spark, spark, výpočetní



    [RSS] Nechte si posílat nové termíny kurzu Chcete vědět kdy bude další termín kurzu? - Využijte RSS a nechte si posílat každé změny a/nebo nové termíny kurzu do Vaší čtečky RSS (bez registrace)

      RSSApache Spark for Data Engineers - Advanced Optimizations [RSS] - Novinky a nové termíny kurzu

    © DataScript s.r.o. - Praha 7 :: - DataScript je autorizovaným poskytovatelem IT kurzů a certifikací. V našich školících prostorách poskytujeme řadu vysoce odborných a respektovaných IT kurzů, specializovaných technologických školení i certifikací IT specialistů, systémových administrátorů a techniků. V nabídce naší činnosti nechybí ani speciální tréninky určené ke zvýšení profesionálních dovedností a schopností odborných pracovníků. DataScript klade důraz nejen na dokonalou teoretickou přípravu a odborné znalosti, ale rovněž na jejich praktické využití a řešení konkrétních situací. DataScript je součástí koncernu Servodata. Společnost Servodata je významným Value Added Distributorem komponent a infrastruktury podnikových ICT řešení. Dlouhodobě se specializuje na distribuci ...

    Platební podmínky pro účast na kurzu


    Objednavateli bude zaslána závazná přihláška k podpisu. Poté bude účastník na školení registrován. Objednavatel uhradí částku kurzovného za výše uvedeného posluchače na základě faktury vystavené poskytovatelem.




     
    Komentáře a dotazy na školení a nebo kurz

     

     

    Hledáte náhodou nějakou práci?


    Data Administrátor 200Kč/hod
    společnosti k uchazečům a uchazečkám o volná pracovní místa. Máte zájem o nabídku Data Administrátor 200Kč/hod? Vaše odpověď... odpovědět z počítače? Nechte si poslat tuto nabídku na váš e-mail Nechte si poslat na váš e-mail nabídku Data Administrátor..., Praha 2

    Specialista/ka odměňování / data analytik/čka
    /ku odměňování / data analytika/čku, který/á bude součástí našeho centrálního týmu a pomůže navrhnout, udržovat a přizpůsobovat HR..., Praha 2

    Nano Energies Senior Flexibility Data Analyst Praha Full-time
    a/nebo optimalizace. Dobrou znalost Pythonu v kontextu data science / data engineering. Bezproblémová práce s databázemi [PostgreSQL..., Praha 1

    Podobné kurzy # apache + spark + data + engineers + advanced + optimizations


  •  
     
    RSS
    RSS - odběr novinek - nové kurzy, rekvalifikace a školení
    Nové kurzy/školení | Nové termíny kurzů/školení | Last-Minute | Odběr novinek na Váš mail
    skoleni-kurzy.eu

    SKOLENI-KURZY.EU



    REGIONY



    MENU



    KONTAKT


    skoleni-kurzy.eu
    2007 - 2022 © OBEC.net, sro
    Potoční 8, 617 00 Brno, CZ
    Email: info[at]skoleni-kurzy.eu
    Telefon:(+420) 775 193 488
    Fax:
    Kontakt

    +



    +




    V případě dotazu ke kurzu využijte prosím kontaktní formulář u daného konkrétního kurzu





    Školení: Zoner Photo Studio – kurz pro pokročilé v říjnu 2022 - Brno
    ^