Opleiding : Talend Open Studio, data-integratie voor big dataGemeenschapsversie (gratis en open source)
Praktijkcursus - 3d
- 21u00 - Ref. IDB
|
Downloaden in pdf-formaat
Deze cursus delen via mail
 | Talend beheersen in een big data-omgeving |
| Talend gebruiken als koppeling tussen bestanden, toepassingen en databases |
| Leer de filosofie van het gereedschap |
| Beste praktijken toepassen en flexibele, robuuste informatiesystemen ontwerpen |
| Je taken kunnen uitvoeren |
| Gegevens lezen en schrijven naar HDFS en NoSQL databases met Talend jobs |
| Transformatietaken maken met behulp van Pig en Hive |
| Datakwaliteit beheren met Talend |
| Sqoop gebruiken om de migratie van relationele databases naar Hadoop te vergemakkelijken |
| Het gebruik van de componentenbibliotheek onder de knie krijgen |
| Eenvoudige en complexe end-to-end ETL-processen (Extract, Transform en Load) uitvoeren |
Doelgroep
BI-consultants, architecten, projectmanagers, gegevensbeheerders of iedereen die gegevensstromen moet beheren.
Voorafgaande vereisten
Kennis van Hadoop, Spark en Kafka.
Praktische modaliteiten
Opeenvolging van miniprojecten die leiden tot het ontwerp van Talend big data jobs van toenemende moeilijkheidsgraad.
Opleidingsprogramma
1 Presentatie Talend Open Studio
- Gegevensintegratie. ETL-oplossingen.
- Big data. Ongestructureerde gegevens. NoSQL databases.
- Het Hadoop-ecosysteem (HDFS, MapReduce, HBase, Hive, Pig, enz.).
- TOS voor gegevensintegratie: gegevensintegratie.
- TOS voor gegevenskwaliteit: beheer van gegevenskwaliteit.
- TOS voor big data.
- Productfilosofie.
Praktisch werk
Installatie/configuratie van TOS voor big data. Aan de slag.
2 Banen ontwerpen
- Inleiding tot bedrijfsmodellering en functieontwerp.
- Eenvoudige transformatiecomponenten.
- Gegenereerde code bekijken, een taak uitvoeren.
- Taken instellen.
- Creëer en beheer je eigen variabelen.
- Goede ontwerppraktijken.
Praktisch werk
Ontwikkeling van een taak die verbinding maakt met een gegevensbron, filtering, transformatie en opslag van het resultaat in een bestand.
3 Gegevensintegratie in een cluster en NoSQL-databases
- Definitie van metagegevens over Hadoop-clusterverbindingen.
- Maak verbinding met een MongoDB, Neo4j, Cassandra of Hbase database en exporteer gegevens.
- Eenvoudige integratie van gegevens met een Hadoop-cluster.
- Presentatie van uitbreidingscomponenten.
- Utilisation du composant d’extension : capture de tweets et importation directe dans HDFS.
Praktisch werk
Lees tweets en sla ze op als bestanden in HDFS, analyseer de frequentie van de besproken thema's en sla de resultaten op in HBase.
4 Importeren/exporteren met Sqoop
- Gebruik Sqoop om gegevens te importeren, exporteren en bij te werken tussen RDBMS- en HDFS-systemen.
- Gedeeltelijke, incrementele import/export van tabellen.
- Een SQL-database importeren/exporteren van en naar HDFS.
- Big data opslagformaten (AVRO, Parquet, ORC, enz.).
Praktisch werk
Relationele tabellen migreren naar HDFS en omgekeerd.
5 Gegevens manipuleren
- Presentatie van de Pig brick en de bijbehorende PigLatin taal.
- Belangrijkste Talend Pig componenten, Pig flow ontwerp.
- Ontwikkeling van UDF-routines.
Praktisch werk
Trends in het gebruik van een website identificeren door de logbestanden te analyseren.
6 Architectuur en best practices in een Hadoop-cluster
- Efficiënte opslag in Hadoop ontwerpen.
- Data lake versus data warehouse: moet je kiezen?
- Hadoop en het Disaster Recovery Plan (DRP) in het geval van een groot incident.
- Automatiseer je workflows.
Praktisch werk
Creëer je data lake en automatiseer de werking ervan.
7 Analyseer en sla uw gegevens op met Hive
- Hive-verbinding en schema metagegevens.
- De taal HiveQL.
- Ontwerp van Hive-stromen, uitvoeren van query's.
- De ELT-componenten van Hive implementeren.
Praktisch werk
Sla de trend van de aandelenkoersen op in HBase en consolideer deze stroom met Hive om de trend per uur voor een bepaalde dag weer te geven.
Feedback van klanten
4,1 / 5
De feedback van klanten is afkomstig van eindevaluaties na de opleiding. De score wordt berekend op basis van alle evaluaties die minder dan 12 maanden oud zijn. Alleen die met een tekstcommentaar worden weergegeven.
VICTOR Y.
08/12/25
5 / 5
Hartelijk dank voor de zeer duidelijke en interessante training!
KEVIN L.
08/12/25
4 / 5
Positief: interessant, evenwicht tussen theorie en praktijk, het feit dat we de connectiviteit van Talend met andere tools zagen.Negatief: een beetje meer voorbereiding/controle stroomopwaarts had geen kwaad gekund (bugs, ontbrekende docs), we zouden iets sneller kunnen gaan bij het lezen van de slides om minder gehaast te zijn bij bepaalde manipulaties.Vragen: de handelingen van de docent volgen is prima maar ik weet niet of ik het nog eens spontaan alleen kan :)
MOHAMED F.
08/12/25
4 / 5
Zeer interessante inhoud, hoewel vrij compact in 3 dagen, wat helaas betekende dat ik niet in staat was om de diepte in te gaan op de behandelde concepten (vanwege tijdgebrek). De oefeningen helpen je om de verschillende concepten beter te begrijpen. Sommige theoretische onderwerpen leken wat ver af te staan van het hoofddoel van de cursus, maar waren wel interessant. Over het algemeen was ik heel tevreden.
DEELNEMERS
BI-consultants, architecten, projectmanagers, gegevensbeheerders of iedereen die gegevensstromen moet beheren.
VOORAFGAANDE VEREISTEN
Kennis van Hadoop, Spark en Kafka.
VAARDIGHEDEN VAN DE CURSUSLEIDER
De deskundigen die de cursus leiden zijn specialisten op het betreffende vakgebied. Zij werden geselecteerd door onze pedagogische teams zowel om hun vakkennis als hun pedagogische vaardigheden voor elke cursus die zij geven. Zij hebben minstens vijf tot tien jaar ervaring in hun vakgebied en oefenen of oefenden verantwoordelijke bedrijfsfuncties uit.
BEOORDELINGSMODALITEITEN
De cursusleider beoordeelt de pedagogische vooruitgang van de deelnemer gedurende de gehele cursus aan de hand van meerkeuzevragen, praktijksituaties, praktische opdrachten, …
De deelnemer legt ook van tevoren en naderhand een test af ter bevestiging van de verworven kennis.
TOEGANGSMODALITEITEN EN TERMIJNEN
De inschrijving dient 24 uur voor aanvang van de cursus plaatsgevonden te hebben.
TOEGANKELIJKHEID VOOR MINDERVALIDEN
Is voor u speciale toegankelijkheid vereist? Neem contact op met mevr. FOSSE, contactpersoon voor mindervaliden, via het adres psh-accueil@ORSYS.fr om uw verzoek en de haalbaarheid daarvan zo goed mogelijk te bestuderen.
BI-consultants, architecten, projectmanagers, gegevensbeheerders of iedereen die gegevensstromen moet beheren.
VOORAFGAANDE VEREISTEN
Kennis van Hadoop, Spark en Kafka.
VAARDIGHEDEN VAN DE CURSUSLEIDER
De deskundigen die de cursus leiden zijn specialisten op het betreffende vakgebied. Zij werden geselecteerd door onze pedagogische teams zowel om hun vakkennis als hun pedagogische vaardigheden voor elke cursus die zij geven. Zij hebben minstens vijf tot tien jaar ervaring in hun vakgebied en oefenen of oefenden verantwoordelijke bedrijfsfuncties uit.
BEOORDELINGSMODALITEITEN
De cursusleider beoordeelt de pedagogische vooruitgang van de deelnemer gedurende de gehele cursus aan de hand van meerkeuzevragen, praktijksituaties, praktische opdrachten, …
De deelnemer legt ook van tevoren en naderhand een test af ter bevestiging van de verworven kennis.
PEDAGOGISCHE EN TECHNISCHE MIDDELEN
• De gebruikte pedagogische middelen en cursusmethoden zijn voornamelijk: audiovisuele hulpmiddelen, documentatie en cursusmateriaal, praktische oefeningen en correcties van de oefeningen voor praktijkstages, casestudies of reële voorbeelden voor de seminars.
• Na afloop van de stages of seminars verstrekt ORSYS de deelnemers een evaluatievragenlijst over de cursus die vervolgens door onze pedagogische teams wordt geanalyseerd.
• Na afloop van de cursus wordt een presentielijst per halve dag verstrekt, evenals een verklaring van de afronding van de cursus indien de stagiair alle sessies heeft bijgewoond.
• De gebruikte pedagogische middelen en cursusmethoden zijn voornamelijk: audiovisuele hulpmiddelen, documentatie en cursusmateriaal, praktische oefeningen en correcties van de oefeningen voor praktijkstages, casestudies of reële voorbeelden voor de seminars.
• Na afloop van de stages of seminars verstrekt ORSYS de deelnemers een evaluatievragenlijst over de cursus die vervolgens door onze pedagogische teams wordt geanalyseerd.
• Na afloop van de cursus wordt een presentielijst per halve dag verstrekt, evenals een verklaring van de afronding van de cursus indien de stagiair alle sessies heeft bijgewoond.
TOEGANGSMODALITEITEN EN TERMIJNEN
De inschrijving dient 24 uur voor aanvang van de cursus plaatsgevonden te hebben.
TOEGANKELIJKHEID VOOR MINDERVALIDEN
Is voor u speciale toegankelijkheid vereist? Neem contact op met mevr. FOSSE, contactpersoon voor mindervaliden, via het adres psh-accueil@ORSYS.fr om uw verzoek en de haalbaarheid daarvan zo goed mogelijk te bestuderen.
Dit programma is een origineel concept, ontwikkeld door de pedagogische teams van ORSYS Formation. Elke reproductie, weergave, aanpassing of exploitatie, geheel of gedeeltelijk, zonder voorafgaande schriftelijke toestemming van ORSYS, is ten strengste verboden. ORSYS behoudt zich het recht voor om alle nodige maatregelen te nemen ter bescherming van haar intellectuele-eigendomsrechten.
Data en plaats
Selecteer uw locatie of kies voor de les op afstand en kies vervolgens uw datum.
Klas op afstand
Dernières places
Date garantie en présentiel ou à distance
Session garantie
Dit programma is een origineel concept, ontwikkeld door de pedagogische teams van ORSYS Formation. Elke reproductie, weergave, aanpassing of exploitatie, geheel of gedeeltelijk, zonder voorafgaande schriftelijke toestemming van ORSYS, is ten strengste verboden. ORSYS behoudt zich het recht voor om alle nodige maatregelen te nemen ter bescherming van haar intellectuele-eigendomsrechten.