Indholdsfortegnelse:
Video: Hvordan planlægger jeg et hive-job i oozie?
2024 Forfatter: Lynn Donovan | [email protected]. Sidst ændret: 2023-12-15 23:45
Til planlægge Hive job ved brug af Oozie , skal du skrive en Hive -handling.
hql) i den.
- Opret en mappe i HDFS ved at skyde nedenstående kommando.
- hadoop fs -mkdir -p /bruger/ oozie /arbejdsgange/
- Sæt arbejdsgang. xml, Hive script (create_table. hql) og bikube -sted. xml i den mappe, der blev oprettet i trin 2. Du kan bruge kommandoen nedenfor.
Bare så, hvordan kører jeg Hive-script i oozie?
Kør Hive Jobs med Oozie
- Angiv hive-stedet. xml i parameteren job-xml.
- Angiv navnet på scriptet (f.eks. script. q), der indeholder hive-forespørgslen i scriptparameteren.
- Tilføj eventuelt egenskaber, der bruges af Oozie launcher-jobbet. Tilføj præfikset oozie. launcher til ejendomsnavnene.
Desuden, hvordan kører jeg oozie workflow? Kører Oozie Workflow fra kommandolinjen
- Log ind på webkonsollen.
- Kopier oozie-eksempler til din hjemmemappe i webkonsollen: cp /usr/hdp/current/oozie-client/doc/oozie-examples. tjære. gz.
- Udpak filer fra tar tar -zxvf oozie-examples.tar.gz.
- Kopiér eksempelbiblioteket til HDFS hadoop fs -copyFromLocal eksempler.
Hvordan planlægger jeg i denne forbindelse et Hadoop-job?
Hvordan planlægge job i hadoop - Quora. Den enkleste måde er at pakke din kode ind i et shell-script og tidsplan det som en cron job på kantnoden (den node, hvor du normalt indsender din job ). Men sædvanligvis pakker koden i et script og kører det som en job er svært at fejlfinde. teste og vedligeholde.
Hvad er oozie workflow?
Oozie er en workflow planlægningssystem til at administrere Apache Hadoop-job. Oozie arbejdsgang job er Directed Acyclical Graphs (DAG'er) af handlinger. Oozie Koordinatorjob er tilbagevendende Oozie arbejdsgang job udløst af tid (frekvens) og datatilgængelighed. Oozie er et skalerbart, pålideligt og udvideligt system.
Anbefalede:
Hvordan planlægger jeg en Google-advarsel?
Google Alerts er praktisk i en række forskellige situationer, og de er nemme at indstille: Gå til google.com/alerts i din browser. Indtast en søgeterm for det emne, du vil spore. Vælg Vis indstillinger for at indsnævre advarslen til en specifik kilde, sprog og/eller område. Vælg Opret alarm
Hvordan planlægger jeg en backup i SQL?
Planlagt automatisk SQL-databasesikkerhedskopiering ved hjælp af SSMS Log ind på SQL Server Management Studio (SSMS) og opret forbindelse til databasen. Indtast navnet på den vedligeholdelsesplan, du vil oprette. Vælg nu fra vinduet i venstre side, vælg Backup Database-opgaven for at konfigurere backup-processen og træk elementet til det højre vindue som vist på billedet
Hvordan planlægger jeg et kalendermøde?
Sådan fungerer det Lav enkle regler. Opsætningen er nem. Fortæl Calendly om dine tilgængelighedspræferencer, og det vil gøre arbejdet for dig. Del dit link. Del dine Calendly-links via e-mail eller integrer det på din hjemmeside. Tidsplan. De vælger et tidspunkt, og begivenheden føjes til din kalender
Hvordan planlægger jeg en Office 365-migrering?
Din Office 365-migreringsplan i fem trin [Gratis hvidbog] Trin 1 i din Office 365-migreringsplan: Opdagelse og vurdering. Trin 2 i din Office 365-migreringsplan: Strategisk planlægning. Trin 3 i din Office 365-migreringsplan: Pilotmigrering. Trin 4 i din Office 365-migreringsplan: Migrer
Hvordan planlægger jeg en opgave for at genstarte en server?
Sådan: Planlæg Windows Server til at genstarte Trin 1: Åbn Task Scheduler. Trin 2: Opret en ny opgave. Trin 3: Følg guiden Planlagt opgave. Trin 4: Vælg det program, der skal køres. Trin 5: Vælg frekvensen. Trin 6: Vælg det tidspunkt og den dag, du ønsker, at opgaven skal starte. Trin 7: Indtast brugernavn og adgangskode for en bruger