Apache Sqoop se yon zouti yo itilize pou transfere done ki sòti nan / nan sistèm Hadoop dosye distribye. Hadoop achitekti kapab trete done BIG epi estoke l 'nan HDFS. Men, si nou vle sèvi ak ki done Lè sa a, nou bezwen itilize kèk zouti enpòte / ekspòtasyon li avèk efikasite. Apache Sqoop pèmèt enpòte fasil ak ekspòtasyon nan done ki sòti nan magazen done estriktire tankou bazdone relasyon, antrepwiz done depo, ak sistèm NoSQL.
Apache Sqoop trè enpòtan lè nou panse osijè de lè l sèvi avèk Hadoop pou analytics ak done processing.The de aspè prensipal ki adrès Sqoop yo
yon) Loading en(pwodiksyon) done an Hadoop.
b) Antre nan done èstime nan kat / diminye aplikasyon pou kouri sou grap gwo.
Byen bonè nou itilize yo ekri / itilize Scripts enpòte / ekspòtasyon done ant systems.But diferan pwosesis sa a se rezèvwa epi yo pa asire done konsistans, presizyon ak lòt pwen kritik.
Sqoop itilize mekanis dwat pou pi devan pou transfè-a se data.The dataze tout splitted nan tranch ak chak tranch se yon job.Now kat jeyografik-sèlman chak travay kat jeyografik-sèlman ki responsab pou transfere yon tranch nan gwoup done ki la-.
Kòm nou te diskite, Sqoop can be used to import data from a RDBMS into HDFS.The input to the import process is a database table and Sqoop reads table row by row into HDFS.The input process is performed in parallel so the output will be multiple files.These output files can be text files or other type of files containing serialized data.
Gen yon pa pwodwi nan process.It a enpòte Sqoop se yon klas Java ki ka ankapsulasyon yon ranje enpòte table.This Java klas la ap itilize pa Sqoop a li menm durng enpòte process.The kòd sous sa a pa pwodwi Java klas .
Apre tretman done yo enpòte, li kapab ekspòte nan nenpòt baz done relasyon lè l sèvi avèk Sqoop. Sqoop pral li yon seri fichye tèks séparer soti nan HDFS (nan paralèl) epi antre yo tankou ranje nouvo nan la
sib table.Now done sa yo ki disponib pou consumtion pa aplikasyon yo ekstèn.
Sqoop tou bay kèk sèvis piblik lòd yo ka resevwa enfòmasyon sou databaes yo yo sou ki sa se lis working.The nan chema baz done, tab kapab tou gen pou wè li lè l sèvi avèk Sqoop commands.Sqoop tou bay primitif koki ekzekisyon SQL.
Sqoop operasyon tankou enpòte,ekspòte,elatriye jenerasyon kòd ka customized.For enpòte, chenn ranje / kolòn ka separateur specified.The, chape anba karaktè pou dosye reprezantasyon baze sou kapab tou chanjman tankou pou chak pake a requirement.The / non klas nan kòd la pwodwi kapab tou Customized satisfè kondisyon pou li aplikasyon.
Konektè Sqoop yo se yon lòt pati enpòtan nan tool.Connectors yo se eleman Plugin bati sou konèkteur framework.These ekstansyon Sqoop a ka ajoute nan nenpòt ki enstalasyon Sqoop ak Lè sa a, done kapab transfere ant Hadoop ak magazen ekstèn.
Sqoop vini ak konèkteur default pou bazdone divès popilè tankou miskl, Postgrèskl, Oracle, SQL sèvè ak DB2.Sqoop gen ladan tou yon jenerik jdb Connector ki ka itilize pou konekte avèk nenpòt baz done aksè atravè jdb.
Pou konkli sa a diskisyon nou ka di ka ki Sqoop dwe itilize yo transfere ansanbl gwo ant Hadoop ak ekstèn datastores efficiently.Beyond sa a, Sqoop ofri tou anpil karakteristik avanse tankou fòma done diferan,konpresyon,personnalisation,ap travay ak elatriye queries.
