Apache Sqoop datuak transferitzeko / Hadoop banatuak fitxategi-sistema erabiltzen den tresna bat da. Hadoop arkitektura BIG datuak prozesatu eta gordetzeko HDFS. Baina nahi dugu datu horiek erabili ahal izateko tresna batzuk gero, inportatzeko / esportatzeko da eraginkortasunez erabili behar dugu. Apache Sqoop erraza datu inportazio eta esportazio datuak egituratua, hala nola, datu-base erlazionalak azalera du., enpresa datu-biltegiak, eta NoSQL sistemak.
Apache Sqoop oso garrantzitsua da pentsatzeko garenean Hadoop erabiliz analytics eta bi alderdi nagusien, Sqoop helbide processing.The datuak
bat) Soltean kargatzen(ekoizpen) Hadoop datu.
b) Mapan ontziratu gabeko datuak atzitzea / murrizteko aplikazio klusterrak handi exekutatzen.
Lehenago scripts / idazteko erabili datuak inportatzeko / esportatzeko systems.But ezberdinen arteko prozesu hau eraginkorra da, eta ez du datuen koherentzia ziurtatzeko erabili dugu, zehaztasun eta beste puntu kritikoak.
Sqoop sinplean mekanismo erabiltzen xerrak sartu splitted data.The guztia datu multzoaren transferitzeko, eta xerra bakoitzak mapa-bakarrik job.Now mapa-lan bakoitzean bakarra da xerra bat datu-multzo transferitzeko arduratzen da.
Eztabaidatu dugu bezala, Sqoop can be used to import data from a RDBMS into HDFS.The input to the import process is a database table and Sqoop reads table row by row into HDFS.The input process is performed in parallel so the output will be multiple files.These output files can be text files or other type of files containing serialized data.
Dago Java klasearen inportatutako table.This Java klasearen errenkada bat enkapsulatu bera Sqoop, inportatzaile hau iturri process.The kodea durng erabiltzen-import process.It Sqoop-produktu bat da, Java class-produktu .
Prozesatzean ondoren, inportatutako datuak, erlazionalak datu-basean edozein Sqoop erabiliz esporta daitezke. Multzo Sqoop puntu eta komak mugatzen du testu fitxategi bat irakurri jarriko HDFS from (paraleloan) sartu eta horiek Errenkada berri gisa
target table.Now datu horiek consumtion eskuragarri kanpoko aplikazioen.
Sqoop ere eskaintzen du komando utilitate batzuk databaes buruzko informazioa lortzeko, datu-basearen eskemak zerrenda working.The da, taulak ere egin daitezke bisitaldiak Sqoop commands.Sqoop ere eskaintzen primitiboa SQL exekuzioa shell erabiliz.
Sqoop import bezalako eragiketak,esportatzeko,kodea belaunaldi etc customized.For import izan daiteke, errenkada barrutiak / zutabeak specified.The mugatzaileak izan daiteke, ihes karaktereak fitxategi oinarritutako ordezkaritza ere izan daiteke paketea requirement.The / klasearen izena sortutako kodea bakoitzeko aldaketak ere pertsonalizatuko dira aplikazio baldintza bete.
, Sqoop konektoreak tool.Connectors, beste zati garrantzitsu bat dira plugin osagaien gainean eraikitako Sqoop luzapena framework.These konektoreak edozein Sqoop instalazioa gehitu ahal izango da, eta ondoren, datuak Hadoop eta kanpoko denda artean transferitu daitezke.
Sqoop default konektoreak dator, besteak beste, MySQL datu-base gisa popular hainbat, PostgreSQL, Oracle, Era berean, SQL Server eta DB2.Sqoop orokorra JDBC bitartez eskuragarriak edozein datu-basea konektatzeko erabil daiteke konektorea JDBC.
Eztabaida hau bukatzeko, esan dezakegu erabil daitezkeen Sqoop arteko datu-multzo handi Hadoop eta kanpoko datastores transferitzeko efficiently.Beyond honetan, Sqoop datuak formatu ezberdinak bezalako ezaugarri aurreratuak asko ere eskaintzen ditu,konpresio,customization,kontsultak etc lan.
