Apache Sqoop adalah alat yang digunakan untuk memindahkan data daripada / kepada sistem fail Hadoop diedarkan. Hadoop seni bina boleh memproses data BESAR dan menyimpan ia di HDFS. Tetapi jika kita ingin menggunakan data tersebut maka kita perlu menggunakan beberapa alat untuk mengimport / mengeksport ia berkesan. Apache Sqoop membolehkan import mudah dan eksport data dari berstruktur menyimpan data seperti pangkalan data hubungan, data perusahaan gudang, dan sistem NoSQL.
Apache Sqoop adalah sangat penting apabila kita berfikir tentang menggunakan Hadoop untuk analisis dan data processing.The dua aspek utama yang alamat Sqoop adalah
satu) Memuatkan pukal(pengeluaran) data ke dalam Hadoop.
b) Mengakses data pukal dari peta / mengurangkan aplikasi berjalan pada kelompok besar.
Sebelum ini kita telah digunakan untuk menulis / menggunakan skrip untuk mengimport / mengeksport data antara systems.But berbeza proses ini adalah tidak cekap dan tidak memastikan ketekalan data, ketepatan dan lain-lain perkara penting yang kritikal.
Sqoop menggunakan mekanisme yang lurus ke hadapan untuk memindahkan dataset keseluruhan data.The splitted menjadi kepingan dan setiap keping adalah job.Now peta sahaja setiap kerja hanya peta adalah bertanggungjawab untuk memindahkan satu keping set data-.
Seperti yang kita telah dibincangkan, Sqoop boleh digunakan untuk mengimport data dari RDBMS ke dalam HDFS.The input untuk proses import adalah jadual pangkalan data dan Sqoop membaca baris jadual oleh baris ke HDFS.The proses input dilakukan selari supaya output akan menjadi pelbagai output files.These fail boleh menjadi fail teks atau lain-lain jenis fail yang mengandungi data bersiri.
Terdapat satu oleh produk import process.It Sqoop adalah kelas Java yang boleh merangkumi satu deretan diimport table.This Jawa kelas digunakan oleh Sqoop sendiri durng kod sumber import process.The ini oleh-produk Jawa kelas .
Selepas pemprosesan data yang diimport, ia boleh dieksport ke mana-mana pangkalan data hubungan menggunakan Sqoop. Sqoop akan membaca satu set fail teks delimited dari HDFS (selari) dan memasukkan mereka sebagai baris baru kepada
sasaran table.Now data ini adalah disediakan untuk consumtion oleh aplikasi luaran.
Sqoop juga menyediakan beberapa utiliti arahan untuk mendapatkan maklumat tentang databaes di mana ia adalah senarai working.The skema pangkalan data, jadual juga boleh dilihat menggunakan Sqoop commands.Sqoop juga menyediakan primitif SQL pelaksanaan shell.
Sqoop operasi seperti import,mengeksport,kod dan sebagainya generasi boleh import customized.For, banjaran baris / lajur boleh menjadi pembatas specified.The, melarikan diri aksara untuk perwakilan fail berasaskan juga boleh menjadi perubahan sebagai satu pakej requirement.The / kelas nama kod yang dijana juga boleh disesuaikan untuk memenuhi keperluan permohonan.
Penyambung Sqoop adalah satu lagi bahagian penting daripada tool.Connectors komponen plugin yang dibina pada penyambung lanjutan framework.These Sqoop boleh ditambah kepada mana-mana pemasangan Sqoop dan kemudian data boleh dipindahkan antara Hadoop dan kedai luar.
Sqoop datang dengan penyambung lalai untuk pelbagai pangkalan data yang popular seperti MySQL, PostgreSQL, Oracle, SQL Server dan DB2.Sqoop juga termasuk penyambung JDBC generik yang boleh digunakan untuk menyambung ke mana-mana pangkalan data diakses melalui JDBC.
Untuk menyimpulkan perbincangan ini kita boleh mengatakan yang Sqoop yang boleh digunakan untuk memindahkan dataset besar antara Hadoop dan luaran datastores efficiently.Beyond ini, Sqoop juga menawarkan banyak ciri-ciri canggih seperti format data yang berbeza,mampatan,penyesuaian,bekerja dengan lain-lain pertanyaan.
