Big Data
Dosen : Dito Putro Utomo, M.Kom
Mata Kuliah : Data Warehouse
Universitas : Budi Darma
Jurusan : Sistem Informasi (SI-M2101)
Apa sih sebenarnya big data dan data warehouse ini? Jadi, Big data ini merupakan Sekumpulan data dengan skala besar sehingga tidak bisa diproses menggunakan alat tradisional dan harus menggunakan cara maupun alat baru untuk mendapatkan nilai dari data tersebut. Hal tersebut bisa dilakukan dengan cara clustering, partisi, dan digudangkan pada data warehouse.
Sedangkan, data warehouse merupakan database yang sudah didesain secara khusus untuk mengerjakan proses query, membuat laporan dan melakukan analisa. Data yang sudah disimpan dalam data business history dari sebuah perusahaan tidak tersimpan secara rinci atau detail. Sehingga data bisa bertahan lebih lama, berbeda dengan data online transaction Processing yang tersimpan secara langsung dan lengkap.
Karakteristik Big Data
Karakteristik big data didefinisikan oleh tiga karakteristik utama yaitu volume, variety, dan velocity.
-Volume mengacu pada jumlah data yang tersedia berupa terabytes, petabytes, atau bahkan exabytes. Data besar ini dapat berasal dari berbagai sumber seperti website, aplikasi mobile, jaringan sosial, log perangkat, dan lain-lain.
-Variety mengacu pada jenis data yang tersedia yang terstruktur seperti data tabel atau data yang tidak terstruktur seperti teks, gambar, suara, video, dll.
-Velocity mengacu pada kecepatan data yang tersedia yang dapat dikumpulkan dan diproses dalam waktu yang sangat singkat, sehingga perlu diolah dengan cepat untuk membuat keputusan bisnis yang tepat.
Sumber Big Data
Data besar atau big data kemudian seperti yang disampaikan di awal bisa ditemukan di berbagai sumber. Saat ini terdapat beberapa sumber yang terbilang paling sering memberi kontribusi data dalam jumlah besar dan memiliki kualitas baik. Diantaranya adalah:
1. Internet
Sumber pertama adalah internet, dan merupakan penyedia data raksasa paling besar dan paling sering dimanfaatkan perusahaan. Sebab cara kerja internet sendiri adalah menyimpan semua data dari para penggunanya. Jadi, aktivitas pencarian apapun nantinya akan disimpan dan kemudian menjadi kumpulan data.
2. Smartphone
Smartphone juga menjadi penyumbang data dalam skala besar, sebab aktivitas apapun di dalamnya akan otomatis disimpan oleh perangkat. Sumber data terbesar di smartphone sendiri adalah aplikasi yang diinstal di dalamnya. Jadi, setiap kali aplikasi ini berjalan maka data akan didapatkan dan dikumpulkan oleh sistem.
3. Media Sosial
Media sosial dimana menjadi media yang banyak dibuka siapa saja di era sekarang bahkan sesaat setelah bangun tidur juga menjadi sumber data dalam skala besar. Setiap foto, video, termasuk cuitan di media sosial sudah disebut data. Bisa dibayangkan berapa miliar data didapatkan perusahaan saat mengelola media sosial?
Cara Kerja Big Data
Data dalam jumlah besar dan beragam di dalam Big Data disimpan di dalam wadah khusus yang biasanya menggunakan penyimpanan data besar seperti Hadoop, Cloud, atau NoSQL.
Data tersebut dapat dikumpulkan dari berbagai sumber dalam format mentah, kemudian difilter dan diproses agar dapat ditampilkan sesuai kebutuhan untuk program analitik tertentu.
Pada kasus lain, data dalam Big Data dapat difilter terlebih dahulu menggunakan program pengumpulan dan pengolahan data tertentu, sehingga dapat langsung digunakan untuk menganalisis.
Proses pemrosesan Big Data membutuhkan daya komputasi yang besar, biasanya pemrosesan dilakukan dan didistribusikan ke beberapa perangkat dengan menggunakan skema jaringan komputer atau Cloud.
Setelah data tersimpan dan diproses, seorang ilmuwan data atau analis data akan menganalisis data tersebut menggunakan aplikasi analitik. Ahli tersebut harus memiliki pemahaman yang kuat tentang data yang ingin dicari dan dianalisis dalam Big Data.
Dalam proses analisis ini, para ahli tersebut melakukan serangkaian upaya untuk memahami Big Data tersebut. Biasanya, ilmuwan data atau analis data akan melakukan penyaringan, validasi, serta transformasi pada kumpulan data tersebut.
Contoh Big Data dalam Kehidupan Sehari-Hari
1. Perusahaan Perbankan
Perusahaan perbankan kini sudah jamak memanfaatkan olah data dalam skala besar untuk menyediakan produk dan layanan yang semakin beragam dan berkualitas. Perbankan akan mendapatkan data dari aplikasi perbankan maupun transaksi perbankan offline di berbagai kantor cabang.
2. Perusahaan Retail
Banyak perusahaan retail kini menawarkan layanan membership, menyediakan aplikasi belanja online, membangun website, dan lain sebagainya. Semau ini membantu perusahaan mendapatkan data berskala besar tidak hanya dari transaksi langsung di lokasi retail.
Namun juga mendapatkan data dari sumber lain, sehingga membantu perusahaan retail ini untuk berkembang. Misalnya menentukan promosi seperti apa yang tepat, menarik, dan sesuai kebutuhan konsumen. Kemudian produk apa saja yang termasuk jenis produk baru dan perlu segera di disediakan.
Sekian materi di blog saya kali ini....
Semoga menjadi ilmu yang bermanfaat♡