Isi Artikel
1. Apa itu Teknologi Big Data?
2. Kenapa Teknologi Big Data Penting?
3. Masalah Utama Teknologi Big Data
4. Teknologi Big Data Terpopuler
5. Laboratorium Teknologi Big Data Di Kampus Indonesia
Teknologi Big Data merupakan salah satu teknologi kunci pada era Industri 4.0. Nah tahukah kamu apa itu Teknologi Big Data dan bagaimana cara menjalankannya?
Secara sedarhana, Teknologi ini merupakan teknologi yang menggunakan data secara besar. Namun, perlu diketahui bahwa teknologi ini berbeda dengan jenis teknologi lainnya.
Berikut ini, Tekno Sore akan menjelaskan tentang apa itu Teknologi Big Data, kenapa sangat penting, beberapa strategi agar sukses, dan apa saja tips serta trik yang harus dilakukan untuk menguasainya.
Apa Itu Teknologi Big Data?
Pada Industri 4.0 beberapa teknologi berkembang pesat, diantaranya data science, artifisial inteligent (AI), internet of think (IoT), dan big data. Keempat teknologi tersebut saling berhubungan. Data science berkembang pesan karena didukung oleh tidak hanya metode-metode statistik, namun juga metode-metode yang berbasis AI. Metode-metode yang berbasis AI berkembang pesat dan semakin akurat karena didukung oleh tersedianya data yang melimpah (yang sering disebut corpus). Melimpahnya data terjadi karena pemanfaatan IoT di masyarakat kita. Kemampuan untuk mengakuisisi, menyimpan dan memproses data yang melimpah tersebut dimungkinkan dengan adanya teknologi big data.
Menurut penelitian (De Mauro dkk., 2016) teknologi big data didefinisikan sebagai aset informasi yang dicirikan oleh karakteristik 3v, yaitu: volume, velocity dan variety yang tinggi, yang memerlukan metode dan teknologi tertentu untuk memprosesnya menjadi pengetahuan (knowledge) yang bernilai (value) dalam pengambilan keputusan. Aset informasi bermakna penting, karena data dianggap memiliki nilai yang tinggi bagi organisasi seperti aset lain (mesin, material, orang, modal, dan metode) dan dapat divaluasi (dinilai dalam satuan uang).
Baca Juga : Tips Hemat Bikin Audio Kamar Buat Anak Kos Murah Meriah
Kenapa Teknologi Big Data Penting?
Mengapa fenomena teknologi big data berkembang pesat? Konsep hirarki data–information–knowledege–wisdom (DIKW) (Rowley, 2007) atau sering disebut sebagai wisdom hierarchy memberikan alasan yang masuk akal mengapa fenomena teknologi big data begitu berkembang. Dengan besarnya potensi data yang ada saat ini dan di masa depan, maka besar juga potensi informasi yang tersedia untuk ditransformasi menjadi pengetahuan (knowledge) sehingga dapat mengoptimalkan pengambilan keputusan (wisdom).
Dengan demikian, jika teknologi big data dapat ditangani dengan baik akan memberikan manfaat besar bagi organisasi, khususnya semakin bijaksana dalam mengambil keputusan yang didasarkan atas data (bersifat data driven), sehingga bisa lebih mudah mengambil keputusan dalam perubahan kondisi lingkungan yang cepat berubah.
Teknologi big data memiliki karakteristik volume yang tinggi, dari terabytes ke zettabytes. Hal ini berkonsekuensi pada kapasitas penyimpanan dan kapasitas pemrosesan data yang tidak dapat ditangani oleh metode dan teknologi informasi konvensional saat ini. Metode dan teknik penyimpanan yang diterapkan hingga saat ini mengarah pada pemrosesan secara paralel pada lingkungan sistem terdistribusi, baik dari sisi media penyimpanan maupun pemrosesannya.
Karakteristik velocity pada teknologi big data mengubah sudut pandang pemrosesan data secara batch, menjadi pemrosesan data secara dinamis. Dengan demikian data tidak lagi dilihat secara statis, namun secara dinamis sebagai stream. Selain sebagai data stream, teknologi big data juga berkaitan dengan pergerakan data dalam jumlah besar (high volume movement) seperti data spasial, citra, dan lainnya.
Teknologi big data bersumber dari berbagai event. Semua kegiatan kita yang menggunakan komputer, gadget, sensor dan peralatan lainnya (IoT) menghasilkan teknologi big data. Selain sumber yang beraneka ragam, dari sisi struktur juga beraneka ragam, mulai dari yang terstruktur, seperti: data transaksi (pasar uang, e-commerce, dll), semi terstruktur, maupun yang tidak terstruktur, seperti: image, text opini pada media sosial maupun halaman web di internet. Untuk itu diperlukan metode dan teknologi untuk mengintegrasikan teknologi big data dari berbagai sumber dan dari format yang berbeda-beda tersebut.
Baca Juga : Tips Hemat Bikin Audio Kamar Buat Anak Kos Murah Meriah
Masalah Utama Pada Teknologi Big Data
Apa masalah utama dari teknologi big data? Masalah utama teknologi big data dikenal dengan istilah fenomena data deluge, suatu fenomena dimana laju pertumbuhan data lebih tinggi dari pada laju kemampuan memproses dan menganalisis data suatu organisasi. Oleh karena itu dalam memproses dan menganalisis data, kita memerlukan teknologi yang tidak konvensional lagi.
Kita memerlukan teknologi yang dapat mengimbangi laju pertumbuhan data yang meningkat seiring dengan waktu dan peningkatan penggunaan teknologi informasi dan komunikasi.
Baca Juga : Tips Hemat Bikin Audio Kamar Buat Anak Kos Murah Meriah
Teknologi Big Data Terpopuler
Teknologi big data merupakan teknologi khusus yang diperuntukkan untuk menangani masalah big data. Untuk menangani masalah volume, teknologi big data menggunakan teknik penyimpanan dan pemrosesan data terdistribusi. Masalah velocity ditangani dengan menggunakan pemrosesan stream dan terdistribusi. Sedangkan masalah variety ditangani menggunakan teknik integrasi data dan penyimpanan data tidak terstruktur (on write). Penentuan struktur dilakukan pada saat proses pembacaan data tersebut (on read).
Teknologi big data yang populer digunakan saat ini adalah teknologi Hadoop. Hadoop dikembangkan pada awalnya oleh Google (Ghemawat dkk., 2003), kemudian menjadi proyek Apache yang berdiri sendiri. Prinsip utama dari teknologi Hadoop adalah penyimpanan dan pemrosesan terdistribusi pada komputer-komputer komoditas yang terhubung dalam jaringan (sering disebut cluster).
Inti dari teknologi Hadoop adalah Hadoop Distributed File System (HDFS) untuk menangani penyimpanan data terdistribusi dan Map Reduce untuk pemrosesan data terdistrubusi yang dilakukan pada komputer (node of cluster) tempat data disimpan. Untuk menyelesaikan berbagai persoalan komputasi, Hadoop didukung oleh berbagai teknologi yang secara keseluruhan sering disebut sebagai ekosistem Hadoop (Hadoop ecosystem).
Baca Juga : Tips Hemat Bikin Audio Kamar Buat Anak Kos Murah Meriah
Laboratorium Big Data Di Kampus Indonesia
Untuk mendukung kegiatan perkuliahan, skripsi dan penelitian di bidang data science, program studi Teknik Informatika telah dilengkapi dengan laboratorium teknologi big data. Pada lab ini biasanya tersedia fasilitas komputasi dengan prosesor 80 core, memori sebesar 320 GB (Giga Byte) dan storage 32 TB (Tera Byte). Fasilitas tersebut secara fisik dalam bentuk komputer (PC) berspesifikasi tinggi yang terhubung dalam jaringan yang membentuk satu fasilitas komputasi terintegrasi (cluster).
Selain itu juga terpasang ekosistem Hadoop dan siap digunakan, seperti: HDFS untuk menangani sistem penyimpanan file skala besar, Yarn/ Map Reduce untuk pemrosesan sekala besar, dan Spark untuk pemrosesan paralel yang memerlukan memori sekala besar. Juga disediakan software HBase untuk pemrosesan basis data dan Hive untuk data warehouse dan kueri multi dimensi yang dilengkapi dengan software lain baik untuk populasi data (crawling), transfer data antar sistem dan analisis. Untuk publikasi dan antarmuka hasil analisis, disediakan juga software Apache Web Server, PHP dan MySQL.
Dengan demikian Laboratorium Teknologi Big Data merupakan fasilitas esensial yang mendukung pengembangan program data science di program studik Teknik Informatika. Teknologi Big Data menjadi tempat bagi dosen dan mahasiswa untuk mengembangkan kompetensi dalam bidang data science.
Itu dia serba-serbi tentang teknologi big data yang perlu kamu tahu. Bagaimana, kamu tertarik untuk mencoba teknologi big data? langsung cari di Tekno Sore dan baca juga artikel teknologi baru, , teknologi modern, teknologi komputer, dan artikel bermanfaat lainnya, yuk!
0 comments:
Posting Komentar
terimakasih telah mengunjungi blog kami, semoga bermanfaat :)