BIG DATA MANAGEMENT

Seiring dengan semakin berkembangnya teknologi informasi, data-data digital semakin menggantikan data-data konvensional. Lebih jauh lagi, perkembangan peragkat-perangkat elektronik, aplikasi-aplikasi dan internet juga semakin menambah kecepatan terciptanya data-data digital. Dipadukan dengan teknologi storage data yang juga berkembang pesat. Belum lagi hadirnya aplikasi-aplikasi media sosial dan search engine yang juga meng-generate data-data digital dalam jumlah besar setiap menitnya. Hal ini semua menjadi sebuah fenomena baru di bidang teknologi yang sekaligus juga menjadi salah satu pertanda umat manusia telah memasuki era revolusi industri ke-4.

Data-data digital tercipta sangat cepat dan disimpan secara masif. Dalam data-data digital ini tersimpan informasi yang sebenarnya mungkin sangat bermanfaat dan dibutuhkan bagi manusia, organisasi, atau bagi negara. Namun karena begitu masifnya dan cepatnya data-data yang masuk dan kita tidak memiliki kemampuan me-manage data-data tersebut dengan baik, maka bisa saja kita akhirnya tak mendapatkan manfaat apapun.

Data-data bisa saja tersimpan dalam suatu sumber tapi bisa juga tersimpan dalam banyak sumber data. Data-data ada yang sifatnya telah terstruktur dengan baik, ada juga yang semi-structured dan unstructured. Data-data ada yang telah tervalidasi ada juga yang belum tervalidasi. Kualitas data dan juga formatnya beragam. Dan bahkan mungkin ada juga data-data yang masih berupa data konvensional berbasis kertas atau sample/spesimen. Beberapa pakar menggambarkan karakteristik data sebagai 5V yakni Volume (kuantitas data yang digenerate dan disimpan), Variety (tipe dan sifat data), Velocity (kecepatan data digenerated dan diproses), Variability (seberapa konsisten data), Veracity (kualitas data).

Oleh karena itu bermunculanlah berbagai teknologi dengan istilah dan konsep beragam yang bertujuan mengolah data-data dalam jumlah besar dan cepat tersebut. Ada yang disebut sebagai datawarehousing, big data, relational database management system (RDBMS), data mining, machine learning, dan sebagainya. Banyak provider teknologi digital menawarkan jasa teknologi untuk mengolah data-data. Tahapannya meliputi capturing data (pemrolehan data), data storage (penyimpanan data), data analysis (analisis), search (pencarian), sharing, transfer, visualization, querying, updating and information privacy.

Mungkin dalam beberapa saat lagi kita bisa melihat kemampuan me-manage data-data digital akan dijadikan suatu indikator dalam mengukur keunggulan suatu organisasi, perusahaan atau suatu negara. Bahkan seseorang mungkin akan juga akan dinilai dari seberapa banyak data yang masuk padanya dan di-generate-nya setiap hari. Beberapa contoh parameter pengukuran misalkan berapa zettabyte yang di-generated setiap hari oleh suatu organisasi, perusahaan atau suatu negara. Seberapa akurat hasil pengolahan datanya dalam membantu penyusunan strategi dan pengambilan keputusan.