Dengan semua buzz tentang pusat data NSA yang besar memegang gazillions bit data mengenai kehidupan peribadi kita, ada satu perkara yang tidak pernah dibincangkan tentang banyak, sekurang-kurangnya di CNN. Ia melibatkan masalah kejuruteraan yang muncul bersama-sama dengan teknologi awan, data besar dan pusat penyimpanan data fizikal yang mengagumkan yang kini sedang dibina di seluruh dunia. Jadi apa itu? Nah, tidak kira siapa yang mentadbir salah satu sistem IT raksasa yang menjalankan kemudahan ini, terdapat keperluan untuk sistem perisian yang membantu semua data masuk dan keluar dari saluran paip dengan cepat. Keperluan itu mewakili salah satu soalan IT atau teka-teki yang paling menarik yang dihadapi para profesional hari ini.
Seperti yang dijelaskan oleh ramai pakar, permintaan melampau hari ini untuk pemprosesan data jauh melebihi pendekatan tradisional. Ringkasnya, menggunakan struktur pangkalan data ringkas dan alat seperti antara muka pertanyaan SQL tidak akan menyediakan kuasa pemprosesan atau fungsi pemprosesan yang cukup untuk sistem kepunyaan yang telah dibangunkan sejak beberapa tahun yang lalu. Arkib syarikat teknologi tinggi hari ini memerlukan teknologi yang sangat berskala. Mereka memerlukan alat pemprosesan data yang dapat input dan hasil output dalam jumlah yang jauh lebih tinggi daripada apa yang dapat memudahkan pelayan tunggal. Mereka memerlukan penyelesaian yang dapat dengan cepat berkembang untuk pertumbuhan, penyelesaian yang termasuk tahap kompleks kecerdasan buatan, penyelesaian yang direka untuk pengurusan mudah oleh jabatan IT.
Persoalannya, bagaimanakah syarikat dan agensi kerajaan menakluki batasan laluan pengendalian data tradisional? Di sini kita akan melihat satu pilihan yang sangat menjanjikan: Perisian yang mengendalikan data besar dan pentadbiran pusat data berganda.