Data Lake Insight (DLI)

Data Lake Insight

Data Lake Insight (DLI) ialah perkhidmatan pemprosesan dan analisis data tanpa pelayan (serverless) yang serasi sepenuhnya dengan ekosistem Apache Spark dan Apache Flink. Ia membolehkan pengguna memproses data tanpa perlu mengurus atau menyediakan pelayan.

DLI menyokong SQL standard serta serasi dengan Spark SQL dan Flink SQL. Ia juga menyokong pelbagai kaedah akses dan format data utama. Selain itu, DLI menyokong pernyataan SQL dan aplikasi Spark untuk pelbagai sumber data seperti CloudTable, RDS, GaussDB(DWS), CSS, OBS, pangkalan data tersuai pada ECS, serta pangkalan data luar talian.

CIRI UTAMA

ANALISIS BERSEPADU MERENTAS SUMBER DATA PELBAGAI


DLI membolehkan capaian bersatu ke pelbagai sumber data seperti GaussDB(DWS), Relational Database (RDS), dan Cloud Serach Services (CSS) melalui sambungan sumber data Spark. Ia menyokong integrasi lancar dengan pelbagai perkhidmatan awan dalam tugasan Flink, membentuk ekosistem penstriman menyeluruh yang menggabungkan perkhidmatan awan dan teknologi sumber terbuka. Menggunakan Flink SQL, pengguna boleh membaca dan menulis data merentas perkhidmatan awan secara langsung, manakala sambungan sumber data yang dipertingkatkan membolehkan akses selamat ke sistem sumber terbuka popular seperti Kafka, HBase, dan Elasticsearch dalam barisan DLI yang dibenarkan.

DLI SERVERLESS

DLI serasi sepenuhnya dengan ekosistem dan API Apache Spark serta Apache Flink. Ia merupakan perkhidmatan pengkomputeran dan analisis big data secara serverless yang menggabungkan analisis masa nyata, luar talian, dan interaktif. Aplikasi luar talian boleh dipindahkan ke awan dengan lancar, sekali gus mengurangkan beban kerja migrasi.

DLI menyediakan rangka kerja yang sangat boleh diskala yang mengintegrasikan pemprosesan batch dan stream, membolehkan permintaan analisis data dikendalikan dengan mudah. Dengan kernel dan seni bina yang dioptimumkan secara mendalam, DLI menawarkan peningkatan prestasi sehingga 100 kali ganda berbanding model MapReduce. Analisis anda juga disokong oleh SLA 99.95% yang telah terbukti dalam industri.

PENGASINGAN STORAN DAN PENGKOMPUTERAN

Beban pemprosesan (compute) dan storan dalam DLI diasingkan antara satu sama lain. Seni bina ini membolehkan anda mengkonfigurasi sumber storan dan pengkomputeran secara fleksibel mengikut keperluan, sekali gus meningkatkan penggunaan sumber dengan lebih cekap serta mengurangkan kos operasi.

ANALISIS MERENTAS SUMBER DATA


Menganalisis data merentas pelbagai pangkalan data tanpa memerlukan proses pemindahan data. Paparan data yang bersatu membolehkan anda memperoleh pemahaman yang lebih menyeluruh terhadap data serta mempercepatkan inovasi. Tiada sekatan terhadap format data, sumber data awan, atau sama ada pangkalan data diwujudkan secara dalam talian atau luar talian.

DAYA SAING DAN NILAI TAWARAN

MUDAH DIGUNAKAN

Keputusan untuk data berskala TB (terabait) boleh diperoleh dalam beberapa saat. Pembangunan menjadi lebih mudah dengan penggunaan SQL standard, manakala operasi tanpa penyelenggaraan membantu mengurangkan keperluan tenaga kerja dan kos operasi.

ANALISIS SEMUA-DALAM-SATU

Spark, Flink, dan Trino digabungkan untuk menyediakan pengalaman analisis interaktif yang lancar bagi memproses data secara batch dan streaming.

SUMBER TERBUKA

Keupayaan analisis merentas sumber disediakan dengan menyokong format data sumber terbuka yang popular serta integrasi dengan produk Business Intelligence (BI), iaitu alat untuk menganalisis dan memvisualisasikan data bagi menyokong keputusan perniagaan.

KENAPA PILIH TM

PUSAT DATA & KESALINGHUBUNGAN BERTARAF ENTERPRISE

TM mengendalikan pusat data Tier III yang disepadukan dengan rangkaian gentian nasional dan kabel dasar laut global TM, memastikan prestasi tinggi, kependaman rendah dan kebolehsediaan tinggi.

KESELAMATAN, PEMATUHAN & KEBOLEHPERCAYAAN

Perkhidmatan cloud TM direka untuk memenuhi keperluan keselamatan dan pematuhan enterprise serta sektor awam, disokong operasi 24/7, pemulihan bencana dan keupayaan keselamatan siber yang kukuh.

EKOSISTEM CLOUD MENYELURUH

Melalui TM One Cloud Alpha, TM menyediakan penyelesaian hujung ke hujung merangkumi cloud, pusat data, rangkaian, keselamatan siber, perkhidmatan terurus dan khidmat profesional, memudahkan perjalanan transformasi digital pelanggan.

PENYEDIA CLOUD TEMPATAN YANG DIPERCAYAI

TM ialah penyedia cloud tempatan Malaysia yang dipercayai, menawarkan kedudukan data (data residency), kedaulatan dan pematuhan tempatan, khususnya untuk industri yang dikawal selia seperti kerajaan, kewangan dan GLC.

SENARIO PENGGUNAAN DALAM SEKTOR KERAJAAN

SENARIO PENGGUNA 1:

Pemantauan Indikator Kritikal

Data Lake Insight (DLI) membolehkan pengambilan data masa nyata dan hampir masa nyata daripada pelbagai sistem melalui pemprosesan streaming dan batch berasaskan Apache Flink dan Apache Spark, lalu menyatukannya dalam satu lapisan analitik bersepadu. Dengan analisis kependaman rendah, sokongan SQL standard, dan integrasi terus dengan platform Business Intelligence (BI), DLI menyediakan papan pemuka operasi yang konsisten dan boleh diskala untuk pemantauan indikator kritikal.

Paparan Masa Nyata Berskala Besar

Bagi menguruskan pandemik COVID-19, kerajaan menggunakan papan pemuka masa nyata untuk memantau data utama seperti kes disahkan semasa, jumlah kumulatif kes disahkan, dan kes import, sekaligus menyediakan sokongan data untuk peringkat kawalan seterusnya.

Kebaikan (Pros)

Prestasi Pertanyaan pada Peringkat Milisaat
Enjin terbina openLooKeng menggunakan pelbagai teknik pengoptimuman pertanyaan untuk memenuhi keperluan analisis interaktif berprestasi tinggi pada tahap milisaat, berasaskan rangka kerja pengkomputeran dalam ingatan (in-memory computing).

Mudah Digunakan
Kaedah pembangunan menggunakan SQL tulen, sepenuhnya serasi dengan sintaks ANSI SQL 2003 standard.

SEDIA UNTUK MAJU KE HADAPAN?

Sama ada anda mencari penyelesaian khusus atau ingin berbincang dengan pakar, kami sedia membantu anda.