Tuesday, November 26, 2024

Enterprise Data Lake




Infografik ini memaparkan ekosistem Data Lake untuk perusahaan, menunjukkan bagaimana data dari pelbagai sumber dapat diuruskan, diintegrasikan, dan digunakan untuk menghasilkan nilai. Berikut adalah ulasan terperinci:

1. Sumber Data

Infografik ini membahagikan sumber data kepada beberapa kategori:

External Data (Data Luaran): Termasuk cuaca, media sosial, GIS/GPS, dan pasaran. Data ini biasanya diperoleh melalui REST API atau mikroservis.

Operational Data Lake (ODL): Termasuk sistem-sistem seperti EAM (Enterprise Asset Management), APM (Asset Performance Management), QMS (Quality Management System), dan sebagainya. Data dari sistem ini dihantar ke Operational Data Lake melalui proses data ingestion dan ETL (Extract, Transform, Load).

Industrial Internet of Things (IIoT): Data daripada aset fizikal seperti PLC, RTU, pengawal, dan peralatan lain melalui Edge Gateways atau protokol komunikasi seperti MQTT, OPC-UA, dan lain-lain.


2. Pengurusan Data

Data Governance: Ini adalah komponen utama untuk memastikan kualiti data. Ia melibatkan pengurusan skema data, pembersihan data, dan pengkontekstualan data supaya data dapat digunakan dengan lebih bermakna.

Data Schema dan Kualiti Data: Menguruskan data yang distruktur, semi-distruktur, dan tidak distruktur melalui pendekatan bersepadu.


3. Penggunaan Data

Enterprise Data Lake: Data dari sumber yang pelbagai ini dihantar ke Enterprise Data Lake yang menjadi pusat utama untuk penyimpanan dan analitik data.

Aplikasi dan Analitik: Data yang diproses digunakan untuk:

Analitik lanjutan (ML/AI, papan pemuka BI).

Integrasi dengan platform seperti Python dan Java SDK.

Pembangunan Digital Twin untuk simulasi.

Menghubungkan pekerja di lapangan dengan sistem melalui mikroservis.



4. Aliran Data dan Integrasi

Terdapat integrasi erat antara sistem OT (Operational Technology) dan IT (Information Technology). Sistem OT seperti HMI/SCADA, DCS, dan histori data berfungsi bersama sistem IT seperti SCM (Supply Chain Management), HCM (Human Capital Management), dan CRM (Customer Relationship Management).


5. Teknologi Masa Depan

Infografik ini menonjolkan penggunaan teknologi terkini seperti No-Code/Low-Code Development, mikroservis, dan Connected Workforce untuk meningkatkan operasi perniagaan.

Kesimpulan

Infografik ini memberikan pandangan komprehensif tentang bagaimana data diurus dan dimanfaatkan dalam perusahaan. Ia menekankan pentingnya Data Lake, pengurusan data yang efektif, dan integrasi antara teknologi OT dan IT untuk mencipta wawasan yang berharga. Pendekatan ini menyokong transformasi digital perusahaan untuk lebih cekap dan responsif terhadap perubahan pasaran.