Xây dựng và quản lý nguồn dữ liệu lớn big data - nguồn cơ sở và động lực cho công cuộc chuyển đổi số tại Công ty thủy điện Đồng Nai

Bài viết Xây dựng và quản lý nguồn dữ liệu lớn big data - nguồn cơ sở và động lực cho công cuộc chuyển đổi số tại Công ty thủy điện Đồng Nai trình bày về việc ứng dụng công nghệ thông tin công tác xây dựng, quản lý nguồn dữ liệu lớn và các ứng dụng của nó trong công cuộc chuyển đổi số tại đơn vị.
Nội dung trích xuất từ tài liệu:
Xây dựng và quản lý nguồn dữ liệu lớn big data - nguồn cơ sở và động lực cho công cuộc chuyển đổi số tại Công ty thủy điện Đồng Nai CHUYỂN ĐỔI SỐ VÀ NÂNG CAO HIỆU QUẢ VẬN HÀNH HỆ THỐNG ĐIỆN QUỐC GIA XÂY DỰNG VÀ QUẢN LÝ NGUỒN DỮ LIỆU LỚN BIG DATA - NGUỒN CƠ SỞ VÀ ĐỘNG LỰC CHO CÔNG CUỘC CHUYỂN ĐỔI SỐ TẠI CÔNG TY THỦY ĐIỆN ĐỒNG NAI 1 Phạm Duy Phước 1 Công ty thủy điện Đồng Nai, 0982932631, phuocpd1992@gmail.com Tóm tắt: Sự phát triển nhanh chóng của công nghệ hiện đại đã dẫn đến sự gia tăng về dữ liệu trên mọi lĩnh vực. Thuật ngữ dữ liệu lớn Big Data được đặt ra để mô tả đầy đủ ý nghĩa của kiểu dữ liệu và xu hướng tương lai của nó. Thời đại công nghệ kỹ thuật số đã thúc đẩy các doanh nghiệp hướng tới việc tìm kiếm một chiến lược để chuyển đổi, vượt qua những thay đổi của thị trường, cạnh tranh thành công và giành được thuận lợi. Tại công ty thủy điện Đồng Nai, công tác xây dựng và quản lý nguồn dữ liệu lớn Big Data đóng một vai trò rất quan trọng. Với tầm nhìn chiến lược hơn mười năm qua, Công ty thủy điện Đồng Nai đã chủ động tích lũy được nguồn dữ liệu rất lớn từ các hệ thống vận hành của nhà máy. Đây là nguồn tài nguyên vô cùng quý giá mà từ đây, công tác số hóa, thông minh hóa, tự động hóa, chuyển đổi số của công ty được đặt nền móng xây dựng. Trong bài báo này, tác giả trình bày về việc ứng dụng công nghệ thông tin công tác xây dựng, quản lý nguồn dữ liệu lớn và các ứng dụng của nó trong công cuộc chuyển đổi số tại đơn vị. Tác giả đã xây dựng thành công hệ thống hạ tầng máy chủ vật lý và phần mềm hệ thống. Cụ thể, bộ kết nối dữ liệu API theo mô hình Server – Client được xây dựng. Các API được xây dựng có tốc độ truy cập và độ tin cậy cao, tính bảo mật tốt, cú pháp dễ sử dụng và khả năng bảo trì dễ dàng. Ngoài ra, các API được xây dựng để tương thích và có thể cấp quyền cho các ứng dụng khác sử dụng chung nguồn tài nguyên, tạo điều kiện cho sự phát triển ứng dụng sau này. Các hệ thống được xây dựng bằng các Framework nổi tiếng như Angular, Laravel, Hadoop, Spark có độ uy tín cao, bảo mật tốt. Nghiên cứu được thử nghiệm dựa trên dữ liệu từ hai nhà máy thủy điện Đồng Nai 3 và 4. Kết quả cho thấy việc ứng dụng công nghệ thông tin trong xây dựng dữ liệu lớn Big Data đem lại được nhiều kết quả tốt trong công cuộc chuyển đổi số. Nghiên cứu này là cơ sở mang đến nhiều sự thay đổi tích cực trong nghiên cứu khoa học, góp phần thúc đẩy công cuộc chuyển đổi số của công ty thủy điện Đồng Nai đạt nhiều thành quả tốt đẹp trong tương lai. Từ khóa: Chuyển đổi số; Dữ liệu lớn; công nghệ trí tuệ nhân tạo; Internet vạn vật; Hệ thống điều khiển. CHỮ VIẾT TẮT AI Artificial Intelligence DCS Distributed Control System IoTs Internet of Things API Application Programming Interface CORS Cross-Origin Resource Sharing 191 KỶ YẾU HỘI NGHỊ KHOA HỌC VÀ CÔNG NGHỆ ĐIỆN LỰC TOÀN QUỐC NĂM 2022 1. GIỚI THIỆU 1.1. Tổng quan về Big Data Big Data hay “dữ liệu lớn” là thuật ngữ chỉ về các tập dữ liệu khổng lồ và phức tạp, đến mức khó có thể xử lý được bằng các phương pháp truyền thống. Dữ liệu được xem là dữ liệu lớn khi chúng thỏa mãn tiêu chí 5V sau. Volume: Dung lượng của Big Data phải là một tập dữ liệu đủ lớn.  Variety: Big Data là những dữ liệu không giới hạn sự đa dạng. Nó bao gồm tất cả các loại dữ liệu như: hình ảnh, text, video, âm thanh, bất kể dữ liệu đó là có cấu trúc, bán cấu trúc, hay không có cấu trúc  Velocity: tốc độ gia tăng của dữ liệu của Big Data được tăng lên theo thời gian, và sự tăng lên này là cực kỳ lớn.  Value: giá trị là một đặc điểm quan trọng của dữ liệu lớn. Nó quyết định đến việc dữ liệu có thể được xử lý đúng và chuyển thành thông tin có ý nghĩa hay không.  Veracity: Tính xác thực đề cập đến chất lượng, tính đúng đắn và độ tin cậy của dữ liệu. Vì vậy, duy trì tính xác thực trong dữ liệu lớn là cần thiết. Bởi vì, dữ liệu với số lượng lớn sẽ tạo ra sự nhầm lẫn, trong khi một lượng nhỏ dữ liệu có thể truyền tải không đầy đủ thông tin. Big Data thực chất đã hình thành từ khoảng thập kỷ 80 - 90 của thế kỷ XX. Gần đây nhất, nhiều doanh nghiệp đã bắt đầu nhận ra số lượng người dùng được tạo ra thông qua Youtube, Facebook và các dịch vụ trực tuyến khác là rất lớn. Nhờ có Internet of Things mà khối lượng Big Data ngày càng lớn với tốc độ nạp vô cùng nhanh chóng. Lý do là vì dữ liệu ngày nay không chỉ do con người tạo ra mà còn do máy móc tạo tự động. Big Data đã trở thành một tài nguyên quý giá đối với các doanh nghiệp, đặc biệt là các doanh nghiệp thương mại điện tử, giúp doanh nghiệp tăng lợi thế cạnh tranh và phục vụ khách hàng tốt hơn. Hiện nay, Big Data được xem như một dạng tài nguyên quý báu không kém gì vàng, bạc cả. Big Data còn đóng vai trò rất lớn trong việc đưa các chỉ số, quyết định, phát triển trí tuệ nhân tạo. Bởi một trong số những yếu tố quyết định AI có thông minh hay không chính là nằm ở tập dữ liệu mà chúng ta cho nó học. Vì vậy có thể xác định rằng, khi doanh nghiệp bạn làm chủ được Big Data của mình, thì nó sẽ giúp doanh nghiệp bạn tăng hiệu suất và từ đó lợi tức của sẽ gia tăng đáng kể. Trong nghiên cứu này, tác giả tập trung nghiên cứu giải pháp ứng dụng kỹ thuật, công nghệ mới nhất để xây dựng nguồn dữ liệu lớn Big Data tại công ty thủy điện Đồng Nai. Hệ thống xây dựng bao gồm đầy đủ các chức năng thu thập, đọc, viết, cập nhật dữ liệu vào hệ thống với tốc độ nhanh chóng, độ tin cậy cao, an toàn bảo mật thông tin, đảm bảo việc ứng dụng … 192 CHUYỂN ĐỔI SỐ VÀ NÂNG CAO HIỆU QUẢ VẬN HÀNH HỆ THỐNG ĐIỆN QUỐC GIA 1.2. Các nguồn dữ liệu tạ ...