Dữ liệu lớn (Big Data)... là gì?
19/10/2019Big data có vai trò mấu chốt ở khắp mọi nơi trong xu hướng cách mạng công nghiệp 4.0, ẩn chứa rất nhiều thông tin quý giá mà nếu trích xuất thành công sẽ giúp rất nhiều cho việc sản xuất, nắm bắt xu thế kinh doanh, dự đoán dịch bệnh, phát hiện sớm tội phạm...
"Big data" thời gian gần đây ngày càng được nhắc đến nhiều hơn như một thành phần công nghệ thiết yếu của thành phố thông minh và cuộc cách mạng công nghiệp 4.0. Vậy big data có phải là một khái niệm quá phức tạp?
Về cơ bản big data đơn giản như tên gọi, là một tập hợp dữ liệu rất lớn và phức tạp đến nỗi những công cụ, ứng dụng xử lý dữ liệu truyền thống không thể nào đảm đương được. Vì khối dữ liệu quá lớn nên việc triển khai big data sẽ gặp những trở ngại bao gồm thu nhận dữ liệu, lưu trữ dữ liệu, tìm kiếm, chia sẻ, chuyển giao, cập nhật…
Tuy nhiên big data lại chứa trong mình rất nhiều thông tin quý giá mà nếu trích xuất thành công sẽ giúp rất nhiều cho việc nắm bắt xu thế trong kinh doanh, nghiên cứu khoa học, dự đoán để phòng tránh các dịch bệnh sắp phát sinh, phát hiện sớm tội phạm, hay đo lường điều kiện giao thông theo thời gian thực.
Từ năm 2001, chuyên gia của META Group (bây giờ đã sát nhập vào công ty nghiên cứu Gartner) đã nói rằng những trở ngại và cơ hội nằm trong việc tăng trưởng dữ liệu có thể được mô tả bằng ba chiều là tăng về lượng (volume), tăng về vận tốc (velocity) và tăng về kiểu dữ liệu (variety), trở thành mô hình tiêu chí "3V" cho big data.
Về sau bộ tiêu chí big data này được thêm các tiêu chuẩn ví dụ như độ tin cậy (veracity) bởi độ tin cậy dao dộng mạnh của dữ liệu thu nhận được sẽ ảnh hưởng quan trọng đến thông tin trích xuất.
Big data là gì?
Big data có thể được mô tả bằng các tiêu chí là về lượng (volume), về vận tốc (velocity), về kiểu dữ liệu (variety) và về độ tin cậy (veracity). Nguồn ảnh: Internet.
Ví dụ cho tiềm năng khối dữ liệu lớn có thể kể đến kính thiên văn Sloan Digital Sky Survey đặt tại New Mexico (Mỹ) bắt đầu đi vào hoạt động hồi năm 2000; sau một vài tuần thiết bị này đã thu thập dữ liệu lớn hơn tổng lượng dữ liệu mà ngành thiên văn học từng thu thập trong quá khứ, và sau 10 năm tổng dung lượng đã đạt đến hơn 140 terabyte (terabyte bằng 1 nghìn gigabyte).Như đã nói ở trên, big data là tập hợp dữ liệu lớn và phức tạp vượt mức đảm đương của những ứng dụng và công cụ truyền thống. Kích cỡ của Big Data đang từng ngày tăng lên, tính đến năm 2012 mỗi ngày có 2,5 exabyte dữ liệu được sinh ra (exabyte bằng 1 tỷ gigabyte), và đến năm 2025 IDC dự đoán số liệu này sẽ là 163 zettabyte (zettabyte bằng 1 nghìn exabyte)...
Trong khi đó thống kê được công bố thời điểm cuối năm 2017 cho thấy Facebook đang có khoảng 2 tỷ người dùng thường xuyên và chỉ riêng ảnh cũng đã có khoảng 300 triệu bức được tải lên mỗi ngày. YouTube hay Google cũng phải lưu lại hết vô số các lượt truy vấn và video của người dùng cùng nhiều loại thông tin khác có liên quan.
Nguồn dữ liệu cho big data tăng trưởng cực nhanh cũng một phần bởi sự gia tăng số lượng và giảm giá của các thiết bị cảm biến, thu nhận thông tin trong môi trường Internet vạn vật như điện thoại, camera, micro, chip bắt sóng…
Điều quan trọng là ứng dụng của big data có mặt ở khắp mọi nơi trong các xu hướng công nghệ ảo hóa mới nhất. Ví dụ như trong một mảng sản xuất của cuộc cách mạng công nghiệp 4.0, những công nghệ mới như big data hay cloud computing sẽ giúp cảnh báo sớm sản phẩm lỗi, hỏng, từ đó phòng ngừa trước và gia tăng năng suất, chất lượng, nâng cao giá trị cạnh tranh.
Để đưa ra nhận định hữu ích cho quy trình quản lý nhà máy công xưởng, dữ liệu cần được xử lý bằng các công cụ, các thuật toán để trích xuất ra được thông tin có ý nghĩa. Khi có vấn đề hiện hữu hoặc vô hình trong một công xưởng công nghiệp ví dụ như máy móc xuống cấp hoặc chi tiết hao mòn thì thuật toán phải có khả năng phát hiện và tìm cách giải quyết.
Big data còn ẩn chứa rất nhiều thông tin quý giá mà nếu trích xuất thành công sẽ giúp rất nhiều cho việc nắm bắt xu thế trong kinh doanh, nghiên cứu khoa học, dự đoán để phòng tránh các dịch bệnh sắp phát sinh, phát hiện sớm tội phạm; dù tất nhiên mức độ ứng dụng thu thập dữ liệu cũng đặt ra nghi ngại về sự giám sát vượt quá giới hạn riêng tư của công dân trong thành phố thông minh.
Một số ứng dụng big data ở Việt Nam
Ở Việt Nam, công nghệ big data đã bắt đầu được đưa vào ứng dụng vào một số sản phẩm thực tế, ví dụ như công cụ an ninh mạng CyRadar. Ông Nguyễn Minh Đức, CEO Công ty Cổ phần CyRadar cho hay big data là một trong những cách hay để các chuyên gia có thể phân tích để tìm ra các thông tin có thể phát hiện, truy tìm và ngăn chặn hacker phát tán virus và tổ chức tấn công mạng.
Trước những thủ đoạn tấn công mới của hacker như xâm nhập qua email để đánh lừa người dùng, sau đó dùng mã độc ẩn sâu trong ổ cứng máy tính để điều khiển các cuộc tấn công thông qua đám mây, CyRadar sử dụng big data để phân tích dữ liệu, phát hiện ra các dấu hiệu tấn công, hoặc phân biệt hành vi con người và hành vi mã độc trên mạng.
Theo đó CyRadar dùng nhiều tham số để phát hiện mã độc, nhận diện những hành vi mã độc không giống người bình thường, ví dụ hành vi tải dữ liệu khác thường, tải liên tục một file nào đấy liên tục, hoặc dùng thuật toán phát hiện file đuôi ảnh nhưng thực tế không phải là file ảnh.
Từ big data, các chuyên gia về bảo mật sẽ có cách tiếp cận thứ hai là dựa trên các lần lịch sử tấn công trước để dự đoán ra những tình huống mới, dự đoán bao giờ có một cuộc tấn công sắp xảy ra, phát hiện ra dấu hiệu hacker đang thăm dò, chuẩn bị cho một cuộc tấn công. Dấu hiệu có thể là việc chuyển file dữ liệu tăng đột biến, hoặc là nguồn gốc server điểu khiển chưa bao giờ nhìn thấy trong mạng.
Một ví dụ khác là trong Ngày hội mua sắm trực tuyến - Online Friday đầu tháng 12/2017 vừa qua, sàn thương mại điện tử Sendo.vn áp dụng công nghệ big data để loại bỏ khuyến mãi ảo, đem đến ngày hội các sản phẩm tốt với giá ưu đãi thật, giúp khách hàng yên tâm mua sắm...
*Nguồn tham khảo ngoài: Wikipedia, Tinh Tế.
Tin liên quan
Ransomware là gì? Cách ngăn chặn mã độc tống tiền hiệu quả
Ransomware là một loại phần mềm độc hại (malware) nguy hiểm, mã hóa dữ liệu quan trọng khiến người dùng không thể truy cập và yêu cầu tiền chuộc để lấy lại quyền truy cập
Viettel IDC xuất sắc giành giải thưởng tại ESG Business Awards 2024 hạng mục “Sustainable Infrastructure Award”
Hà Nội, ngày 25.09.2024 – Viettel IDC, nhà cung cấp dịch vụ Trung tâm dữ liệu và Điện toán đám mây quy mô lớn nhất và xanh nhất Việt Nam đã xuất sắc giành giải thưởng danh giá tại ESG Business Awards 2024, hạng mục “Sustainable Infrastructure Awards”.
Cơ chế hoạt động của chuỗi khối Blockchain
Blockchain hoạt động độc lập theo các thuật toán máy tính và hoàn toàn không chịu sự kiểm soát của bất kỳ tổ chức nào. Do đó, Blockchain tránh được rủi ro từ các bên thứ ba.
Google Cloud là gì? Các công cụ bên trong Google Cloud
Google Cloud Platform (GCP) là một bộ dịch vụ điện toán đám mây chạy trên cùng một cơ sở hạ tầng mà Google cung cấp, sử dụng nội bộ cho các sản phẩm của người dùng cuối
Deep Web là gì? Nguy hiểm không? Có nên truy cập?
Deep Web là một phần của website bị ẩn và không được lập chỉ mục bởi công cụ tìm kiếm thông thường, Deep Web thường được sử dụng để truy cập vào các thông tin nhạy cảm
Cơ sở dữ liệu đám mây (Cloud Database): Lợi ích và cách hoạt động
Trong thời đại số, dữ liệu được xem như nguồn tài sản quý giá của doanh nghiệp. Vì vậy, việc tìm kiếm giải pháp giúp quản lý dữ liệu một cách hiệu quả và an toàn là điều vô cùng cấp thiết. Một trong những giải pháp nổi bật đang được sử dụng phổ biến hiện nay chính là Database Cloud - cơ sở dữ liệu đám mây.
Virtual Desktop là gì? Vai trò và tầm quan trọng
Virtual Desktop là máy ảo cho phép người dùng tạo nhiều không gian làm việc độc lập trên cùng một thiết bị. Mỗi desktop ảo hoạt động như một máy tính riêng biệt.
VM (Virtual Machine) là gì? Lợi ích và cách hoạt động
Virtual Machine là gì? Cách thức hoạt động của Virtual Machine là gì? Đây là những thắc mắc phổ biến của nhiều người khi tìm hiểu về máy ảo (Virtual Machine). Do đó, trong bài viết này, Viettel IDC sẽ giải đáp cho bạn tất cả những câu hỏi này một cách chi tiết, giúp bạn hiểu rõ hơn về máy ảo nhé!
ISP là gì? Tầm quan trọng của Internet Service Provider
Trên thực tế, những câu hỏi thuộc dạng như ISP là gì? Nó có vai trò và tầm quan trọng như thế nào đối với công việc hay sinh hoạt của người dùng hiện nay? Đây đều là những câu hỏi đã và đang được khá nhiều người dùng quan tâm khi tìm hiểu về thuật ngữ ISP là gì.
Mạng WAN là gì? Phân biệt mạng LAN, WAN và MAN
Mạng máy tính bao gồm nhiều loại mô hình khác nhau, đa dạng về cả quy mô lẫn chức năng. Trong đó, mạng WAN hiện là mô hình mạng phổ biến, được ứng dụng rộng rãi nhất trên phạm vi toàn cầu.