May 30, 2023

AWS Big Data là gì?

AWS là công ty dẫn đầu sâu sắc trong thị trường điện toán đám mây (Cloud Computing). Đây là nhà cung cấp đám mây đáng tin cậy và an toàn nhất. Ngay cả đối với dữ liệu lớn (big data), AWS cũng cung cấp các công cụ và dịch vụ giúp các tổ chức quản lý dữ liệu đó một cách dễ dàng. Bài viết này đề cập đến các dịch vụ AWS đó là gì, trường hợp sử dụng, chứng nhận và nghề nghiệp trong AWS Big Data.

1. Big Data là gì?

Big Data hay dữ liệu lớn không thể được định nghĩa đơn giản là lượng dữ liệu khổng lồ được lưu trữ. Tuy nhiên, người ta có thể nói rằng chính một lượng lớn dữ liệu có thể được sử dụng hữu ích cho nhiều mục đích khác nhau. Để hiểu dữ liệu lớn, trước tiên chúng ta phải biết dữ liệu là gì. Dữ liệu là thông tin được lưu trữ dưới 3 dạng như sau:

Dữ liệu có cấu trúc: Dữ liệu thô hoặc thông tin được chuyển đổi thành dữ liệu có cấu trúc, có thể trích xuất và đáng tin cậy. Dữ liệu có cấu trúc có thể dễ dàng trích xuất cho các truy vấn và nhiệm vụ liên quan đến phân tích. Dữ liệu được lưu trữ trong các bảng SQL ở dạng hàng và cột là ví dụ tốt nhất về dữ liệu có cấu trúc. Cơ sở dữ liệu quan hệ làm cho việc quản lý và ánh xạ dữ liệu trở nên đơn giản hơn.
Dữ liệu bán cấu trúc: Đó là dữ liệu có thể được trích xuất ở một mức độ nào đó để phân tích và truy vấn. Rất khó để lưu trữ dưới dạng cấu trúc giống như bảng và ánh xạ nó. Các ví dụ tốt nhất là tệp JSON và tệp CSON. Chúng có thể được chuyển đổi thành các bảng SQL với sự trợ giúp của các thuật toán chuyển đổi.
Dữ liệu phi cấu trúc: Dữ liệu phi cấu trúc là dữ liệu chúng ta thấy trên các trang truyền thông xã hội. Chúng chủ yếu chứa nhiều văn bản, cùng với video và hình ảnh thuộc danh mục này, vì vậy, nó rất khó đọc. Nó không có cú pháp hoặc mô hình dữ liệu được xác định trước. Tuy nhiên, nó có thể chứa thông tin quan trọng như ngày tháng, tên và sự kiện. Các tổ chức CNTT sử dụng nó với sự trợ giúp của thuật toán AI và Machine Learning. Một số ví dụ bạn có thể liên tưởng đến là tệp PDF, nội dung mạng xã hội, tệp phương tiện như JPEG và MP3 khi được chuyển đổi thành tệp văn bản,...

Tuy nhiên, một tập dữ liệu khổng lồ không có nghĩa là nó thuộc danh mục dữ liệu lớn. Có một bộ tiêu chí cố định cho bất kỳ dữ liệu nào được xác định là dữ liệu lớn. Được gọi là 5V, nó chứa năm điều kiện để được xác định là dữ liệu lớn:

Bộ tiêu chí 5V để xác định dữ liệu lớn

Volume (khối lượng): Rõ ràng là quy mô của dữ liệu phải lớn, từ TB (terabyte) đến PB (petabyte) thì mới được gọi là dữ liệu lớn.
Velocity (vận tốc): Tốc độ tích lũy dữ liệu từ các nguồn khác nhau phải nhanh chóng, bất kể lượng dữ liệu.
Variety (đa dạng): Dữ liệu nên được tích lũy từ nhiều nguồn khác nhau.
Veracity (tính xác thực): Dữ liệu được tích lũy với số lượng lớn từ nhiều nguồn khác nhau, trên thực tế, không thể hoàn hảo về bản chất. Nó sẽ chứa nhiều điểm không nhất quán khác nhau như thiếu giá trị, trùng lặp,...
Value (giá trị): Dữ liệu phải có một số giá trị hoặc chứa thông tin hữu ích có thể được sử dụng cho mục đích phân tích.

Do đó, dữ liệu lớn không chỉ là “dữ liệu lớn”! Nó có một khái niệm rộng hơn và quan trọng nhất là nó phải hữu ích cho các tổ chức vì các mục đích kinh doanh khác nhau. May mắn thay, các dịch vụ đám mây có thể xử lý lưu trữ ảo không giới hạn và cung cấp đủ sức mạnh tính toán để xử lý dữ liệu lớn. Trong trường hợp này nhà cung cấp đám mây là AWS.

2. Giới thiệu tóm tắt về AWS

AWS phổ biến trong ngành CNTT vì độ tin cậy, khả năng mở rộng và bảo mật của nó. Nó có mô hình định giá thanh toán theo mức sử dụng và các dịch vụ dễ triển khai, đây chỉ là một số tính năng tốt nhất của nó. AWS là công ty con của Amazon, ra đời năm 2006 với số lượng vỏn vẹn 3 dịch vụ.

Giờ đây, nó cung cấp hơn 200 dịch vụ trong 25 miền, bao gồm tất cả các dịch vụ CNTT mà một tổ chức cần. Việc chuyển sang AWS có thể tăng đáng kể doanh thu cho doanh nghiệp do không có chi phí trả trước và giúp các tác vụ phức tạp trở nên đơn giản hơn.

3. AWS Big Data là gì?

Nhiều dịch vụ mà AWS cung cấp được sử dụng để quản lý dữ liệu lớn. Không phải lo lắng về phần cứng, độ tin cậy và bảo mật, các tổ chức hoàn toàn tin tưởng vào các dịch vụ AWS cho nhu cầu dữ liệu lớn của họ. Các dịch vụ có thể tích hợp của AWS giúp việc quản lý dữ liệu lớn trong toàn bộ quy trình trở nên dễ dàng hơn, tức là từ quá trình khai thác đến quá trình sử dụng của người dùng cuối.

Availability (tính khả dụng): Dịch vụ AWS khả dụng trong toàn bộ luồng dữ liệu, bất kể quy mô dữ liệu.
Ingestion (nhập): Các tổ chức yêu cầu trích xuất dữ liệu tốc độ cao từ các nguồn đến bộ lưu trữ. Với sự trợ giúp của các dịch vụ AWS khác nhau, dữ liệu được trích xuất từ các nguồn trong vài giây.

Computing (điện toán): Các dịch vụ AWS được trang bị khả năng điện toán cao để thực hiện các thao tác trên dữ liệu lớn.
Storage (lưu trữ): Để lưu trữ dữ liệu mà không lo rò rỉ hoặc lộ thông tin là một nhiệm vụ khó khăn đối với các công ty. Các dịch vụ lưu trữ AWS, như Amazon S3, có thể lưu trữ dữ liệu PB một cách đáng tin cậy và bảo mật cũng như thực hiện các thao tác trên đó.
Analysis and visualization (phân tích và trực quan hóa): Mọi tổ chức đều muốn sử dụng dữ liệu để tăng trưởng kinh doanh và thu lợi nhuận bằng cách thực hiện các phân tích về dữ liệu đó và thu được thông tin chuyên sâu quan trọng dưới dạng đầu ra.
Security (bảo mật): Trong đường truyền dữ liệu, bất kỳ lỗi hoặc sự cố bảo mật nào cũng có thể dẫn đến các vấn đề lớn cho các công ty. Các dịch vụ bảo mật có thể tích hợp của AWS cung cấp khả năng bảo mật cao cho dữ liệu, với sự trợ giúp của các chính sách và tuân thủ bảo mật.

Đây là những lý do AWS là nhà cung cấp dịch vụ đám mây đáng tin cậy nhất, đặc biệt khi nói đến dữ liệu lớn.

Trên đây là những điều cơ bản nhất về khái niệm AWS Big Data. Mong rằng bài viết đã cung cấp cho bạn đọc các thông tin hữu ích. Đừng quên đón xem các bài viết mới nhất sẽ được cập nhật tại BAC's Blog.

Nguồn tham khảo:

https://intellipaat.com/

Nhu cầu đào tạo doanh nghiệp

BAC là đơn vị đào tạo BA đầu tiên tại Việt Nam. Đối tác chính thức của IIBA quốc tế. Ngoài các khóa học public, BAC còn có các khóa học in house dành riêng cho từng doanh nghiệp. Chương trình được thiết kế riêng theo yêu cầu của doanh nghiệp, giúp doanh nghiệp giải quyết những khó khăn và tư vấn phát triển.

CÁC KHOÁ HỌC BUSINESS ANALYST BACs.VN DÀNH CHO BẠN

Khoá học Online:

Khoá học Offline:

Tại Tp.HCM:

Tại Hà Nội:

Tham khảo lịch khai giảng TẤT CẢ các khóa học mới nhất

Ban biên tập nội dung - BAC

Click để đọc tiếp

Mục đích chính của phân tích dữ liệu là gì? Ứng dụng thực tế trong công việc

Mục đích chính của phân tích dữ liệu là gì và làm thế nào để ứng dụng trong công việc là những câu hỏi thường gặp. BAC sẽ giúp bạn tổng hợp những kiến thức nền tảng thông qua các ví dụ thực tế, gần gũi.
Bài tập phân tích dữ liệu trong kinh doanh cho người mới bắt đầu có đáp án

Bạn muốn tìm bài tập phân tích dữ liệu trong kinh doanh cho người mới bắt đầu có đáp án? Bạn là người mới và chưa biết phải bắt đầu từ đâu? Hãy để BAC giúp bạn thông qua hướng dẫn chi tiết ở đây.
Dữ liệu thứ cấp là gì? phương pháp phân tích dữ liệu thứ cấp là gì?

Nếu bạn đang tìm hiểu về phân tích dữ liệu và gặp khái niệm dữ liệu thứ cấp thì đây là bài viết dành cho bạn. BAC sẽ giúp bạn tìm hiểu tất cả thông tin như định nghĩa, đặc điểm, ưu và nhược điểm cũng như những phương pháp phân tích.
Business Analyst thời đại AI: Cơ hội, thách thức và kỹ năng cần có để không bị thay thế

Trí tuệ nhân tạo (AI) đang thay đổi ngành phát triển phần mềm, ảnh hưởng đến vai trò của Business Analyst (BA). Hãy phân tích BA cần làm gì để thích nghi ở thời đại mới

Bình luận

Lê Anh Tuấn

Chuyên viên HO - Kỹ thuật Ngân hàng số Eximbank

Tôi là nhân sự thuộc Trung tâm Phát triển CNTT – Khối Ngân hàng số, hiện đang đảm nhiệm vai trò kiểm thử phần mềm (tester). Việc tham gia khóa học Business Analyst đã mang lại cho tôi góc nhìn toàn diện và rõ ràng hơn về vai trò của BA trong lĩnh vực ngân hàng.

Khóa học Fundamental Business Analysis tại BAC không chỉ giúp tôi hiểu đúng bản chất công việc BA mà còn hỗ trợ phát triển tư duy nghiệp vụ – từ tiếp cận giải pháp kỹ thuật sang tập trung vào nhu cầu người dùng. Phương pháp giảng dạy kết hợp lý thuyết và thực hành thực tiễn, cùng các hoạt động mô phỏng, thảo luận nhóm đã giúp tôi nâng cao kỹ năng giao tiếp, phân tích và trình bày yêu cầu – những năng lực thiết yếu để phối hợp hiệu quả giữa các bên trong dự án công nghệ.

Xem chi tiết +
Huỳnh Cao Cường

Nhân viên HO - Kỹ thuật Ngân hàng số Eximbank

Tôi hiện đang công tác tại Trung tâm Phát triển CNTT – Khối CNTT, với vai trò là nhân sự chức năng phụ trách mảng Ngân hàng số, chuyên sâu về kiểm thử phần mềm (Tester). Trước khi tham gia khóa học Fundamental Business Analysis do BAC tổ chức, tôi từng hình dung BA chỉ đơn thuần là cầu nối giữa bộ phận kỹ thuật và nghiệp vụ.

Tuy nhiên, quá trình học đã giúp tôi nhận thức rõ hơn về bản chất và tầm quan trọng của vị trí này. BA không chỉ kết nối các bên liên quan, mà còn giữ vai trò định hình yêu cầu, đảm bảo giải pháp được thiết kế đúng mục tiêu và sát với nhu cầu thực tế. Khóa học đã trang bị cho tôi tư duy phân tích bài bản, khả năng diễn đạt yêu cầu rõ ràng, và kỹ năng phối hợp hiệu quả trong môi trường dự án đa chiều.

Với nền tảng công nghệ thông tin sẵn có, khóa học là bước chuyển hướng quan trọng giúp tôi phát triển tư duy nghiệp vụ vững chắc và sẵn sàng theo đuổi lộ trình nghề nghiệp chuyên sâu trong lĩnh vực Business Analysis tại Eximbank.

Xem chi tiết +
Nguyễn Thị Mai Bình

Business Analyst

Với một người ngoại đạo như mình thì những chuyên đề về "kỹ thuật" của BA hết sức quan trọng. Ví dụ như sử dụng các diagram để mô hình hóa requirement, viết User Story/Use case, v...v..

Đến với khóa học Fundamental Business Analysis, mình đã được gặp thầy Lộc, một người người rất nhiệt tình và có tâm. Ngoài việc chia sẻ các kinh nghiệm thực tế trên lớp thì thầy còn dành thời gian ra để tư vấn, hỗ trợ, góp ý CV cho mình. Bên cạnh đó trung tâm và anh Phụng cũng hỗ trợ gửi CV, kết nối học viên tới mạng lưới các công ty đối tác chất lượng, điều này giúp học viên như mình tìm được công việc phù hợp nhất. Cảm ơn BAC.
Xem chi tiết +

Professional Transfer Services in Batumi

Luxury Georgian Transfer Services – Tbilisi & Batumi

Airport Transfers in Georgia

Mục đích chính của phân tích dữ liệu là gì? Ứng dụng thực tế trong công việc

Bài tập phân tích dữ liệu trong kinh doanh cho người mới bắt đầu có đáp án

Dữ liệu thứ cấp là gì? phương pháp phân tích dữ liệu thứ cấp là gì?

Business Analyst thời đại AI: Cơ hội, thách thức và kỹ năng cần có để không bị thay thế

CÔNG TY CỔ PHẦN ĐÀO TẠO VÀ TƯ VẤN BAC