Phân tích dữ liệu

GS John Vu07/06/2023 11:00
Phân tích dữ liệu

Một người quản lí doanh nghiệp hỏi: “Khác biệt gì giữa phân tích Big Data và phân tích truyền thống? Chúng tôi đã từng làm phân tích nhiều năm và tôi không thấy tại sao big data lại quan trọng thế.”

Đáp: Có khác biệt lớn giữa phân tích Big Data và phân tích truyền thống. Phân tích truyền thống dựa trên các yêu cầu doanh nghiệp nơi dữ liệu được xác định, có cấu trúc, được thu thập, và được phân tích thành thông tin về hiệu năng doanh nghiệp để cho chúng có thể được so sánh với thông tin quá khứ.

Chẳng hạn số bán tháng này ít hơn nhiều so với tháng trước hay công ti dùng nhiều điện năm nay hơn năm trước. Dùng thông tin này cấp quản lí có thể ra quyết định liên quan tới vận hành của công ti như lợi nhuận, chất lượng, năng suất, cạnh tranh, hay phế thải v.v. Phân tích dữ liệu truyền thống nhận diện dữ liệu nào họ muốn thu thập và lưu giữ chúng trong trang tính excel hay cơ sở dữ liệu nơi chúng có thể được phân tích bởi các công cụ mô hình hoá thống kê để tạo ra báo cáo trinh sát doanh nghiệp.

Phân tích Big Data là về dự đoán xu hướng và hình mẫu về điều có thể xảy ra trong tương lai dựa trên dữ liệu từ nhiều nguồn (Đa dạng). Vì dữ liệu không được xác định, một số có thể là văn bản, ảnh, video, hay kí hiệu (mã vạch) v.v. nó yêu cầu cách nghĩ và cách tiếp cận khác hoàn toàn. Bởi vì có nhiều thứ trong chúng từ nhiều nguồn, dữ liệu là khổng lồ (Khối lượng) và nó thay đổi thường xuyên (Gia tốc) cho nên rất khó thu thập và phân tích bằng việc dùng phương pháp truyền thống.

Vì những dữ liệu này không được xác định, một số là có cấu trúc và một số thì không, chúng không thể được lưu giữ trong trang tính hay cơ sở dữ liệu mà phải được “mô hình hoá lại” và được tổ chức khác đi để xem thông tin hay hình mẫu nào có thể được thu thập và được nhận diện cho dự báo tương lai. Chẳng hạn, kinh doanh trực tuyến có thể thu thập dữ liệu phi cấu trúc từ phương tiện xã hội để xác định sản phẩm nào được người dùng nhắc tới thường xuyên; xu hướng nào đang nổi lên, hay quảng cáo nào là hiệu quả do số lượng bấm của người dùng v.v.

Các công cụ của trinh sát doanh nghiệp truyền thống được thiết kế cho dữ liệu có cấu trúc như văn bản và số nhưng KHÔNG được thiết kế cho dữ liệu phi cấu trúc như mã vạch và ảnh. Bạn sẽ cần các công cụ khác, các thuật toán khác và mô hình toán học cho phân tích big data vì có nhiều nguồn từ đó dữ liệu có thể được phân tích (đa dạng). Chẳng hạn trong phân tích bảo hiểm truyền thống, bạn có thể lấy thừa số rủi ro dựa trên tập các câu hỏi như, tuổi, sức khoẻ, tai nạn, giá trị v.v.  Bây giờ với từng câu hỏi, có nhiều dữ liệu sẵn có dựa trên giao diện của người dùng qua phương tiện xã hội, thiết bị di động v.v.

Thông tin này sẽ dứt khoát ảnh hưởng tới kết quả cuối cùng (tính nhân tố rủi ro). Vì những dữ liệu này không ở một chỗ, nó là phi cấu trúc và được sinh ra tại mọi khoảng thời gian đã cho qua nhiều nguồn và theo khối lượng khổng lồ do đó các công cụ mô hình hoá sẽ phải thay đổi và tổ hợp công nghệ học máy để nắm bắt tất cả những điều này.


Gửi bình luận
(0) Bình luận
1

Trở lại chuyện kiểm thử phần mềm

Một sinh viên mới tốt nghiệp, làm việc cho một công ti phần mềm gặp tôi nói: “Tôi làm việc là người kiểm thử phần mềm, tôi kiểm thử mọi thứ rất cẩn thận nhưng khách hàng của tôi vẫn tìm ra lỗi. Tôi đã làm gì sai và tôi có thể làm gì để là người kiểm thử giỏi hơn?”

Kỹ nghệ phần mềm ngày nay

Theo một báo cáo công nghiệp năm 2013, Kĩ nghệ phần mềm ngày nay là “bằng cấp nóng nhất” với nhu cầu cao nhưng không có đủ người để lấp vào mọi vị trí mở ra.

Học hiệu quả

Nhiều sinh viên không có kiên nhẫn, họ muốn mọi thứ nhanh chóng và chỉ muốn đọc cái gì đó dễ dàng và ngắn, đó là lí do tại sao tri thức của họ là nông, không đủ để giải quyết vấn đề phức tạp.

Thời đại thông tin

Trong hai mươi năm qua, mọi người đã thấy thay đổi lớn lao trong cách họ trao đổi dựa trên các thiết bị họ dùng, và họ vẫn mong đợi thêm nữa.

Phụ nữ trong công nghệ

“Em thích blog của thầy “Lĩnh vực tốt nhất cho phụ nữ” và lời khuyên về học Công nghệ thông tin (CNTT) nhưng trong ba khu vực của CNTT – Khoa học máy tính, Kĩ nghệ phần mềm và Quản lí hệ thông tin, khu vực nào tốt nhất cho phụ nữ? Xin thầy lời khuyên.”

Xu hướng khoán trong

Theo một báo cáo công nghiệp, 2010 là bắt đầu của xu hướng “khoán trong” và 2014 sẽ là thời gian nhiều việc “khoán trong” sẽ hoàn thành.

Sai lầm thông thường của người quản lí dự án

Ngày nay Công nghệ thông tin (CNTT) đang trở nên quan trọng hơn bao giờ. CNTT có thể giúp quản lí và kiểm soát vận hành doanh nghiệp nhưng khi nó không làm việc, nhiều điều có thể đi sai.

Phụ nữ làm việc trong ngành công nghệ

Barbara là một trong những sinh viên của tôi đã tốt nghiệp bốn năm trước và hiện đang làm việc tại Oracle. Tuần trước, cô ấy quay lại để tuyển sinh viên cho Oracle và tôi đã đề nghị cô ấy chia sẻ kinh nghiệm của cô cho sinh viên.

Công nghiệp phần mềm của Trung Quốc

Như một phần của bài giảng toàn cầu hoá, tôi mời Zhang Qiwen, một quan chức điều hành của một công ti phần mềm lớn ở Trung Quốc tới cho bài giảng trong lớp Kĩ nghệ phần mềm của tôi. Sau đây là điều ông ấy nói:

Không phải Nữ Oa hay Tây Vương Mẫu, đây là nữ thần có thể giết Tôn Ngộ Không

Điện ảnh - Nguyệt Phạm - 31/05/2025 13:00
Bà là một vị thần quan trọng trong các tín ngưỡng dân gian.

Dịch vụ giúp "biến mất" khỏi Internet

Kỹ năng - Thái Nguyễn - 31/05/2025 12:00
Từ nhu cầu xóa dấu vết online đến dịch vụ “ẩn thân kỹ thuật số” bùng nổ, câu chuyện biến mất khỏi Internet đang dần trở thành trào lưu thời hiện đại.

Kiếm hiệp Kim Dung: Điều gì giúp Quách Tĩnh thắng được 4 cao thủ Ngư - Tiều - Canh - Độc?

Thư giãn - Quốc Tiệp - 31/05/2025 11:00
Chính sự kết hợp giữa sự chân thành của Quách Tĩnh và trí thông minh của Hoàng Dung đã giúp họ đến gặp được Nhất Đăng đại sư.

Gen Alpha - Thế hệ học trên TikTok, ôn thi qua hashtag

Phong cách sống - Trang Vũ - 31/05/2025 10:00
Thế hệ này đã biến việc học thành xu hướng, biến bài giảng thành nội dung viral.

Không còn bệnh tim - Bí mật cho trái tim khỏe mạnh từ một phân tử nhỏ bé kỳ diệu 

Từ sách - Phim - Minh Hằng - 31/05/2025 09:00
Hãy đọc "Không còn bệnh tim" (No More Heart Disease) để khám phá những bí mật của trái tim và bắt đầu hành trình chăm sóc sức khỏe chủ động ngay hôm nay. Vì một trái tim khỏe mạnh, chính là nền tảng của một cuộc sống hạnh phúc và ý nghĩa.

55 nguyên tắc ứng xử thiết yếu để thành công - Đừng đợi đến khi con lớn mới dạy con cách ứng xử

Từ sách - Phim - Quìn - 31/05/2025 08:00
Là cha mẹ, ai cũng mong con mình trở thành người tử tế, tự lập và mạnh mẽ. Nhưng đó không phải là điều trẻ học được trong một sớm một chiều, mà là kết quả của sự rèn luyện từng ngày, bắt đầu từ những điều nhỏ nhất trong ứng xử hằng ngày.

Xem ‘Sex Education’, tôi ân hận vì nói với con: ‘Chuyện này không dành cho con nít’

Điện ảnh - Ứng Hà Chi - 30/05/2025 13:00
Tôi từng né tránh chuyện tình yêu, giới tính để bảo vệ con.

Vợ u não sống thực vật, chồng hát, nhảy mỗi ngày để đánh thức và phép màu xảy ra

Truyền cảm hứng - Nhật Thùy - 30/05/2025 12:00
Bác sỹ khuyên từ bỏ khi người vợ u não chuyển sang sống thực vật, tiền đã cạn, nhưng phép màu đã xảy ra sau nhiều tháng Deng nhảy và hát để cố gắng đánh thức cô.

Lotus Chat - ứng dụng vừa vượt Zalo, Messenger về lượt tải: Người dùng đánh giá gì?

Kỹ năng - Phan Trang - 30/05/2025 11:00
Lotus Chat - ứng dụng nhắn tin của người Việt đang nhận được nhiều đánh giá tích cực của người sử dụng.

Chuyện tình của Tổng thống Pháp cùng Phu nhân: Từ mối tình tuổi 15 với cô giáo đến hành trình khiến nước Pháp ngưỡng mộ

Phong cách sống - Phạm Trang - 30/05/2025 10:00
Từ những định kiến, ngờ vực, họ cùng nhau viết nên một câu chuyện tình hiếm có vượt thời gian.

Đường vào thiền - Osho: Đừng tự làm khổ mình vì những lỗi lầm đã qua

Từ sách - Phim - Quìn - 30/05/2025 09:00
Có những đêm nằm trằn trọc vì một lỗi lầm đã qua, một lời nói khiến ai đó tổn thương, hay một lựa chọn sai lầm đổi cả cuộc đời. Quá khứ vẫn còn đó không thể xoá đi, nhưng bạn hoàn toàn có thể bước ra khỏi nó.

Khám phá vật liệu quanh ta – Gieo mầm tri thức từ những điều gần gũi

Từ sách - Phim - Quìn - 30/05/2025 08:00
Làm mẹ, ai cũng muốn con lớn lên vừa tò mò, vừa hiểu biết. Nhưng bạn có từng ngạc nhiên khi con hỏi: "Sao cái bàn gỗ cứng thế?", "Nhựa đến từ đâu?", hay "Tại sao cao su lại co giãn được?"

Tại sao con thứ thường thông minh hơn con cả? Sự thật khiến nhiều phụ huynh chạnh lòng...

Suy ngẫm - Hiểu Đan - 29/05/2025 13:00
Chính môi trường và trải nghiệm sống khác nhau đã tạo nên những "kiểu thông minh" khác nhau ở mỗi người.

Lotus Chat vượt Zalo, Messenger, lọt top 3 app chat được tải nhiều nhất tại Việt Nam

Kỹ năng - Huỳnh Duy - 29/05/2025 11:00
Giữa một rừng ứng dụng nhắn tin trong và ngoài nước, Lotus Chat bất ngờ vươn lên trở thành từ khóa đột phá trên Google thời gian gần đây.
HẠT GIỐNG TÂM HỒN
2019 Bản quyền thuộc về hatgiongtamhon.com.vn. Phát triển bởi ONECMS
Chủ nhật, 01/06/2025