Kỹ năng Big Data

GS John Vu20/11/2023 11:00
Kỹ năng Big Data

Một sinh viên hỏi tôi: “Em cần kĩ năng nào để làm việc trong khu vực Big Data?” “Em có thể học những kĩ năng này ở đâu?” Xin thầy lời khuyên.”

Đáp: Big Data là khu vực đang nổi lên trong công nghệ thông tin (CNTT) giải quyết với việc xây dựng “sản phẩm dữ liệu” dựa trên các thuật toán phức tạp. Nó là tổ hợp của các khu vực công nghệ tính toán, toán học, và quản lí dữ liệu. Kĩ năng Big Data thường được dạy trong chương trình bằng thạc sĩ (thạc sĩ trong khoa học máy tính chuyên môn hoá trong Big Data hay thạc sĩ trong công nghệ thông tin trong phân tích dữ liệu v.v).

Là bằng thạc sĩ, nó yêu cầu rằng bạn phải có bằng cử nhân trong khoa học máy tính, kĩ nghệ phần mềm hay quản lí hệ thông tin để xin vào. Điều đó cũng có nghĩa là bạn phải có kĩ năng lập trình mạnh trong Java, C++ hay Python, có tri thức tốt về cấu trúc dữ liệu và thuật toán, và hiểu vòng đời phát triển phần mềm, đặc biệt cho phần mềm thực hiện các nhiệm vụ phức tạp.

Trong chương trình này bạn sẽ học vài môn trong trí tuệ nhân tạo (AI) như Học máy và thống kê để phát triển các thuật toán giải quyết với tập dữ liệu lớn. Bạn sẽ học về vài thuật toán được dùng trong học máy, chúng giải quyết các vấn đề nào, và chúng được thực hiện thế nào. (tức là, động cơ khuyến cáo, cây quyết định, xử lí ngôn ngữ tự nhiên v.v.) Bạn cũng học vài môn trong công cụ mô hình hoá như R hay Matlab hay SAS. Các công cụ phân tích thống kê và trực quan hoá là rất quan trọng trong công việc Big Data để thực hiện phân tích hồi qui, phân tích kết cụm, và phân lớp dữ liệu.

Để giải quyết với tập dữ liệu lớn, bạn cũng cần học các môn về Hadoop, MapReduce, NonSQL, Pig và Hive và Mahout.

Big Data là mới và vẫn đang tiến hoá. Bạn phải học nhiều các kĩ năng kĩ thuật và đưa vào thực hành để thu lấy kinh nghiệm. Do đó phát triển các kĩ năng Big Data, sẽ cần thời gian, công sức để làm việc như chuyên viên dữ liệu hay nhà khoa học dữ liệu. Ngày nay Big Data là một trong những khu vực có nhu cầu cao với trả lương cao trong công nghiệp bởi vì có thiếu hụt trầm trọng về những kĩ năng này.

English version

Big Data skills

A student asked me: “What skills do I need to work in the Big Data area?” “Where can I learn these skills?” Please advice.

Answer: Big Data is an emerging area of Information Technology (IT) that deals with building “data products” based on complex algorithms. It is a combination of computing technology, mathematics, and data management areas. Big Data Skills are often taught in a Master’s degree program (Master in Computer Science that specialize in Big Data or Master in Information Technology in Data Analytics etc.).

As a Master’s degree, it requires that you have a Bachelor’s degree in Computer Science, Software Engineering or Information System Management to apply. That also means that you must have a strong programming skills in Java, C++ or Python, have good knowledge of data structures and algorithms, and understand software development lifecycle, especially for software that perform complex tasks.

In this program you will take a few courses in Artificial Intelligence (AI) such as Machine Learning and Statistics to develop algorithms that deal with large datasets. You will learn about several algorithms used in machine learning, which problems they solve, and how they are implemented. (i.e., recommendation engines, decision trees, Natural Language Processing etc.) You also take several courses in modeling tools such as R or Matlab or SAS. These statistical analysis and visualization tools are very important in Big Data works to perform regression analysis, clustering analysis, and data classification.

To deal with large datasets, you also need to take courses to learn about Hadoop, MapReduce, NonSQL, Pig and Hive and Mahout.

Big Data is new and is still evolving. You have to learn a lot of technical skills and put into practice to gain experience. Therefore to develop Big Data skills, it will take time, effort to work as a Data Specialist or Data Scientist. Today Big Data is one of the area that has highest demand with the highest paid in the industry because there is a critical shortage of these skills.

 


Gửi bình luận
(0) Bình luận
1

Chuyên viên An ninh máy tính

Có một xu hướng phần mềm đang nổi lên trong mọi nước do nhu cầu cao và cung cấp thấp: Chuyên viên an ninh máy tính.
2

Kỹ năng và tiến bộ

Cái nhìn truyền thống của đào tạo về Khoa học máy tính là phát triển người lập trình để viết mã và sửa lỗi.

Tại sao vào đại học?

Một sinh viên viết: “Nhiều người tốt nghiệp đại học mà không thể tìm được việc làm; vậy tại sao vào đại học? Trường nghề có là chọn lựa tốt hơn không? Xin thầy lời khuyên.”

Cuộc chiến yên tĩnh về công nhân có kỹ năng

Trong hai trăm năm qua, các nước đã cạnh tranh và đánh nhau về các nguồn tài nguyên tự nhiên, nhưng ngày nay họ cạnh tranh và đánh nhau về công nhân có kĩ năng. Một cuộc chiến toàn cầu yên tĩnh về công nhân có kĩ năng đã diễn ra nhưng ít người để ý.

Bài học từ Estonia

Khi Estonia giành lại độc lập vào năm 1991, chỉ một phần ba dân số có điện thoại; chỉ các văn phòng chính phủ hay công ti lớn mới có máy tính cá nhân. Ít người thậm chí biết tới Internet hay nghe nói về Apple hay Microsoft.

Hành vi của sinh viên trong lớp

“Thầy xử lí thế nào khi sinh viên gửi email và nhắn tin điện thoại khi thầy đang giảng bài? Rồi những sinh viên xem YouTube trong lớp? Chúng ta có nên cấm họ đem các thiết bị điện tử vào lớp không? Xin thầy lời khuyên.”

Xu hướng mới: Khoán ngoài phần cứng, khoán trong phần mềm

Người ta dự đoán rằng trong vài năm nữa, phần lớn việc khoán ngoài phần mềm sẽ biến mất.

Trận chiến mới trong tính toán đám mây

Ngày nay “Tính toán mây” là “nóng” vì ngày càng nhiều công ti đang chuyển vào mây.

Tính toán đám mây: Miền mới, kỹ năng mới

Ngày nay nhiều công ti đang chuyển vào trong tính toán mây để giảm chi phí bằng việc tránh chi tiêu vào các cấu phần công nghệ thông tin (CNTT) hay nâng cấp kết cấu nền của riêng họ.

Dịch vụ tính toán đám mây

“Nhiều người nói rằng tính toán đám mây chỉ dành cho công ti lớn ở các nước đã phát triển như Mĩ hay Anh nhưng sẽ không có tác dụng cho công ti nhỏ ở nước đang phát triển. Xin thầy lời khuyên.”

Hành trình vào thế giới nội tâm qua “Đường vào thiền” của Osho

Nếu bạn từng một lần dừng lại giữa nhịp sống ồn ào để tự hỏi: "Mình thực sự đang tìm kiếm điều gì?", thì có thể, bên trong bạn đã bắt đầu tồn tại một hạt giống thức tỉnh. Một cảm giác mong manh mà mãnh liệt: khát vọng sống sâu sắc và tĩnh lặng hơn.

Chuyên viên An ninh máy tính

Blog GS John VU - GS John Vu - 08/06/2025 13:00
Có một xu hướng phần mềm đang nổi lên trong mọi nước do nhu cầu cao và cung cấp thấp: Chuyên viên an ninh máy tính.

Xem Sex Education, một sự thật hiện ra khiến tôi làm 1 việc giúp gia đình yên bình hẳn!

Điện ảnh - Thanh Hương - 08/06/2025 12:00
Mối quan hệ giữa 2 mẹ con tôi đã được cải thiện.

Cao thủ kỳ lạ của Kim Dung khiến Kim Luân Pháp Vương bị thương nặng

Thư giãn - Nguyệt Phạm - 08/06/2025 11:00
Đó là vị cao thủ nào?

Lười nhưng thích 'chữa lành', giới trẻ Trung Quốc nuôi nấm men làm thú cưng

Phong cách sống - Hoàng Hà - 08/06/2025 10:00
Muốn nuôi thú cưng để "chữa lành" nhưng không phải bỏ công chăm sóc, người trẻ Trung Quốc đua nhau nuôi hòn đá, hạt xoài... và mốt mới nhất là nuôi nấm men.

Hành trình vào thế giới nội tâm qua “Đường vào thiền” của Osho

Từ sách - Phim - Quìn - 08/06/2025 09:00
Nếu bạn từng một lần dừng lại giữa nhịp sống ồn ào để tự hỏi: "Mình thực sự đang tìm kiếm điều gì?", thì có thể, bên trong bạn đã bắt đầu tồn tại một hạt giống thức tỉnh. Một cảm giác mong manh mà mãnh liệt: khát vọng sống sâu sắc và tĩnh lặng hơn.

Cuộc đời phía trước - Hạnh phúc có thật sự tồn tại hay chỉ là điều ta luôn mải miết đi tìm?

Từ sách - Phim - 08/06/2025 08:00
Sau khi tốt nghiệp, không ít người trẻ rơi vào trạng thái trống rỗng. Một số bắt đầu công việc đầu tiên, số khác vẫn loay hoay chưa rõ nên đi đâu, về đâu. Dù ở điểm xuất phát nào, phần lớn đều mang trong mình một câu hỏi: “Phải sống thế nào để được hạnh phúc?”

Từ ChatGPT đến siêu trí tuệ: Thông minh hơn, nguy hiểm hơn?

Suy ngẫm - Ngô Di Lân - Trần Trà My - 07/06/2025 13:00
Chúng ta đang bước vào thách thức hiện sinh chưa từng có tiền lệ: khả năng xuất hiện trí tuệ siêu thông minh – một hệ thống vượt xa con người về mọi mặt.

Hướng dẫn tạo video từ văn bản bằng công cụ AI của Microsoft

Kỹ năng - Quang Huy - 07/06/2025 12:00
Bài viết dưới đây sẽ hướng dẫn bạn cách thức tạo ra những đoạn video ngắn từ văn bản mô tả bằng công cụ AI được phát triển bởi Microsoft và OpenAI.

Cao thủ khiến Trương Tam Phong tự cảm thấy thua xa

Thư giãn - Nguyệt Phạm - 07/06/2025 11:00
Vị cao thủ khiến Trương Tam Phong tự nhận không bằng là ai?

Xem Sex Education, tôi nhận ra nếu cha mẹ nào cũng biết thì xã hội sẽ tử tế hơn rất nhiều!

Điện ảnh - Thanh Hương - 07/06/2025 10:00
Tôi từng nghĩ dạy con là dạy cách cư xử, lễ phép, học giỏi, chăm ngoan. Nhưng càng làm cha mẹ lâu, tôi càng nhận ra...

Nghề lạ không thể bị AI thay thế, ngồi không cũng kiếm được 500 nghìn/giờ

Phong cách sống - Băng Băng - 07/06/2025 09:00
Nền kinh tế độc thân và "tóc bạc" tại Trung Quốc đang bùng nổ chưa từng có, dẫn đến nhu cầu tâm sự, bầu bạn tăng cao. Đây là mảng mà không một AI nào có thể thay thế hoàn hảo được "hơi ấm tình người".

Không còn bệnh tim - Chuyện về NO ngăn chặn cơn đau tim và đột quỵ

Từ sách - Phim - PGS.TS. NGUYỄN HOÀI NAM - 07/06/2025 08:00
Nếu một hệ tim mạch khỏe mạnh đang là mục tiêu của bạn, nitric oxide (NO) chắc chắn phải được thêm vào chương trình hành động.

Kỹ năng và tiến bộ

Blog GS John VU - GS John Vu - 06/06/2025 13:00
Cái nhìn truyền thống của đào tạo về Khoa học máy tính là phát triển người lập trình để viết mã và sửa lỗi.

Xem Sex Education, tôi chép lại 1 câu, ai ngờ sau này giúp tôi vực dậy cậu con trai đang suy sụp

Điện ảnh - Thanh Hương - 06/06/2025 12:00
Tôi hiểu – cái khoảnh khắc đó, con tôi không yếu đuối. Nó đang can đảm hơn bao giờ hết.

Người dùng iPhone và Android có thể sử dụng Photoshop miễn phí

Kỹ năng - Nam Đoàn - 06/06/2025 11:00
Sau thời gian dài được người dùng Android trông đợi, "gã khổng lồ" phần mềm Adobe cuối cùng cũng mang phiên bản thử nghiệm beta của Photoshop lên nền tảng này.
HẠT GIỐNG TÂM HỒN
2019 Bản quyền thuộc về hatgiongtamhon.com.vn. Phát triển bởi ONECMS
Chủ nhật, 08/06/2025