Kỹ năng Big Data

GS John Vu20/11/2023 11:00
Kỹ năng Big Data

Một sinh viên hỏi tôi: “Em cần kĩ năng nào để làm việc trong khu vực Big Data?” “Em có thể học những kĩ năng này ở đâu?” Xin thầy lời khuyên.”

Đáp: Big Data là khu vực đang nổi lên trong công nghệ thông tin (CNTT) giải quyết với việc xây dựng “sản phẩm dữ liệu” dựa trên các thuật toán phức tạp. Nó là tổ hợp của các khu vực công nghệ tính toán, toán học, và quản lí dữ liệu. Kĩ năng Big Data thường được dạy trong chương trình bằng thạc sĩ (thạc sĩ trong khoa học máy tính chuyên môn hoá trong Big Data hay thạc sĩ trong công nghệ thông tin trong phân tích dữ liệu v.v).

Là bằng thạc sĩ, nó yêu cầu rằng bạn phải có bằng cử nhân trong khoa học máy tính, kĩ nghệ phần mềm hay quản lí hệ thông tin để xin vào. Điều đó cũng có nghĩa là bạn phải có kĩ năng lập trình mạnh trong Java, C++ hay Python, có tri thức tốt về cấu trúc dữ liệu và thuật toán, và hiểu vòng đời phát triển phần mềm, đặc biệt cho phần mềm thực hiện các nhiệm vụ phức tạp.

Trong chương trình này bạn sẽ học vài môn trong trí tuệ nhân tạo (AI) như Học máy và thống kê để phát triển các thuật toán giải quyết với tập dữ liệu lớn. Bạn sẽ học về vài thuật toán được dùng trong học máy, chúng giải quyết các vấn đề nào, và chúng được thực hiện thế nào. (tức là, động cơ khuyến cáo, cây quyết định, xử lí ngôn ngữ tự nhiên v.v.) Bạn cũng học vài môn trong công cụ mô hình hoá như R hay Matlab hay SAS. Các công cụ phân tích thống kê và trực quan hoá là rất quan trọng trong công việc Big Data để thực hiện phân tích hồi qui, phân tích kết cụm, và phân lớp dữ liệu.

Để giải quyết với tập dữ liệu lớn, bạn cũng cần học các môn về Hadoop, MapReduce, NonSQL, Pig và Hive và Mahout.

Big Data là mới và vẫn đang tiến hoá. Bạn phải học nhiều các kĩ năng kĩ thuật và đưa vào thực hành để thu lấy kinh nghiệm. Do đó phát triển các kĩ năng Big Data, sẽ cần thời gian, công sức để làm việc như chuyên viên dữ liệu hay nhà khoa học dữ liệu. Ngày nay Big Data là một trong những khu vực có nhu cầu cao với trả lương cao trong công nghiệp bởi vì có thiếu hụt trầm trọng về những kĩ năng này.

English version

Big Data skills

A student asked me: “What skills do I need to work in the Big Data area?” “Where can I learn these skills?” Please advice.

Answer: Big Data is an emerging area of Information Technology (IT) that deals with building “data products” based on complex algorithms. It is a combination of computing technology, mathematics, and data management areas. Big Data Skills are often taught in a Master’s degree program (Master in Computer Science that specialize in Big Data or Master in Information Technology in Data Analytics etc.).

As a Master’s degree, it requires that you have a Bachelor’s degree in Computer Science, Software Engineering or Information System Management to apply. That also means that you must have a strong programming skills in Java, C++ or Python, have good knowledge of data structures and algorithms, and understand software development lifecycle, especially for software that perform complex tasks.

In this program you will take a few courses in Artificial Intelligence (AI) such as Machine Learning and Statistics to develop algorithms that deal with large datasets. You will learn about several algorithms used in machine learning, which problems they solve, and how they are implemented. (i.e., recommendation engines, decision trees, Natural Language Processing etc.) You also take several courses in modeling tools such as R or Matlab or SAS. These statistical analysis and visualization tools are very important in Big Data works to perform regression analysis, clustering analysis, and data classification.

To deal with large datasets, you also need to take courses to learn about Hadoop, MapReduce, NonSQL, Pig and Hive and Mahout.

Big Data is new and is still evolving. You have to learn a lot of technical skills and put into practice to gain experience. Therefore to develop Big Data skills, it will take time, effort to work as a Data Specialist or Data Scientist. Today Big Data is one of the area that has highest demand with the highest paid in the industry because there is a critical shortage of these skills.

 


Gửi bình luận
(0) Bình luận
1

Ấn Độ sẽ chi phối ngành công nghiệp dịch vụ Công nghệ thông tin

Sau khi gặp vận may kì lạ, cộng đồng công nghệ Ấn Độ thấy mình đang phải giải quyết thách thức với việc nở hoa của kinh tế Trung Quốc.
2

Năm xu hướng khoán ngoài hàng đầu cho 2009

Khoán ngoài gần nhà, khoán ngoài trách nhiệm xã hội và tính linh động công nghiệp trong việc phát triển được trông đợi trong năm tới.
3

Cải tiến kỹ năng tri thức

Để tăng cường tri thức và kĩ năng bên trong công ti hay doanh nghiệp, bạn cần bắt đầu với việc phân tích năng lực …
4

Cách mạng thông tin

Chúng ta đang ở chỗ bắt đầu của cuộc cách mạng – Cách mạng Thông tin. Cuộc cách mạng này sẽ thay đổi cách chúng ta liên lạc, cách chúng ta ra quyết định, và cách chúng ta được tổ chức.
5

Thành công của dự án phần mềm

Ba nhân tố mấu chốt quan trọng có thể xác định sự thành công của dự án phần mềm: Con người, Qui trình và Công cụ.

Tại sao vào đại học?

Một sinh viên viết: “Nhiều người tốt nghiệp đại học mà không thể tìm được việc làm; vậy tại sao vào đại học? Trường nghề có là chọn lựa tốt hơn không? Xin thầy lời khuyên.”

Cuộc chiến yên tĩnh về công nhân có kỹ năng

Trong hai trăm năm qua, các nước đã cạnh tranh và đánh nhau về các nguồn tài nguyên tự nhiên, nhưng ngày nay họ cạnh tranh và đánh nhau về công nhân có kĩ năng. Một cuộc chiến toàn cầu yên tĩnh về công nhân có kĩ năng đã diễn ra nhưng ít người để ý.

Bài học từ Estonia

Khi Estonia giành lại độc lập vào năm 1991, chỉ một phần ba dân số có điện thoại; chỉ các văn phòng chính phủ hay công ti lớn mới có máy tính cá nhân. Ít người thậm chí biết tới Internet hay nghe nói về Apple hay Microsoft.

Hành vi của sinh viên trong lớp

“Thầy xử lí thế nào khi sinh viên gửi email và nhắn tin điện thoại khi thầy đang giảng bài? Rồi những sinh viên xem YouTube trong lớp? Chúng ta có nên cấm họ đem các thiết bị điện tử vào lớp không? Xin thầy lời khuyên.”

Xu hướng mới: Khoán ngoài phần cứng, khoán trong phần mềm

Người ta dự đoán rằng trong vài năm nữa, phần lớn việc khoán ngoài phần mềm sẽ biến mất.

Trận chiến mới trong tính toán đám mây

Ngày nay “Tính toán mây” là “nóng” vì ngày càng nhiều công ti đang chuyển vào mây.

Tính toán đám mây: Miền mới, kỹ năng mới

Ngày nay nhiều công ti đang chuyển vào trong tính toán mây để giảm chi phí bằng việc tránh chi tiêu vào các cấu phần công nghệ thông tin (CNTT) hay nâng cấp kết cấu nền của riêng họ.

Dịch vụ tính toán đám mây

“Nhiều người nói rằng tính toán đám mây chỉ dành cho công ti lớn ở các nước đã phát triển như Mĩ hay Anh nhưng sẽ không có tác dụng cho công ti nhỏ ở nước đang phát triển. Xin thầy lời khuyên.”

Chia sẻ từ trái tim - Chuyển hóa ghét thành thương

Bạn có từng nghĩ vì sao chúng ta luôn dễ dàng ghét nhưng lại khó khăn trong việc thương một ai đó? Sự đa nghi ấy là tác nhân hướng ánh nhìn chúng ta ái ngại trước cuộc đời này.

Tỷ phú Rockefeller: Thu nhập chỉ là sản phẩm phụ của công việc

Suy ngẫm - Minh Nguyệt - 13/07/2024 12:00
Những lời khuyên chứa đựng bí quyết thành công của dòng họ giàu hàng đầu thế giới suốt hơn 100 năm qua.

25 sự thật tâm lý thú vị sẽ làm bạn kinh ngạc

Thư giãn - TĐ - 13/07/2024 11:00
Mọi người đều tò mò khi nhắc đến chủ đề tâm lý học, đặc biệt là tâm lý con người. Tại sao chúng ta cư xử theo một cách nhất định và những lý do liên quan đến những sự thật tâm lý thú vị như vậy luôn là điều hấp dẫn. 

Tranh cãi đôi anh em Lộc - nàng Mơ ôm nhau như người yêu, gọi bố là “Kiên ơi”: Người bố lên tiếng

Phong cách sống - Mây - 13/07/2024 10:00
Đây là lần đầu tiên gia đình nàng Mơ lên tiếng về vấn đề này dù đã gây tranh cãi từ lâu.

Chia sẻ từ trái tim - Chuyển hóa ghét thành thương

Từ sách - Phim - Đoàn Huy - 13/07/2024 09:00
Bạn có từng nghĩ vì sao chúng ta luôn dễ dàng ghét nhưng lại khó khăn trong việc thương một ai đó? Sự đa nghi ấy là tác nhân hướng ánh nhìn chúng ta ái ngại trước cuộc đời này.

Sát na này là thiên thu - Cẩm nang sinh tồn sống sót qua đau khổ

Từ sách - Phim - NGUYỄN AN - 13/07/2024 08:00
Có nhiều cẩm nang, sách hướng dẫn kỹ năng thoát hiểm, sinh tồn trong thảm họa nhưng hiếm có cẩm nang nào hướng dẫn chúng ta kỹ năng sống sót và bình an khi khổ đau bỗng nhiên ập tới.

Năm xu hướng khoán ngoài hàng đầu cho 2009

Blog GS John VU - GS John Vu - 12/07/2024 12:00
Khoán ngoài gần nhà, khoán ngoài trách nhiệm xã hội và tính linh động công nghiệp trong việc phát triển được trông đợi trong năm tới.

Anh trai vượt ngàn chông gai - Nghệ sĩ, khán giả bật khóc nhớ Wanbi Tuấn Anh

Truyền hình - Bích Phương - 12/07/2024 11:00
Trong tập 2 "Anh trai vượt ngàn chông gai", nhiếp ảnh gia Thiên Minh trình diễn các ca khúc của Wanbi Tuấn Anh và có đoạn chia sẻ lấy nước mắt khán giả.

21 tuổi, Warren Buffett bỏ ra 100 Đô la để tham gia lớp học này và cuộc đời ông đã sang trang

Kỹ năng - Nguyễn Phượng - 12/07/2024 10:00
Nhờ sự thay đổi trong khả năng giao tiếp đã giúp tỷ phú Warren Buffett đạt được thành công như ngày hôm nay.

Chia sẻ từ trái tim - Sống trong hiện tại không có nghĩa là có bao nhiêu xài bấy nhiêu

Từ sách - Phim - YÊN VŨ - 12/07/2024 09:00
Chúng ta thường được khuyên rằng phải biết sống trong hiện tại, nhưng sống trong hiện tại không có nghĩa là xả láng, có bao nhiêu xài bấy nhiêu, mà là biết mình đang làm gì với hiện tại, có chánh niệm với hiện tại.

Lòng tôi nhẹ khi mẹ rời xa - Cuộc đời của tôi phải là của tôi

Từ sách - Phim - Đan Thanh - 12/07/2024 08:00
Bị mẹ thao túng và bóc lột, Jennette McCurdy đã phải chống chọi với nỗi ám ảnh và khủng hoảng tâm lý trong thời gian dài. Nhưng sau tất cả, cô vẫn lựa chọn vượt qua những xúc cảm khổ đau để làm chủ cuộc đời và yêu thương chính mình.

Cải tiến kỹ năng tri thức

Blog GS John VU - GS John Vu - 11/07/2024 12:00
Để tăng cường tri thức và kĩ năng bên trong công ti hay doanh nghiệp, bạn cần bắt đầu với việc phân tích năng lực …

8 câu nói làm thay đổi cuộc đời người phụ nữ

Suy ngẫm - Diệp Anh - 11/07/2024 11:00
Những câu nói này tựa như trí tuệ siêu hình, làm thay đổi cuộc đời người phụ nữ.

Cụ ông nghèo nhặt nuôi bé gái bị bỏ rơi, 30 năm sau trở thành người sung sướng nhất làng

Truyền cảm hứng - Đinh Anh - 11/07/2024 10:00
Tấm lòng nhân hậu của ông đã được đổi lại bằng những tháng ngày hạnh phúc ở năm cuối đời.

365 chiêm nghiệm từ thiền sư Ajahn Brahm để sống 'Hạnh phúc mỗi ngày'

Từ sách - Phim - Minh Hằng - 11/07/2024 09:00
"Hạnh Phúc Mỗi Ngày" chính là một cẩm nang quý báu dành cho những ai đang tìm kiếm sự bình an và hạnh phúc trong cuộc sống.

Lòng tôi nhẹ khi mẹ rời xa - Mối quan hệ độc hại càng lún sâu càng khó hồi phục

Từ sách - Phim - Tú Anh - 11/07/2024 08:00
“Tôi muốn mẹ chấp nhận con người mà tôi đang trở thành. Tôi muốn mẹ để tôi phát triển. Tôi muốn mẹ muốn tôi là chính tôi.”
HẠT GIỐNG TÂM HỒN
  • Địa chỉ: 11H Nguyễn Thị Minh Khai - P. Bến Nghé - Quận 1 - TP. Hồ Chí Minh
  • Điện thoại: (+8428) 38233860 - Email: triviet@firstnews.com.vn
  • Giấy phép số 496/GP-BTTTT Bộ Thông tin và Truyền thông cấp ngày 17/10/2022
  • Chịu trách nhiệm chính: Nguyễn Văn Phước
  • Công ty TNHH văn hóa sáng tạo Trí Việt
  • Fax: (+8428) 38224560
  • Thỏa thuận cung cấp dịch vụ mạng xã hội Hạt giống tâm hồn
2019 Bản quyền thuộc về hatgiongtamhon.com.vn. Phát triển bởi ONECMS
Thứ 7, 13/07/2024