thảo luận [Thảo Luận] Data Analysis, ML, DL, AI (All Levels vào đây chém gió nào)

Các bác ơi em 27 tuổi trước làm bên Tài Chính đang muốn chuyển việc liên quan đến DA hoặc DS thì cần trau dồi những kiến thức và kinh nghiệm gì ạ. Em có apply mấy chỗ mà toàn yêu cầu kinh nghiệm bằng cấp liên quan đến dữ liệu thấy khó quá.
P/s: Em có học qua 1 khóa về Thuật toán và 1 khóa về Machine Learning cho Beginner trên Coursera rồi, có thử tải dữ liệu về dùng Python để phân tích (kiểu nghiệp dư tay ngang vui vui thui). Trước ở công ty cũ thì em cũng hay dùng VBA để xử lí dữ liệu và cũng đang làm part time freelance mảng này trên Fiverr
Em thật sự nghiêm túc với việc chuyển ngành này nên bác nào tư vấn giúp em với ạ, em ở HCM ạ.
Chúc các bác cuối tuần zui zẻ

summeriscoming said:

Các bác ơi em 27 tuổi trước làm bên Tài Chính đang muốn chuyển việc liên quan đến DA hoặc DS thì cần trau dồi những kiến thức và kinh nghiệm gì ạ. Em có apply mấy chỗ mà toàn yêu cầu kinh nghiệm bằng cấp liên quan đến dữ liệu thấy khó quá.
P/s: Em có học qua 1 khóa về Thuật toán và 1 khóa về Machine Learning cho Beginner trên Coursera rồi, có thử tải dữ liệu về dùng Python để phân tích (kiểu nghiệp dư tay ngang vui vui thui). Trước ở công ty cũ thì em cũng hay dùng VBA để xử lí dữ liệu và cũng đang làm part time freelance mảng này trên Fiverr
Em thật sự nghiêm túc với việc chuyển ngành này nên bác nào tư vấn giúp em với ạ, em ở HCM ạ.
Chúc các bác cuối tuần zui zẻ

Click to expand...

khoai lắm bác, ngành này giờ ko còn như mấy khóa học vẫn quảng cáo trên facebook đâu.

Darksoul_utut said:

khoai lắm bác, ngành này giờ ko còn như mấy khóa học vẫn quảng cáo trên facebook đâu.

Click to expand...

thì biết là khó rồi nhưng vẫn muốn thử xem có cơ may nào không bác, tại trước em làm bên kiểm toán mà chán quá à

summeriscoming said:

Các bác ơi em 27 tuổi trước làm bên Tài Chính đang muốn chuyển việc liên quan đến DA hoặc DS thì cần trau dồi những kiến thức và kinh nghiệm gì ạ. Em có apply mấy chỗ mà toàn yêu cầu kinh nghiệm bằng cấp liên quan đến dữ liệu thấy khó quá.
P/s: Em có học qua 1 khóa về Thuật toán và 1 khóa về Machine Learning cho Beginner trên Coursera rồi, có thử tải dữ liệu về dùng Python để phân tích (kiểu nghiệp dư tay ngang vui vui thui). Trước ở công ty cũ thì em cũng hay dùng VBA để xử lí dữ liệu và cũng đang làm part time freelance mảng này trên Fiverr
Em thật sự nghiêm túc với việc chuyển ngành này nên bác nào tư vấn giúp em với ạ, em ở HCM ạ.
Chúc các bác cuối tuần zui zẻ

Click to expand...

Mình thì nghĩ ngành DS này tương lai rất sáng sủa, khi dữ liệu đã sẵn sàng thì việc mô hình hóa, kết hợp các trường dữ liệu khác nhau ... sẽ đem lại nhiều lợi ích
về mảng mô hình hóa dự báo các thuật toán, kĩ năng điều chỉnh siêu tham số, thử nghiệm, xử lý với dataset lớn, làm việc với GPU đưa kết quả thời gian thực, ...thì bạn có thể lên trang kaggle.com để tham gia cuộc thi và học hỏi. Cuộc thi họ đưa ra rất nhiều và trong nhiều lĩnh vực khác nhau.

Bạn có thể tham khảo tài liệu các khóa học này

Tốc độ data đẻ ra nhanh gấp 10 lần tốc độ con người đẻ.
Mà giờ đâu đâu (trên mạng) cũng than nghề data khó khăn quá. Chả biết đường nào mà lần.

dannymai2022 said:

Tốc độ data đẻ ra nhanh gấp 10 lần tốc độ con người đẻ.
Mà giờ đâu đâu (trên mạng) cũng than nghề data khó khăn quá. Chả biết đường nào mà lần.

Click to expand...

cái mảng này nó thuộc hệ nghiên cứu, đưa giải pháp để tối ưu, phát triển, mang tinh chất nghiên cứu nên dễ thất bại mà cũng phải đầu tư ban đầu. Nên mình nghĩ các công ty nhỏ sẽ dè dặt giai đoạn này, chỉ có những ông lớn có sẵn dữ liệu như Bank,... thì vẫn có nhu cầu lớn. Nhìn qua MSN có winmart hay mấy siêu thị bán hàng AEON, BRG mart ... riêng cái khuyến nghị sản phẩm cho khách hàng quen, kh mới còn chưa làm tốt, thì vẫn còn nhiều cơ hội lắm (vì bài toán nó khá phổ biến rồi)

chaychanh said:

Mình thì nghĩ ngành DS này tương lai rất sáng sủa, khi dữ liệu đã sẵn sàng thì việc mô hình hóa, kết hợp các trường dữ liệu khác nhau ... sẽ đem lại nhiều lợi ích
về mảng mô hình hóa dự báo các thuật toán, kĩ năng điều chỉnh siêu tham số, thử nghiệm, xử lý với dataset lớn, làm việc với GPU đưa kết quả thời gian thực, ...thì bạn có thể lên trang kaggle.com để tham gia cuộc thi và học hỏi. Cuộc thi họ đưa ra rất nhiều và trong nhiều lĩnh vực khác nhau.

Bạn có thể tham khảo tài liệu các khóa học này

Statistics Data Science Curriculum (2023-24) | Department of Statistics

statistics.stanford.edu

Click to expand...

Tks bác đã chia sẻ ạ. Ngoài việc sẽ tham gia các cuộc thi trên kaggle thì em đang vướng đoạn này: em có tải dữ liệu về từ kaggle rồi cũng thử làm phân tích build model rồi nhưng nhiều lúc không biết đoạn mình làm có oke không thì có trang nào review và hướng dẫn hướng cho mình không ạ (trả phí cũng được bác à)

Xin DA trước chắc dễ hơn rồi vừa làm vừa học mấy cái DS ML. Bạn học xong mấy cái kia thì cũng quen việc data, có kinh nghiệm rồi, lúc đấy chuyển sang DS chứ xin thẳng DS từ đầu thì hơi khó kiếm chỗ tốt.

summeriscoming said:

Tks bác đã chia sẻ ạ. Ngoài việc sẽ tham gia các cuộc thi trên kaggle thì em đang vướng đoạn này: em có tải dữ liệu về từ kaggle rồi cũng thử làm phân tích build model rồi nhưng nhiều lúc không biết đoạn mình làm có oke không thì có trang nào review và hướng dẫn hướng cho mình không ạ (trả phí cũng được bác à)

Click to expand...

Bạn tham gia cuộc thi trên đó, làm trực tiếp trên cloud của họ, nếu cần thì dùng máy cá nhân, có phần nào khúc mắc bạn vào mục thảo luận discussions của mỗi cuộc thi để hỏi nhé

Dổ ôi xịn quá said:

Xin DA trước chắc dễ hơn rồi vừa làm vừa học mấy cái DS ML. Bạn học xong mấy cái kia thì cũng quen việc data, có kinh nghiệm rồi, lúc đấy chuyển sang DS chứ xin thẳng DS từ đầu thì hơi khó kiếm chỗ tốt.

Click to expand...

Ai cũng nghĩ thế nhưng thật sự chẳng bao giờ như thế Vào hẳn vị trí mình mong muốn chứ đi đường vòng đòi hỏi đam mê và cơ hội lớn.

dannymai2022 said:

Ai cũng nghĩ thế nhưng thật sự chẳng bao giờ như thế Vào hẳn vị trí mình mong muốn chứ đi đường vòng đòi hỏi đam mê và cơ hội lớn.

Click to expand...

Tôi đồng ý với thím. Vì bản thân tôi cũng đang làm vị trí này. Job bây giờ rất ít, đừng có thấy thế giới LLM các kiểu, data các kiểu mà nghĩ ngành này hot nhiều cơ hội. Thực tế nó đã hot cách đây 5 năm rồi, từ đợt 2018 là các doanh nghiệp bắt đầu sử dụng DA, DS rồi. Tuy nhiên nó ko được như kì vọng của họ, hoặc đến thời điểm hiện tại khả năng của DS nó cũng có giới hạn. Nên giờ job rất ít, bạn mình làm các công ti về AI bị layout khá nhiều.

Mà DA có rất nhiều bài thú vị của doanh nghiệp, làm chưa chắc hết.

Dổ ôi xịn quá said:

Xin DA trước chắc dễ hơn rồi vừa làm vừa học mấy cái DS ML. Bạn học xong mấy cái kia thì cũng quen việc data, có kinh nghiệm rồi, lúc đấy chuyển sang DS chứ xin thẳng DS từ đầu thì hơi khó kiếm chỗ tốt.

Click to expand...

Bậy quá trời bậy luôn.
DA giờ xin intern không lương còn vàng mắt. (Đúng nghĩa intern DA chứ không phải vô rót nước pha trà rồi lấy mộc)
DS có DA nhưng làm DA rồi qua DS thì nó không như bạn nghĩ.
Cứ tìm chỗ DS rồi vào làm luôn.
Job title DS nhưng mà mỗi cty sẽ làm mỗi mảng khác nhau. Nên phải hỏi rõ lúc pv là mình làm gì, data ntn.

Darksoul_utut said:

Tôi đồng ý với thím. Vì bản thân tôi cũng đang làm vị trí này. Job bây giờ rất ít, đừng có thấy thế giới LLM các kiểu, data các kiểu mà nghĩ ngành này hot nhiều cơ hội. Thực tế nó đã hot cách đây 5 năm rồi, từ đợt 2018 là các doanh nghiệp bắt đầu sử dụng DA, DS rồi. Tuy nhiên nó ko được như kì vọng của họ, hoặc đến thời điểm hiện tại khả năng của DS nó cũng có giới hạn. Nên giờ job rất ít, bạn mình làm các công ti về AI bị layout khá nhiều.

Click to expand...

Mình biết 1 số cty đặc thù có main person là những DS như Kalapa hay Trusting Social chẳng hạn, họ vẫn dùng DS rất nhiều. Còn ở doanh nghiệp như bank chẳng hạn, mình thấy họ layoff DS cũng mạnh khi BO bị layoff. Vốn dĩ theo mình thấy nhé, thời gian đầu khi build model và kiểm định model họ cần 1 lượng nhân sự để làm nhưng sau khi model ổn định thì bắt đầu công việc DS giảm dần.
Model cần DS khi tổ chức hoạt động kinh doanh của doanh nghiệp thay đổi, ít nhiều tùy công ty. Đặc biệt giai đoạn vừa rồi doanh nghiệp co cụm lại thì nhu cầu phát triển/thay đổi hoạt động kinh doanh cũng giảm > model cũng ko cần project mới mà chỉ cần maintaining.
Đây là hiện trạng mình thấy hầu hết ở các công ty trên thị trường.

Các cty chuyên về khoa học dữ liệu, cty outsource như FPT, VNG,.v....v. thì mới có khả năng tìm kiếm dự án liên tục và cần đội DS đông , xử lý liên tục.
Còn AI mình chưa biết. Thật sự cũng chưa có dịp gặp ngoài thực tế luôn.

dannymai2022 said:

Mình biết 1 số cty đặc thù có main person là những DS như Kalapa hay Trusting Social chẳng hạn, họ vẫn dùng DS rất nhiều. Còn ở doanh nghiệp như bank chẳng hạn, mình thấy họ layoff DS cũng mạnh khi BO bị layoff. Vốn dĩ theo mình thấy nhé, thời gian đầu khi build model và kiểm định model họ cần 1 lượng nhân sự để làm nhưng sau khi model ổn định thì bắt đầu công việc DS giảm dần.
Model cần DS khi tổ chức hoạt động kinh doanh của doanh nghiệp thay đổi, ít nhiều tùy công ty. Đặc biệt giai đoạn vừa rồi doanh nghiệp co cụm lại thì nhu cầu phát triển/thay đổi hoạt động kinh doanh cũng giảm > model cũng ko cần project mới mà chỉ cần maintaining.
Đây là hiện trạng mình thấy hầu hết ở các công ty trên thị trường.

Các cty chuyên về khoa học dữ liệu, cty outsource như FPT, VNG,.v....v. thì mới có khả năng tìm kiếm dự án liên tục và cần đội DS đông , xử lý liên tục.

Click to expand...

Mình đang làm DS ở 1 công ti mà bạn vừa đề cập, có cần tranh luận tiếp ko thím. Công ti T layoff gần nhưu toàn bộ đội R&D, giờ chỉ duy trì maintain thôi thím ạ. Thực sự làm rồi mới thấy cái AI, DS nó khá làm bánh vẽ, nên giờ job thu hẹp cực kì. Điển hình là ko thấy bigtech tuyển job nữa.

Darksoul_utut said:

Tôi đồng ý với thím. Vì bản thân tôi cũng đang làm vị trí này. Job bây giờ rất ít, đừng có thấy thế giới LLM các kiểu, data các kiểu mà nghĩ ngành này hot nhiều cơ hội. Thực tế nó đã hot cách đây 5 năm rồi, từ đợt 2018 là các doanh nghiệp bắt đầu sử dụng DA, DS rồi. Tuy nhiên nó ko được như kì vọng của họ, hoặc đến thời điểm hiện tại khả năng của DS nó cũng có giới hạn. Nên giờ job rất ít, bạn mình làm các công ti về AI bị layout khá nhiều.

Click to expand...

Bên mình chủ yếu làm ML engineer là nhiều vì nó dùng để bán sản phẩm hoặc mang lại hiệu quả tức thì. (Cái này thì như kiểu full stack luôn, lấy dữ liệu từ warehouse, datalake, thậm chí là đi cào, tới nghiên cứu, tune model, rồi triển khai, đánh giá hiệu suất.)
Chứ DS thiên về thuần nghiên cứu và phân tích hơn. (Mà nghiên cứu thuần thời gian dài, có thể không đạt kq mong muốn nên ít cty triển khai đội này)

Darksoul_utut said:

Mình đang làm DS ở 1 công ti mà bạn vừa đề cập, có cần tranh luận tiếp ko thím. Công ti T layoff gần nhưu toàn bộ đội R&D, giờ chỉ duy trì maintain thôi thím ạ. Thực sự làm rồi mới thấy cái AI, DS nó khá làm bánh vẽ, nên giờ job thu hẹp cực kì. Điển hình là ko thấy bigtech tuyển job nữa.

Click to expand...

Nếu vậy mình đoán đc thím làm cty nào luôn rồi. Vừa rồi đứt hợp đồng với rất nhiều cty lớn khác. Mà mình biết nguyên nhân đứt do nghị định 13 - bảo mật thông tin, cái này thuộc về phạm trù "sự ổn định luật pháp" của 1 nước rồi, bị thay đổi thì tác động đến các ngành trong xã hội thôi.Như mấy ông bán xe biển đẹp, sim số đẹp giờ cũng khóc ròng.

Nếu ko phải lý do đó thì bỏ qua cmt này thím heng.

_noat_ said:

Bên mình chủ yếu làm ML engineer là nhiều vì nó dùng để bán sản phẩm hoặc mang lại hiệu quả tức thì. (Cái này thì như kiểu full stack luôn, lấy dữ liệu từ warehouse, datalake, thậm chí là đi cào, tới nghiên cứu, tune model, rồi triển khai, đánh giá hiệu suất.)
Chứ DS thiên về thuần nghiên cứu và phân tích hơn. (Mà nghiên cứu thuần thời gian dài, có thể không đạt kq mong muốn nên ít cty triển khai đội này)

Click to expand...

Bác ơi như em từ ngành khác giờ muốn làm DS thì ít nhất cần phải trang bị những gì bác nhỉ. Đang mông lung quá

Darksoul_utut said:

Mình đang làm DS ở 1 công ti mà bạn vừa đề cập, có cần tranh luận tiếp ko thím. Công ti T layoff gần nhưu toàn bộ đội R&D, giờ chỉ duy trì maintain thôi thím ạ. Thực sự làm rồi mới thấy cái AI, DS nó khá làm bánh vẽ, nên giờ job thu hẹp cực kì. Điển hình là ko thấy bigtech tuyển job nữa.

Click to expand...

Bạn nói lại sai, mấy công ty bạn nói là làm thất bại, bạn còn chưa biết họ tại sao thất bại mà nói là bánh vẽ, tôi nói cho bạn biết có thể thất bại ngay từ lúc tuyển head data rồi nhé. Còn bạn bảo bigtech ko tuyển đúng ko, ko biết bigtech nào. Chứ bạn thử lên những hub công nghệ lớn nhất luôn dẫn đầu về công nghệ mới xem như indeed london, indeed california, indeed berlin, ... coi xem số lượng ntn so với trước kia

summeriscoming said:

Bác ơi như em từ ngành khác giờ muốn làm DS thì ít nhất cần phải trang bị những gì bác nhỉ. Đang mông lung quá

Click to expand...

Làm DS (Đúng DS ko phải MLE) thì phải vững toán (xác suất thống kê, đại số tt, giải tích) lý do mà DS tuyển cả ngành toán - thậm chí ngành toán còn ưu tiên hơn cả dev. Python chỉ là công cụ để hiện thực toán. (Cái project mình đang làm research thì có 1 thầy chuyên ngành toán ở trong đấy)
Còn MLE thì gần với devops (hay backend).
Nếu ngành khác hoặc dev thì đi theo DE hoặc MLE cũng ổn á. (Mình thì làm lum la cả job trong job ngoài cty cũ mới cả MLE, cả DS, cả DE)
DE nó hỗ trợ cho DS với MLE phần dữ liệu (lấy data để phân tích, tạo dataset, A/B testing hoặc triển khai nó dùng tài nguyên bên DE).