thảo luận Bàn luận về ngành Data trong tương lai - Cần anh em tư vấn cho các anh em dev muốn chuyển qua

Chào tất cả anh em vozer, Chúc anh em năm mới an khang thịnh vượng gặp nhiều may mắn nhaa
Mình làm dev được gần 2 năm rồi (Nhưng trình mình thực sự gà lun ý ( ). Mình đang hơi mất định hướng về ngành này nên có muốn thử sức với DE
Năm tới mình có đặt mục tiêu trở thành 1 Data Engineer
Mình muốn xin các anh em có kinh nghiệm đi trước

• Tương lai của ngành này, nhu cầu tuyển dụng
• Mức lương nếu được so sánh với các software developer
• Các kĩ năng cần có để trở thành DE
• 1 vài kinh nghiệm mà các anh em lâu năm có thể bật mí

Cảm ơn mọi người rất nhiều ạ

Ngoài lề 1 chút có anh em nào cảm thấy đang mất định hướng về nghề như mình thì cũng chia sẻ vào đây cho mình thấy đỡ cu đơn ạh. Mong được giao lưu với mọi người

AI thay dev code. Ko biết thay DE luôn ko. Tự nhận data, đầu vào ra. Tự tạo ETL, ELT tự thiết kế warehouse deploy lên. Chủ chỉ cần đưa data vô

Lập trình data cũng dùng các kiến thức như lập trình thông thường thôi, không khác nhiều đâu. Nên nếu thớt không làm dev thông thường được thì cũng khó làm data engineer đấy!

Cá nhân thấy làm DE là tổng hợp của nhiều nghề trong ngành phần mềm, bao gồm BA (đi thu thập phân tích yêu cầu), architect (data modeller), dev (ETL, ELT), automation tester (viết test pipeline). Nhưng tổng kết lại, kỹ năng quan trọng nhất của DE là giải quyết vấn đề, cũng giống các ngành dev khác

Gửi từ Xiaomi M2007J3SG bằng vozFApp

DE chã khác gì SE backend lắm.
code được backend với java scala python thì nhảy qua DE trong 1 nốt nhạc. DE có thể nó trải dài như thím ở trên nói nhưng thường làm việc sẽ phụ trách từng phần thôi, thọt phần nào học phần đó. chỉ cần vững nền tảng và có thể học hỏi thì nhìn nó không khác mấy.

nivnemo said:

DE chã khác gì SE backend lắm.
code được backend với java scala python thì nhảy qua DE trong 1 nốt nhạc. DE có thể nó trải dài như thím ở trên nói nhưng thường làm việc sẽ phụ trách từng phần thôi, thọt phần nào học phần đó. chỉ cần vững nền tảng và có thể học hỏi thì nhìn nó không khác mấy.

Click to expand...

nhưng mà tôi thấy từ DE nhảy sang BE thì lại hơi khó đó

HairyHeisenberg said:

nhưng mà tôi thấy từ DE nhảy sang BE thì lại hơi khó đó

Click to expand...

tuỳ. nhưng đa phần đúng như vậy. DE có 2 types chính là analytics và ops. dạng 1 chuyên về data model, bussiness này nọ. dạng 2 code + deploy. còn hard core hơn backend viết api hay streaming nữa vì là big data. de nhẹ hơn be phần logic, factors app ( config, logging này nọ)
nhìn chung cũng chỉ là những dòng code. chã khác mẹ gì

ko code được thì làm BA QA chứ sao lại sang DE, hoặc học ngoại ngữ làm BrSEBrSE

Từ dev qua DE khá là dễ dàng, vì mindset giống nhau, chủ yếu là học thêm một số công cụ của DE như Hadoop hay làm sâu hơn về database hơn.

Tương lai thì DE chắc là trend, nhưng mình nghĩ ổn định thì dev vẫn là ổn, vẫn khá hài lòng khi vẫn theo nghiệp dev và chưa thấy có dấu hiệu của việc làm dev mà chết đói dc, chấp cả ChatGPT.

Cty tôi đang layoff thì phải. Dev cty thì rất nhiều nhưng DE thì rất ít, cũng chưa bằng đội DevOps.
Không biết lương cao hơn đc DevOps để các bạn mạo hiểm qua ko?

nivnemo said:

DE chã khác gì SE backend lắm.
code được backend với java scala python thì nhảy qua DE trong 1 nốt nhạc. DE có thể nó trải dài như thím ở trên nói nhưng thường làm việc sẽ phụ trách từng phần thôi, thọt phần nào học phần đó. chỉ cần vững nền tảng và có thể học hỏi thì nhìn nó không khác mấy.

Click to expand...

Nhưng sao để apply DE khi mình làm mỗi BE nhỉ

Lập Trình Viên Số Khổ said:

Nhưng sao để apply DE khi mình làm mỗi BE nhỉ

Click to expand...

case của tôi nó cơ duyên thôi. ban đầu code backend cho app cũng to to 2 3 chục M user. làm mấy stack như kafka rabbitmq này nọ nên cũng có chút kn liên quan bigdata. xong nhảy qua đụng vào mấy cái của Bigdata như hadoop storm spark flink rồi làm ML này nọ. code bọn này riết chán code api xong apply DE cmnl. cứ lương cao thì code thôi éo quan tâm title lắm. backend, senior SE, MLOps, DE tôi mang đủ loại title nhưng công việc vẫn ko thay đổi.
đang định pv Backend đổi gió

nivnemo said:

case của tôi nó cơ duyên thôi. ban đầu code backend cho app cũng to to 2 3 chục M user. làm mấy stack như kafka rabbitmq này nọ nên cũng có chút kn liên quan bigdata. xong nhảy qua đụng vào mấy cái của Bigdata như hadoop storm spark flink rồi làm ML này nọ. code bọn này riết chán code api xong apply DE cmnl. cứ lương cao thì code thôi éo quan tâm title lắm. backend, senior SE, MLOps, DE tôi mang đủ loại title nhưng công việc vẫn ko thay đổi.
đang định pv Backend đổi gió

Click to expand...

bác pro dữ, giờ vào công ty nào lên trình nhanh vậy bác

Lập Trình Viên Số Khổ said:

bác pro dữ, giờ vào công ty nào lên trình nhanh vậy bác

Click to expand...

cty nào cũng đc. lúc pv nhớ hỏi kĩ thằng line manager xem nó là ng như nào. nó là thằng quyết định tương lai của bác chứ ko phải cty

nivnemo said:

cty nào cũng đc. lúc pv nhớ hỏi kĩ thằng line manager xem nó là ng như nào. nó là thằng quyết định tương lai của bác chứ ko phải cty

Click to expand...

hỏi thế thì kiểu gì nó chả PR nó lên mây bác, làm sao để biết mình có thằng quản lý, mentor tốt được nhỉ

Lập Trình Viên Số Khổ said:

hỏi thế thì kiểu gì nó chả PR nó lên mây bác, làm sao để biết mình có thằng quản lý, mentor tốt được nhỉ

Click to expand...

biết hết chứ bác. trình độ + thái độ. trình cùi hỏi vớ vẫn, hay thái độ trịnh thượng hóng hách. mấy cái đó dễ biết mà. tận dụng buổi interview mà chém nó thôi. cty ko quá cùi, sếp ko quá vớ vẫn là được. đủ để ko bị kéo xuống thôi, cái chính vẫn là mình. vn này hỏi cty nào tốt cũng ko dám khẳng định 100%, tuỳ team. tôi từng thẩm qua vng momo vin mà cũng ko dám khẳng định nó tốt hay ko

DE chắc nhu cầu tuyển dụng cũng như mấy bác DevOps nhỉ? Công ty cần 10 ông Dev, 5 ông DA/DS nhưng chắc chỉ cần 1-2 ông DE là đáp ứng nhu cầu của mấy ông kia rồi

zzzgamozzz said:

DE chắc nhu cầu tuyển dụng cũng như mấy bác DevOps nhỉ? Công ty cần 10 ông Dev, 5 ông DA/DS nhưng chắc chỉ cần 1-2 ông DE là đáp ứng nhu cầu của mấy ông kia rồi

Click to expand...

không. phải 50 100 dev thì lúc đó mới cần DE =]]z nói product thông thường nhé. scale lớn tí mới có data

Vậy tính ra DE cầu cũng không lớn nhỉ? Mọi người đổ xô vô đó hết thì lại bị thiếu SE -> lại lên trend SE

zzzgamozzz said:

DE chắc nhu cầu tuyển dụng cũng như mấy bác DevOps nhỉ? Công ty cần 10 ông Dev, 5 ông DA/DS nhưng chắc chỉ cần 1-2 ông DE là đáp ứng nhu cầu của mấy ông kia rồi

Click to expand...

DevOps đã ít thì DE còn ít hơn.

zzzgamozzz said:

Vậy tính ra DE cầu cũng không lớn nhỉ? Mọi người đổ xô vô đó hết thì lại bị thiếu SE -> lại lên trend SE

Click to expand...

Ai đổ xô vào đây làm gì? Làm SE khoẻ, nhiều cơ hội hơn