thảo luận Server Dell T630 với 2 card RTX 3090 làm gì cho vui?

per

Junior Member
Hi các bác,

3 tháng vừa qua em hì hụi xây con server Dell T630 cũ.
Lần đầu tiên em tự xây homelab các thể loại nên còn lộn xộn nhiều thứ, mua dư các thể loại thành ra cấu hình như sau:
1691392515280.png


CPU: 2 x Intel Xeon Processor E5 2660 V3 10 Cores (20 cores tổng cộng)
RAM: 64GB 1333 MHz ECC
HDD: 18 HDD bay gồm
---- 3 ổ EXOS X18 18TB
---- 5 ổ Hitachi SAS 4TB
---- 2 ổ Dell SAS 2TB
---- 2 ổ WD Black 8TB
---- 2 ổ WD SSD Blue 500 GB
Card RAID: 1 x PERC H730
GPU: 2 cards RTX 3090 24GB VRAM (2 card này bị cái phải dùng 2 khe PCIe xa nhau nên ko vlink được :( )
PSU: 2 x PSU 1600W
NIC:
---- Intel 1GbE LOM 2 cổng on board
---- 1 card Dell HY7RM Broadcom BCM95719 4 cổng

1691392455366.png


Lúc đầu xây định biến nó thành vừa NAS, vừa machine learning lab, vừa plex/jellyfin, vừa pfsense, vừa host game cho thằng nhóc chơi etc... nên em cài exsi 8 này nọ. Nhưng
  • GPU passthrough ok nhưng VM cài ubuntu 22.04 không có driver nào hay phiên bản CUDA nào khiến CUDA thấy card được.
  • FreeNAS thì không khuyến khích virtualization
  • pfsense thì lúc đầu setup sao đó mà ping IP được nhưng ko ping domain được, em chưa ngồi xuống thử setup lại nữa

Thành thử hiện tại đang để nó tạm dual boot, chạy Ubuntu từ 1 ổ SSD, và exsi từ card vflash. Chạy machine learning lab trên Ubuntu thì driver, CUDA này nọ ok, train trên card ngon lành đồng thời cũng host game không thành vấn đề.

Có bác nào có ý tưởng gì khác để tận dụng cấu hình không, vì em đang thấy phí quá. Chẳng hạn có nên chạy VMware trên nền Ubuntu để tiếp tục học thêm cách setup mạng nội bộ trong nhà, NAS hay media server, hoặc tự host web một cách an toàn? Vân vân và mây mây...

Cảm ơn các bác
 
Hi các bác,

3 tháng vừa qua em hì hụi xây con server Dell T630 cũ.
Lần đầu tiên em tự xây homelab các thể loại nên còn lộn xộn nhiều thứ, mua dư các thể loại thành ra cấu hình như sau:
View attachment 2000619

CPU: 2 x Intel Xeon Processor E5 2660 V3 10 Cores (20 cores tổng cộng)
RAM: 64GB 1333 MHz ECC
HDD: 18 HDD bay gồm
---- 3 ổ EXOS X18 18TB
---- 5 ổ Hitachi SAS 4TB
---- 2 ổ Dell SAS 2TB
---- 2 ổ WD Black 8TB
---- 2 ổ WD SSD Blue 500 GB
Card RAID: 1 x PERC H730
GPU: 2 cards RTX 3090 24GB VRAM (2 card này bị cái phải dùng 2 khe PCIe xa nhau nên ko vlink được :( )
PSU: 2 x PSU 1600W
NIC:
---- Intel 1GbE LOM 2 cổng on board
---- 1 card Dell HY7RM Broadcom BCM95719 4 cổng

View attachment 2000614

Lúc đầu xây định biến nó thành vừa NAS, vừa machine learning lab, vừa plex/jellyfin, vừa pfsense, vừa host game cho thằng nhóc chơi etc... nên em cài exsi 8 này nọ. Nhưng
  • GPU passthrough ok nhưng VM cài ubuntu 22.04 không có driver nào hay phiên bản CUDA nào khiến CUDA thấy card được.
  • FreeNAS thì không khuyến khích virtualization
  • pfsense thì lúc đầu setup sao đó mà ping IP được nhưng ko ping domain được, em chưa ngồi xuống thử setup lại nữa

Thành thử hiện tại đang để nó tạm dual boot, chạy Ubuntu từ 1 ổ SSD, và exsi từ card vflash. Chạy machine learning lab trên Ubuntu thì driver, CUDA này nọ ok, train trên card ngon lành đồng thời cũng host game không thành vấn đề.

Có bác nào có ý tưởng gì khác để tận dụng cấu hình không, vì em đang thấy phí quá. Chẳng hạn có nên chạy VMware trên nền Ubuntu để tiếp tục học thêm cách setup mạng nội bộ trong nhà, NAS hay media server, hoặc tự host web một cách an toàn? Vân vân và mây mây...

Cảm ơn các bác
con này mà chạy thì mỗi tháng nuôi nó cỡ 300k tiền điện, bạn chịu nổi trước ko đã :D
 
hypervisor 1 chạy proxmox; thêm vài con vm/lxc chạy ubuntu, nixos, opn/pfsense; debian, rồi thêm Plex/Jellyfin, Grafana, Radarr, Sonarr, Overseerr, Calibre, Bitwarden, Heimdall, navidrome, Nginx hoặc Traefik.. vân vân, mây mây. Max option con homelab này xong cuối tháng nhìn hóa đơn điện chắc ngợp.
 
con này mà chạy thì mỗi tháng nuôi nó cỡ 300k tiền điện, bạn chịu nổi trước ko đã :D
:adore: em đã hy vọng là lưới điện mặt trời nhà em chịu được ít nhiều trong mùa hè bác ạ. Mà nói chung hy vọng lớn hơn là mấy thứ em học được từ này giúp cho công việc của em và từ đó cũng là lương. Nên chưa phải vấn đề đầu tiên em nghĩ tới haha XD
 
Bán ko bác ơi, Dell rack toàn 1u ồn khiêp, con này hợp lý quá.
xin lỗi bác em không có ở Việt Nam XD

hypervisor 1 chạy proxmox; thêm vài con vm/lxc chạy ubuntu, nixos, opn/pfsense; debian, rồi thêm Plex/Jellyfin, Grafana, Radarr, Sonarr, Overseerr, Calibre, Bitwarden, Heimdall, navidrome, Nginx hoặc Traefik.. vân vân, mây mây. Max option con homelab này xong cuối tháng nhìn hóa đơn điện chắc ngợp.
học và setup được hết mớ này có khi em rướn chút nữa chuyển qua làm linux sysadmin thay vì marketing hở bác :D chứ còn điện đóm hiện tại không thành vấn đề lắm vì nhà em về cơ bản đã xài điện rất tiết kiệm hơn nhà người khác rồi. Em đã bookmark reply của bác để tham khảo thêm, thanks bác
 
Hi các bác,

3 tháng vừa qua em hì hụi xây con server Dell T630 cũ.
Lần đầu tiên em tự xây homelab các thể loại nên còn lộn xộn nhiều thứ, mua dư các thể loại thành ra cấu hình như sau:
View attachment 2000619

CPU: 2 x Intel Xeon Processor E5 2660 V3 10 Cores (20 cores tổng cộng)
RAM: 64GB 1333 MHz ECC
HDD: 18 HDD bay gồm
---- 3 ổ EXOS X18 18TB
---- 5 ổ Hitachi SAS 4TB
---- 2 ổ Dell SAS 2TB
---- 2 ổ WD Black 8TB
---- 2 ổ WD SSD Blue 500 GB
Card RAID: 1 x PERC H730
GPU: 2 cards RTX 3090 24GB VRAM (2 card này bị cái phải dùng 2 khe PCIe xa nhau nên ko vlink được :( )
PSU: 2 x PSU 1600W
NIC:
---- Intel 1GbE LOM 2 cổng on board
---- 1 card Dell HY7RM Broadcom BCM95719 4 cổng

View attachment 2000614

Lúc đầu xây định biến nó thành vừa NAS, vừa machine learning lab, vừa plex/jellyfin, vừa pfsense, vừa host game cho thằng nhóc chơi etc... nên em cài exsi 8 này nọ. Nhưng
  • GPU passthrough ok nhưng VM cài ubuntu 22.04 không có driver nào hay phiên bản CUDA nào khiến CUDA thấy card được.
  • FreeNAS thì không khuyến khích virtualization
  • pfsense thì lúc đầu setup sao đó mà ping IP được nhưng ko ping domain được, em chưa ngồi xuống thử setup lại nữa

Thành thử hiện tại đang để nó tạm dual boot, chạy Ubuntu từ 1 ổ SSD, và exsi từ card vflash. Chạy machine learning lab trên Ubuntu thì driver, CUDA này nọ ok, train trên card ngon lành đồng thời cũng host game không thành vấn đề.

Có bác nào có ý tưởng gì khác để tận dụng cấu hình không, vì em đang thấy phí quá. Chẳng hạn có nên chạy VMware trên nền Ubuntu để tiếp tục học thêm cách setup mạng nội bộ trong nhà, NAS hay media server, hoặc tự host web một cách an toàn? Vân vân và mây mây...

Cảm ơn các bác
cấu hình ngon đấy, có điều kiện nhảy lên cpu v4 luôn đi.

freenas thì virtualization thoải mái luôn nhé, với điều kiện là phải passthrough cái HBA controller vô cho freenas chứ đừng xài RDM hay ổ ảo (trừ khi chỉ muốn thử nghiệm chơi)

pfsense thì không biết bạn có quay số nhà mạng hay chỉ dùng làm tường lửa cho VM? nếu không ping domain được thì khả năng cao là DNS đang setup sai. Vào trong setting chỉnh lại default DNS server trước.
 
học và setup được hết mớ này có khi em rướn chút nữa chuyển qua làm linux sysadmin thay vì marketing hở bác :D chứ còn điện đóm hiện tại không thành vấn đề lắm vì nhà em về cơ bản đã xài điện rất tiết kiệm hơn nhà người khác rồi. Em đã bookmark reply của bác để tham khảo thêm, thanks bác
Nhớ được cái gì thì list ra thôi, chứ dùng thì tùy nhu cầu:
  • chơi hd, torrent thì mới xài plex/jellyfin;
  • hay xem tvshow thì mới chạy radarr hay sonarr;
  • nhạc nhẽo thì cài navidrome;
  • cần reverse proxy thì mới chạy traefik... etc.
Bác sang r/homelab hay r/selfhost(ed/ing) xem, tham khảo.
 
Hi bác, mình là founder bên https://thinkmay.net, team mình đang build công nghệ cloud gaming trên hạ tầng máy ảo bên mình (xeon v4 + RTX 3060Ti), nếu bác hứng thú lấy home lab để chạy cloud gaming thì email mình nhé [email protected]. Mình hiện tại đang dùng dell t7910, lắp tối đa cũng được 3GPÚ
 
bỏ vga ra cho nhẹ điện đi bạn.
con này xịn sò nhất là cài truenas.
còn lab thì ảo hóa esxi + ảo hóa nas + pass hba vào mà chơi.
VN hàng này 2nd ít.
Toàn rack ko.
 
@per
thím reviewer giúp mình con này có port sata nào ko?
cái backplane của nó có tách đc riêng 1 số slot ra ko thím?
mình tính cho nó pass hba vào nas.
 
Con này chạy cày game thuê :confident:
mà 2 con rtx bán đi, không có nhu cầu về game hay AI hay là đồ họa thì phí lắm. Dùng 2 con này đào coin thời điểm này cũng phí:confident:
 
Hi bác, mình là founder bên https://thinkmay.net, team mình đang build công nghệ cloud gaming trên hạ tầng máy ảo bên mình (xeon v4 + RTX 3060Ti), nếu bác hứng thú lấy home lab để chạy cloud gaming thì email mình nhé [email protected]. Mình hiện tại đang dùng dell t7910, lắp tối đa cũng được 3GPÚ
ảo thế nhò. trông hay phết. nó dùng để làm gì đấy bạn
 
ảo thế nhò. trông hay phết. nó dùng để làm gì đấy bạn
Ví dụ như máy bạn không chơi được GTA V, the witcher 3, hoặc bạn chưa tải game thì bạn có thể thuê máy bên mình, kết nối và chơi game từ xa trên browser. Ngoài chơi game thì bạn toàn toàn có thể code, train AI, edit video giống y như máy tính cá nhân của bạn
 
Back
Top