thảo luận Truyện tàu dịch máy (MTL)

Nipin

Senior Member
đù làm backend nản vãi, dữ liệu lớn chạy script parse dữ liệu nguồn thôi cũng mất nửa ngày, cập nhật đống này vào db chắc vài ngày, mà đấy là ngon không phải sửa, sửa lại thì nhiêu khê nữa :confused:

tôi muốn làm trước để hoàn thiện tính năng lịch sử đọc truyện (để resume truyện đang đọc cho dễ) mà có vẻ không xong ngay được.

thôi đổi sang hoàn thiện cái translate engine vậy :(
 

Nipin

Senior Member
à mà khoan, thực ra thì ngại nhất là nhập danh sách chương (30k bộ x ~5 nguồn x ~500 chương cho mỗi bộ = 75tr entries 🤣 ) thôi chứ mấy cái khác chắc cũng chưa là vấn đề.

có khi cân nhắc vẫn để thông tin chương tiết ra flat file như bây giờ cũng ổn :D
 

Nipin

Senior Member
mấy hôm nay mất mạng (cắt cả thành phố để dọn dẹp dây thì phải khùng vãi), buồn đời sửa chút giao diện trang chủ, bạn nào thấy không hợp thì bảo tôi để tôi revert nhé :v

btw, định đổi sort rating sang voters mà rất buồn nhận ra là tôi đã không còn tạo file index bằng voters nữa rồi, haizz :(
 

Nipin

Senior Member
Ngài Nipin mà phải ủng hộ à, ủng hộ nhà game lin quon giùm :doubt:

Chắc cũng phải 3 4 năm rồi ko đọc convert, hôm qua nhớ ra bộ Ma thú kiến văn lục phê quá, để rít lại
các bạn không ủng hộ là tôi vứt web không phát triển nữa :) time consuming vkl :confused:

mà ngoài việc tốn công dev ra thì hiện tại dùng chivi thỉnh thoảng khá lag (chưa rảnh debug nguyên nhân nhưng đoán là do dính blocking do download text truyện từ nguồn tốn thời gian), đang cân nhắc khoá hết vụ crawl từ nguồn này với các bạn đang dùng chùa :-w

btw, @trivu11 đây là momo https://nhantien.momo.vn/aJ5Ks0ug0Hp
donate xong pm tôi acc chivi tôi cho lên quyền hạn, được sửa từ bên vp chung :)
 

trivu11

Đã tốn tiền
Ngài Nipin mà phải ủng hộ à, ủng hộ nhà game lin quon giùm :doubt:

Chắc cũng phải 3 4 năm rồi ko đọc convert, hôm qua nhớ ra bộ Ma thú kiến văn lục phê quá, để rít lại
Nghỉ nạp mua skin rồi mike fen. Giờ đang cúng tiền cho anh Sony :shame:

các bạn không ủng hộ là tôi vứt web không phát triển nữa :) time consuming vkl :confused:

mà ngoài việc tốn công dev ra thì hiện tại dùng chivi thỉnh thoảng khá lag (chưa rảnh debug nguyên nhân nhưng đoán là do dính blocking do download text truyện từ nguồn tốn thời gian), đang cân nhắc khoá hết vụ crawl từ nguồn này với các bạn đang dùng chùa :-w

btw, @trivu11 đây là momo https://nhantien.momo.vn/aJ5Ks0ug0Hp
donate xong pm tôi acc chivi tôi cho lên quyền hạn, được sửa từ bên vp chung :)
Chuyển 300k rồi ấy, mà lâu lâu cần vào đọc nên donate thôi, chứ ko cần quyền hạn gì. :shame:
 

Nipin

Senior Member
Nghỉ nạp mua skin rồi mike fen. Giờ đang cúng tiền cho anh Sony :shame:


Chuyển 300k rồi ấy, mà lâu lâu cần vào đọc nên donate thôi, chứ ko cần quyền hạn gì. :shame:
ít nhất thì giờ sẽ load nhanh hơn do tôi giờ chỉ bật PWA mode cho các bạn quyền hạn to :) có PWA mode thì thay vì mỗi lần click link nó load lại toàn bộ trang thì nó sẽ chỉ load json thôi, mượt hơn nhiều, trước thì cái này hơi dở do nhiều lúc bấm link xong không thấy chạy, mà tôi vừa thêm cái loader kiểu android, ngồi đợi server load chương từ nguồn tàu cũng đỡ khó chịu chút (ngồi ngắm cái loader đổi màu cũng thú)

mà chính xác ra thì quyền hạn to sẽ không dính quảng cáo nữa mà tôi hôm nọ thử thấy vẫn dính đíu hiểu tại sao, để rảnh check lại.

// cố gắng trong một hai tuần này đưa ra được tính năng đánh dấu danh động tĩnh, càng đọc nhiều càng thấy nếu có danh động tĩnh vào thì thêm grammar dễ dàng hơn nhiều, mà lười quá :(
 

eet789

Đã tốn tiền
ít nhất thì giờ sẽ load nhanh hơn do tôi giờ chỉ bật PWA mode cho các bạn quyền hạn to :) có PWA mode thì thay vì mỗi lần click link nó load lại toàn bộ trang thì nó sẽ chỉ load json thôi, mượt hơn nhiều, trước thì cái này hơi dở do nhiều lúc bấm link xong không thấy chạy, mà tôi vừa thêm cái loader kiểu android, ngồi đợi server load chương từ nguồn tàu cũng đỡ khó chịu chút (ngồi ngắm cái loader đổi màu cũng thú)
Lag là một chuyện, chuyện nữa là có nhiều truyện tui đọc mấy trang tàu nó ngừng update giữa chừng....

ví dụ như truyện này: 我必将加冕为王, có 5 nguồn 69shu, nofff, doukan, jx_la, 5200 thì 4 thằng chết, hôm nay thằng 69shu bị sao mà crawler ko bắt đc chương mới....

có 2 nguồn phổ thông là uukanshu với ptwxz (trước là piaotian), 2 trang này có vấn đề kỹ thuật nào à mà ko thấy ông dùng? @Nipin
 

Nipin

Senior Member
Lag là một chuyện, chuyện nữa là có nhiều truyện tui đọc mấy trang tàu nó ngừng update giữa chừng....

ví dụ như truyện này: 我必将加冕为王, có 5 nguồn 69shu, nofff, doukan, jx_la, 5200 thì 4 thằng chết, hôm nay thằng 69shu bị sao mà crawler ko bắt đc chương mới....

có 2 nguồn phổ thông là uukanshu với ptwxz (trước là piaotian), 2 trang này có vấn đề kỹ thuật nào à mà ko thấy ông dùng? @Nipin
jx_la cũ thì đã chết rồi, nó mới setup lại nhưng blacklist khá nhanh, hit 3 4 phát liên tiếp đã chết, đã thế còn chơi trò tách chương ra 2 3 phần tôi khá ghét, để tính sau.

nofff hình như là chết do https của nó bị lỗi, 69shu 5200 máy tôi chạy bình thường, chắc là cái IP của server bị cho vào blacklist luôn rồi =) haizz để thả rông nó thế đấy.

uukanshu thì tôi không quá ưa do thằng này hay thay thế chữ bằng số latin, mấy cái đại lục thành đại 6 nhìn rất khó chịu... ptwxz thì có lần tôi check thử thấy phải decode mới ra text thành ra cũng lười
mà lý do chủ yếu là 2 thằng này to quá, chạy crawl thì chắc vài ngày không xong, tôi mất hết kiên nhẫn :(

thằng jx.la ngày xưa là ngon nhất mà có lẽ là do tôi abuse nó quá đà thành ra dẹo luôn, haizz.

đang cố giải quyết dứt điểm vụ này, ít nhất thì cũng phải cho power user quyền tự thêm text (edit truyện từ nguồn hoặc tự thêm chương) với thêm nguồn (không crawl cả trang nữa mà cho phép tự thêm source thôi, viết mấy cái parser thực ra cũng chả tốn bao nhiêu công).

thêm nữa là sẽ hạn chế quyền hạn của người dùng, về sau chắc chắn chỉ có donated users mới có full access, còn lại hạn chế tới đâu thì tôi đang tính :))
 

Nipin

Senior Member
Lag là một chuyện, chuyện nữa là có nhiều truyện tui đọc mấy trang tàu nó ngừng update giữa chừng....

ví dụ như truyện này: 我必将加冕为王, có 5 nguồn 69shu, nofff, doukan, jx_la, 5200 thì 4 thằng chết, hôm nay thằng 69shu bị sao mà crawler ko bắt đc chương mới....

có 2 nguồn phổ thông là uukanshu với ptwxz (trước là piaotian), 2 trang này có vấn đề kỹ thuật nào à mà ko thấy ông dùng? @Nipin
à mà cái https://old.chivi.xyz/~nga-tat-tuong-gia-mien-vi-vuong vẫn chạy đấy, dùng tạm trong lúc đợi :(
 

eet789

Đã tốn tiền
đang cố giải quyết dứt điểm vụ này, ít nhất thì cũng phải cho power user quyền tự thêm text (edit truyện từ nguồn hoặc tự thêm chương) với thêm nguồn (không crawl cả trang nữa mà cho phép tự thêm source thôi, viết mấy cái parser thực ra cũng chả tốn bao nhiêu công).
Tui là tui ưng cái này này.

Ví dụ như thằng 王国血脉 tôi có đọc, thằng tác này có trò "chống trộm", post chương fake lên trước, vài tiếng sau mới sửa lại, bọn piaotian/uukanshu sửa khá nhanh nhưng mấy trang khác thì lâu hơn. Tự sửa chương vào thì ngon hơn.
 
Top