Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Xem thông báo v/v tạm thời tắt Thanks+Hide
và 1 số tính năng khác tại đây.

***​

Dạo gần đây, anh em thành viên đều bức xúc vì tình trạng hoạt động chập chờn và thiếu ổn định của HDvietnam. Thay mặt BQT, Chip xin nhận trách nhiệm và xin lỗi toàn thể anh em thành viên HDvietanm - những người sát cánh cùng diễn đàn từ trước đến nay.

Để anh em nắm được phần nào thông tin tình hình nâng cấp của diễn đàn, Chip xin làm rõ một số vấn đề như sau:

1. Tại sao HDvietnam phải nâng cấp từ vbb 3.x lên 4.x?

Như anh em cũng đã biết, thời HDvietnam còn chạy vbb 3.x, diễn đàn rất đơn giản, chức năng nghèo nàn, và đặc biệt là không có trang chủ. Cũng có 1 thời gian, BQT xây dựng trang chủ độc lập với diễn đàn, chạy trên nền joomla nhưng nền tảng này không hợp nhất với dữ liệu của diễn đàn và chạy chậm, thế nên triển khai được ít lâu thì phải tạm ngưng.

Trước tình hình cần có trang chủ, thêm 1 số tính năng và quan trọng nhất là nâng cao bảo mật cho diễn đàn (khi đó vbb 3.x không còn được nâng cấp và hỗ trợ), BQT quyết định lên vbb 4.x. Biết trước vbb 4.x sẽ đòi hỏi nhiều phần cứng hơn so với vbb 3.x cho cùng một lượng truy cập, BQT dốc hầu bao mua thêm 1 server nữa, đồng thời cũng nâng cấp đường truyền, hệ thống lúc bấy giờ chạy trên mô hình 2 server. Trang chủ của HDvietnam được xây dựng lại bằng CMS của vbb 4.x như các bạn thấy đến tận hôm nay.

2. Tại sao HDvietnam phải nâng cấp thời gian trước Tết?

Trang chủ ngày một phát triển, lượng tin đưa lên ngày một nhiều, thành viên truy cập tăng nhanh khiến hệ thống 2 server trở nên nhanh chóng quá tải. Nếu ngược dòng thời gian 1 chút, vào thời điểm trước đợt nâng cấp hồi Tết, hdvietnam cũng thường xuyên quá tải và hoạt động thiếu ổn định giống như vài ngày vừa qua. Đứng trước tình hình này, BQT không thể có quyết định nào khác hơn là buộc phải nâng cấp hệ thống một lần nữa - giờ là nâng cấp nền tảng phần cứng. Mô hình chạy 2 server không thể đáp ứng nên BQT buộc phải đổi sang 1 mô hình khác, dùng nhiều server. Sau khi lựa chọn các phương án, BQT quyết định chọn mô hình Load Balancing cứng theo tư vấn của 1 đơn vị chuyên nghiệp. Mô hình này sử dụng 1 load balancing và 4 server (trở lên). Đơn vị chuyên nghiệp này được chọn dưới vai trò đối tác điều hành nền tảng phần cứng cho HDvietnam.

3. Tại sao HDvietnam nâng cấp đến giờ vẫn chưa xong?

Theo tư vấn của đối tác, tưởng chừng mọi thứ sẽ hoàn tất trước Tết để đón năm mới 2012 với 1 nền tảng mới đủ sức đáp ứng sự kỳ vọng của anh em, nhưng mọi chuyện không như suy tính. Đối tác không ngờ được sự phức tạp của database, mặt khác kinh nghiệm triển khai load balancing của KTV điều hành hệ thống còn rất thiếu nên hdvietnam.com gần như không hoạt động được theo mô hình này. Đây là thời gian HDvietnam hoạt động rất bất ổn định, do phải gánh một lượng truy cập lớn và phải thử áp dụng các cấu hình theo kiểu thực nghiệm trên nền tảng load balancing.

Sau một thời gian triển khai không thành công, đối tác tuyên bố rút lui và trả lại quyền điều hành cho BQT. Sau khi không thể tìm được nhân sự thích hợp cho việc quản trị và điều hành hệ thống load balancing, BQT không thể quyết định khác hơn là đưa hệ thống lại thời điểm trước nâng cấp và tìm giải pháp khác.

4. Có cần thiết phải nâng cấp trong thời gian tới?

Chắc chắn là có, và phải thực hiện càng sớm càng tốt. HDvietnam có lượng dữ liệu khổng lồ và đang chạy trên 1 nền tảng đơn giản. Dữ liệu của HDvietnam có 1 điểm khó nhai mà ngay cả những diễn đàn lớn hơn HDvietnam cũng không gặp phải: những siêu bài viết.

Những siêu bài viết là những bài tổng hợp link có kích thước khổng lồ và lượng thank cực lớn. Lượng dữ liệu này mau chóng làm quá tải server khi nhiều người cùng truy cập. Có những thời điểm, lượng truy cập lớn đến trên 700% năng lực xử lý của server, khiến hệ thống tắc nghẽn và nhiều hiện tượng lạ bắt đầu xảy ra (không nhìn thấy post cuối, đúp bài, bấm thank không hiện link...). BQT thậm chí đã phải yêu cầu cắt nhỏ các siêu bài viết và trưng cầu xóa bỏ hide link để tránh tập trung số lượng thanked quá lớn tại một topic.

Bên cạnh đó, code trang chủ của vbb 4.x rất nặng và chưa tối ưu. Mỗi khi đội tin xuất bài ra trang chủ, lập tức server tăng tải lên tối đa, khiến hoạt động của toàn thể anh em thành viên bị ảnh hưởng. BQT đã mất rất nhiều thời gian và công sức để tìm giải pháp khắc phục cho việc này nhưng đến nay vẫn chưa thể tìm được cách nào ngoài việc anh em tin tức phải chọn thời điểm lên tin vào giờ thấp điểm - rất bất hợp lý nhưng chưa có cách hay hơn.

Ngay lúc này, HDvietnam đang chạy trong tình trạng báo động của server, tức là có thể xảy ra quá tải bất cứ lúc nào. Nền tảng hiện tại cũng đã không thể tăng cường được thêm vì cũng đã đụng nóc rồi. Bắt buộc phải đổi sang nền tảng khác thì mới còn đường nâng cấp.

5. Những tính năng mới có làm tăng gánh nặng server?

Như đã trình bày, database mới là nguyên nhân chủ yếu, trong đó bao gồm cả bài viết và dữ liệu thank. Server quá tải ở nội tại hệ thống, trong quá trình trao đổi dữ liệu giữa web server và database server. Các tính năng và giao diện nằm ngoài xử lý này và ở vùng nhàn rỗi. Vì vậy nó không làm tăng gánh nặng server tại điểm cổ chai.

6. Vậy HDvietnam sẽ nâng cấp như thế nào?

Ngay trong tháng này HDvietnam sẽ triển khai theo mô hình khác. BQT đã lên kế hoạch và phương án thực hiện. Việc này cũng sẽ lại mất thời gian, công sức và có thể tiếp tục gây khó chịu cho thành viên, nhưng chúng ta không còn con đường nào khác. Tuy nhiên, qua đợt nâng cấp vừa rồi, BQT cũng học được rất nhiều kinh nghiệm thương đau và sẽ cố gắng không lặp lại sai lầm.

7. Tại sao nâng cấp HDvietnam khó khăn và mất thời gian thế? Có cách nào nhanh và ít gây khó chịu hơn không?

Câu trả lời cực đơn giản: tiền!

Việc nâng cấp này có thể rẹt rẹt trong vòng 1 tuần nếu HDvietnam có nhiều tiền (1 tỉ đồng chẳng hạn). Khi ấy chỉ việc tung tiền mua 1 nền tảng khủng, thuê 1 đội quản trị khủng và a lê hấp, mọi việc sẽ đâu vào đó. Vấn đề là HDvietnam chưa có điều kiện như vậy.

Ngay cả việc nâng cấp sắp tới cũng khiến HDvietnam tốn vài trăm triệu đồng, BQT cũng phải cân đong đo đếm dữ lắm, nhất là để duy trì một HDvietnam phi lợi nhuận như hiện nay.

==============

Trên đây là một vài thông tin chia sẻ đến các thành viên yêu quý của HDvietnam. Rất mong các bạn hiểu và thông cảm. Tại topic này, các bạn cứ thoải mái biểu lộ cảm xúc của các bạn. BQT (mà đại diện là Chip) không ngại nhận phê bình, dù nó gai góc và khó nghe. Tuy nhiên muốn phê bình một cách xây dựng thì các bạn cần nắm thông tin đúng và đủ, đó là mục đích của bài viết này.

Trân trọng.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Vậy là dự đoán của em bị "thắt cổ chai" là hoàn toàn đúng. Có nên chăng phát động phong trào donate từ các mem và các mạnh thường quân để cho diễn đàn có kinh phí hoạt động tốt hơn không nhỉ?

Em bổ sung thêm chút:

Chính vì cái vụ CR mà làm cho diễn đàn quá tải lại càng thêm quá tải. Bác nào ham hố CR là sáng nào cũng phải 10 tap thường trực trên trình duyệt. Không những cho 1 nick mà cho 1 vài nick trên 1 vài trình duyệt.
Như vậy một mình mem đã mở vài chục cái tap rồi. Với số lượng mem lớn thì nhân lên với thấy số lượng tap khủng cỡ nào?

Theo em bỏ cái cơ chế này đi thì hay hơn. Tặng CR cho các bài chia sẻ bổ ích, những uploader thì hay hơn

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Nhân tiện cho hỏi luôn thank/thanked đã reset lại có phải nằm trong kế hoạch không hay là chỉ thử nghiệm?
Xin cảm ơn.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

donate gì? Cổ phần hóa và bán cổ phần thì em mua luôn. ]

Ai lai khịt

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Hy vọng BQT tìm ra phương án và điều chỉnh tốt nhất để để Diễn Đàn hoạt động ổn định trong hoàn cảnh khó khăn như hiện nay .
p/s: Có cần kêu gọi và trợ giúp cũng phải lên tiếng để anh em còn giúp tý sức .
Chúc thành công.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Cùng câu hỏi với bác To, hiện tại có người lên Top Thanked là hoaitrung với 261 thanked

Ngoài ra với kiểu đấu giá ngược thì nhiều cR cũng vô dụng nên em sẽ sả hàng cR

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Em làm phép tính nhanh tổng số thread trong 2 box Direct Download for HD và Non-HD download là 110.000 threads. Hỏi mọi người ở đây ai đã từng down trong box ấy. 2 box ấy như 2 núi rác khổng lồ mà giới BOT, PUT từ nước ngoài mang đến đổ.

Thread này là thread thứ 374.254. Tạm tính 2 đống rác trên chiếm 30% tổng số thread đã có.
Một con số đáng chú ý là tổng tất cả các thread trong BOX CHIA SẼ PHIM (trừ 2 box ở trên ra) + BOX CHIA SẼ NHẠC mới 80.000, vẫn thua xa con số 110.000 của 2 box con đã nêu ở trên.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Truy cập vào đó ít, thank ở đó cũng ít, nó chỉ chiếm chỗ trong HDD chứ không làm quá tải.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Nếu dữ liệu thanks tốn tài nguyên như vậy thì chi bằng bỏ nó đi. Vẫn biết anh em Uploader sẽ có phần giảm nhiệt tình nhưng cái bực mình do mất dữ liệu hay ko truy cập được còn khó chịu hơn. Rất nhiều diễn đàn lớn ko cần hide thanks vẫn có uploader nhiệt tình đó thôi. Khi nào BQT có đủ 1 tỷ thì tính tiếp.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Scotty đã cập thông báo mới trên Post#1.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Đúng thế ..ko Thanks cũng chả sao!!
BQT lâu lâu hỗ trợ AE Upload [như tặng Acc, tặng point cho acc... chẳng hạn] thì cũng đã là đủ vui rồi!!

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Em xin giơ tay phát biểu tý, với tư cách như 1 TV bình thường chứ không có mốt miếc gì cả và không như là mẹ hát con khen hay nhé:

Chuyện AE buồn và bức xúc là có, ai nói không có gì cả vẫn thấy bình thường là nói xạo hoặc thờ ơ coi như khách vãng lai (như bác Milan gì đó, sorry bác!). Chỉ có điều thể hiện ra mặt ít hay nhiều là tuỳ cảm xúc và cá tính mỗi người thôi.
Riêng em thấy, một diễn đàn còn trẻ chủ yếu phát triển từ cây nhà lá vườn " của nhà trồng được" mà nên thế này là quá mỹ mãn trong khả năng cho phép rồi. Bác nào thử ví dụ hiện tại xem có diễn đàn nào với ĐK tương đương mà làm vậy được chưa ạ.

Không có sự cố vấp váp nào trong một cái thân thể lớn quá nhanh mà vẫn phải mặc một cái áo chật chội thì mới lạ.

Nhưng công bằng cũng nên góp ý với BQT và bộ phận KT, khi đã chủ động để set/ test hệ thống nên thông báo trước ( như bằng một cái cửa sổ giao diện xuất hiện khi TV đăng nhập) để AE biết không Up bài hoặc thao tác những vấn đề quan trọng, tránh làm mất công sức của AE thì thật tuyệt và Pro, chắc chắn sẽ chẳng ai phàn nàn mà còn ủng hộ nhiệt liệt nữa.

Những ý mà ở # 1 bác Chip nêu ra, em thấy gần như đã mở lòng với ACE hết rồi! Mong đây như là một cơ hội để BQT và các TV hiểu nhau thêm, gắn bó thêm. Còn một số bác có những cách thể hiện mà ban đầu em thấy hơi quá khích và tiêu cực nhưng bây giờ xét cho cùng cũng chỉ là mong muốn góp ý XD thôi, hy vọng qua Topic này những bác đó bình tĩnh lại rút KN về sau và ngay cả BQT nếu thấy có gì phiền lòng vì chuyện đó thì cũng nên lắng nghe và thấu hiểu.
Coi như ở cả 2 bên chúng ta hãy tự đặt mình vào vị trí của người kia để có thể vui vẻ và chung tay góp sức chuẩn bị cho một ngôi nhà mới to lớn và hoành tráng sắp tới.

Em xin hết ạ.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Hồi chiều đang thử nghiệm cho thank/thanked về 0 và bắt đầu từ con số 0. Cuộc chiến top thank thực sự công bằng và hấp dẫn. Lúc trước 2 ông nhoctom và ledung123 chễm chệ ngôi đầu như Real và Barca không ai có thể theo kịp. Nếu mà BQT để luôn số thank như hiện tại thì cũng tốt. Sau khi bỏ chế độ hide link thì việc kiếm thanked công bằng hơn cho mọi thành phần.
Nếu sau này ai cán thanked thứ 1 triệu lúc đó xác nhận Bảng thành tích rồi về 0 bắt đầu cho một mùa giải mới.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Vụ này giờ em mới biết, vì không chịu đọc. Cá nhân em duy nhất mở 1 tap trong trình duyệt. Ý kiến của lão dh rất hợp lý, em ủng hộ. Chỉ những đóng góp bổ ích thì mới được hưởng CR

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Xin báo cáo với các bác là tiến trình update lại thanks và thanked khuya qua đã thất bại. Mặc dù đã update xong nhưng vì lỗi kỹ thuật sau đó nên tất cả đều trở về "mo". scotty xin nhận trách nhiệm này bằng hành động sau:

1. Vào 0h30 ngày 10/5 sẽ tạm đóng cửa diễn đàn lần nữa để update lại lượng thanks và thanked. Thời gian có thể kéo dài đến sáng hoặc hơn vài tiếng bởi số lượng cực khủng: hơn [STRIKE]15[/STRIKE] 150 triệu thanked.

2. Chỉ số cR hôm nay không tăng [STRIKE]lào[/STRIKE] là do lỗi kỹ thuật mà scotty dính phải.

3. Sau khi việc này hoàn [STRIKE]toàn[/STRIKE] tất, scotty sẽ không tham gia vấn đề kỹ thuật của diễn đàn nữa.

4. Hiện tại diễn đàn chúng ta đã có 1 kỹ thuật chuyên trách về server, nhưng vẫn thiếu 1-2 người chuyên trách về mảng code/vbulletin và giao diện diễn đàn. scotty sẽ tuyển chọn người vị trí thứ 2 này.

scotty chân thành xin lỗi vì [STRIKE]sự[/STRIKE] lỗi ngu ngốc không đáng có này. Rất mong các bác thông cảm.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Thực ra khi tiến hành xử lý vấn đề kỹ thuật không ai dâm khẳng định là ổn 100% được, nên xảy ra lỗi không có gì là không thể cả. Nên bác cứ bình tĩnh không phải nói những lời nhận xét về mình nặng nề như vậy. Thực chất diễn đàn của chúng ta hiện nay muốn xử lý dứt điểm tình trạng như hiện nay theo cá nhân em là phải làm lại từ đầu chứ không khắc phục được. Vì khắc phục được lỗi này lại phát sinh lỗi khác. Em mạnh dạn đề nghị BQT nên thuê thêm một Seedbox sau đó chuyển toàn bộ nội dung diễn đàn hiện nay sang đó để anh em dùng trong quá trình chuyển tiếp. Sau đó hệ thống hiện tại sẽ cài đặt mới và cấu hình từ đầu sau đó chạy thử nghiệm cẩn thận. Test thử tải ok khi đó sẽ restore database lại thì sẽ ok. Theo em BQT nên tính đến phương án thuê hẳn vị trí đặt máy chủ tại DATA CENTER lớn của Viettel hoặc VNPT chứ cứ như thế này sẽ còn phát sinh nhiều vấn đề. Khi tiến hành thuê line kết nối máy chủ thì ưu tiên mở băng thông trong nước như khoảng 10GB/s "Mở băng thông trong nước lớn giá chi phí thêm không cao lắm" còn quốc tế thì cũng chỉ cần khoảng 5MB/s là ok vì chủ yếu thành viên diễn đàn kết nối từ trong nước là chính. Nếu cần đóng góp thì kêu gọi thành viên diễn đàn ủng hộ em nghĩ là không gì là không làm được cả. Và thêm một vấn đề là BQT nên xem xét việc bỏ thưởng cR cho thành viên khi đăng nhập vì hiện nay có quá nhiều người sử dụng nhiều nick để kiếm cR nên tốn tài nguyên hệ thống rất nhiều. Thân

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Phải ghi là 00:30 ngày 10/05/2012 .

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Em ủng hộ việc nâng cấp của diễn đàn. Diễn đàn càng ngày càng phát triển nên nhu cầu nâng cấp là một tất yếu.
Về phần kinh phí cho việc nâng cấp em thiết nghĩ có thể huy động ở anh em trong diễn đàn. Dù sao đây cũng là sân chơi chung của anh em, mọi người đều muốn đóng góp sức mình cho sân chơi mà mình tham gia. Mỗi người một ít gom góp lại cũng có món để để nâng cấp. Việc làm nhà hay sửa nhà người ta cũng đi vay để làm cơ mà !

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Xin thông báo với các bác là scotty vẫn chưa tiến hành update lượng thanks và thanked. Lý do: Ngủ để lấy lại sức.

Thực ra là vì quá mệt qua mấy tuần thức trắng nên chịu hết nổi, ngủ từ 6 giờ chiều hôm qua. Sáng nay dậy sớm xuất bài vở, tinh thần thật sảng khoái.

Vậy xin thông báo lại lần nữa là vào 0h30 ngày 11/5, sẽ tạm đóng cửa để update.

 

Ðề: Nâng cấp HDvietnam - chuyện gì đã và đang xảy ra?

Cứ để như thế này lại hay, ít ra tài nguyên diễn đàn nhẹ đi được nhiều. Các bác top thanked cũng không thấy có ý kiến gì. Các bác ý có quyền tự hào là người được nhiều thanked, xác lập kỷ lục...và điều đó ai cũng biết và đã được diễn đàn vinh danh rồi Có cảm giác từ khi mất thank diễn đàn chạy ngon hơn thì phải )