Đặt lên bàn cân GPT-4 và đối thủ đến từ Trung Quốc ERNIE Bot 4.0

Ra mắt vào tháng 10 và bắt đầu thu phí dịch vụ vào tháng 11, ERNIE 4.0, phiên bản chatbot nâng cấp đến từ Baidu, “không thua kém bất kỳ khía cạnh nào so với GPT-4”, Giám đốc Điều hành Baidu Robin Li, khẳng định.

Theo đó, nhóm phóng viên công nghệ CNN Business bao gồm bà Michelle Toh và bà Nectar Gan đã “thử thách” hai chatbot này bằng cách nhập bộ câu hỏi giống y hệt nhau. 

ERNIE chủ yếu vận hành bằng tiếng Trung, và có thể xử lý truy vấn tiếng Anh ở mức độ đơn giản hơn. Ngược lại, GPT-4 phát huy khả năng tốt nhất khi sử dụng tiếng Anh nhưng cũng có thể trả lời câu hỏi bằng nhiều ngôn ngữ khác, chẳng hạn như tiếng Đức.

Và sau đây là kết quả cuộc thử nghiệm:

NHẠY BÉN TIN TỨC

ERNIE 4.0 đánh bại GPT-4 ở một số mảng tin tức nhất định, đặc biệt là thông tin mang tính thời sự. Chatbot này biết rằng Taylor Swift hiện là tỷ phú, Trung Quốc gần đây đã cách chức Bộ trưởng Quốc phòng và ngôi sao “Friends” Matthew Perry vừa qua đời.

Trong khi đó, GPT đưa ra câu trả lời lỗi thời, như là "không có trường hợp nào được công bố rộng rãi về việc một ca sĩ nhạc đồng quê người Mỹ trở thành tỷ phú" hay "không có báo cáo về bất kỳ diễn viên nào trong series truyền hình 'Friends' qua đời". GPT-4 cũng nêu tên một cựu quan chức khi được hỏi Bộ trưởng Quốc phòng Trung Quốc là ai.

Trong mỗi câu trả lời, GPT-4 cho biết hệ thống đang dựa trên thông tin tính đến tháng 4/2023, thời điểm cơ sở dữ liệu được cập nhật lần cuối.

OpenAI, chủ sở hữu GPT-4, thừa nhận cần thiết phải mở rộng nền tảng kiến thức của chatbot, hứa hẹn tháng 11 sẽ ra mắt phiên bản mới tích hợp nhiều thông tin hơn.

“Chúng tôi thấu hiểu cảm giác của các bạn, rằng kiến thức về thế giới của ChatGPT chỉ dừng lại ở năm 2021”, Giám đốc Điều hành Sam Altman phát biểu trong một sự kiện vào tháng trước. 

TƯỞNG GIỐNG MÀ KHÁC

Nhóm phóng viên CNN giao cho ERNIE và GPT một vài nhiệm vụ đơn giản. Trong đó, nhóm yêu cầu cả hai bot giúp một nhân viên làm việc chăm chỉ xin sếp tăng lương.

Mỗi bên đều đưa ra lập luận thuyết phục trong email, nhấn mạnh đóng góp của nhân viên và đề xuất cuộc họp nhằm thảo luận trực tiếp vấn đề.

ERNIE dường như biết phân tích “đề bài" toàn diện hơn, nhắc nhở người dùng lưu ý đến tâm trạng của sếp hoặc nhiều yếu tố liên quan khác, chẳng hạn như vấn đề hạn chế ngân sách. GPT lại chia sẻ mẹo thực tế, đề xuất nhân viên gửi kèm bộ tài liệu nêu bật thành tích gần đây.

Kết quả khác diễn ra khi nhóm nhờ ERNIE và GPT đưa ra kế hoạch ăn uống healthy. Được yêu cầu cung cấp 5 ý tưởng cho bữa trưa giàu protein, ít carb trong tuần, cả hai đều đề xuất thực đơn tương tự - trong một số trường hợp, thậm chí giống hệt nhau - bao gồm salad gà nướng, cá ngừ hoặc rau diếp gà tây cùng nhiều rau xanh. 

THU HẸP KHOẢNG CÁCH

Theo ông Charlie Dai, Phó Chủ tịch và Giám đốc Nghiên cứu Công nghệ đến từ Forrester có trụ sở tại Bắc Kinh, nhận định không thể kết luận hơn - thua chỉ bằng cách đưa ra câu hỏi.

Nhưng ông cho biết đã thử phiên bản mới nhất của ERNIE và nhận thấy một số cải tiến đáng kể khi phản hồi, “về khả năng thấu hiểu và lý luận”.

Không giống như GPT-4 chỉ phản hồi bằng văn bản, ERNIE có thể đưa hình ảnh và video vào câu trả lời.

Tuy nhiên, theo tiêu chuẩn ngành về khả năng công nghệ, hiệu suất của ERNIE “vẫn kém hơn so với GPT-4”, ông nói thêm. “Nhưng ERNIE đang dần thu hẹp khoảng cách”.

Baidu cho biết chatbot của hãng đã thu hút 70 triệu người dùng. Con số được so sánh với 150 triệu người dùng ChatGPT, theo ước tính từ Sameweb, công ty phân tích dữ liệu kỹ thuật số.

Ngay trước sinh nhật một năm ChatGPT “chào sân” vào ngày 30/11, công ty bất ngờ tiết lộ bản nâng cấp độc đáo: GPT-4 Turbo.

Nhà phát triển cho biết phiên bản mới hiện chỉ có sẵn ở chế độ xem trước cho người dùng trả phí và “chưa phù hợp” để ra mắt đầy đủ. 

Baidu không trả lời yêu cầu so sánh ERNIE và GPT-4 Turbo.

Với động thái gần nhất, “OpenAI đã nâng thành công tiêu chuẩn chatbot trí tuệ nhân tạo lên tầm cao mới”, Phó Chủ tịch Dai chia sẻ với CNN.