Nghiên cứu: Vì sao ngôn ngữ do AI tạo ra ngày càng khó hiểu
Một nghiên cứu của Thomas Hikaru Clark, Matias B. Martin và Kyle Mahowald tìm hiểu vì sao văn bản do AI tạo ra gần đây có thể khó hiểu hơn đối với con người. Khi so sánh văn bản từ 9 mô hình ngôn ngữ hàng đầu và gần hàng đầu với văn bản do người viết cùng các bản diễn đạt lại bằng dịch vòng, nhóm nghiên cứu nhận thấy AI thường dùng nhiều hơn các chuỗi từ ít gặp, quan hệ ngữ pháp kéo dài, cụm danh từ chồng xếp và những cấu trúc khác vốn khiến con người khó xử lý. Các mô hình cũng thường ghép chủ thể vô tri với những động từ vốn hay dùng cho tác nhân có sự sống, khiến câu văn kém tự nhiên. Nhóm nghiên cứu cho rằng ngôn ngữ của con người chủ yếu được tối ưu để giao tiếp thành công, còn các hệ thống AI hiện đại ngày càng được tối ưu cho những nhiệm vụ như toán học, lập trình và suy luận từng bước. Những nhiệm vụ này khuyến khích mật độ thông tin—đưa nhiều nội dung hữu ích vào ít từ hơn—ngay cả khi kết quả khó đọc hơn. Một thử nghiệm ban đầu cho thấy việc tinh chỉnh mô hình với cơ chế phạt độ dài khiến ngôn ngữ của mô hình lệch xa hơn khỏi các đặc điểm thường thấy trong văn bản của con người, đồng thời tác động cũng khác biệt đáng kể giữa các họ mô hình. Kết quả cho thấy muốn AI giao tiếp tốt hơn, cần đánh giá không chỉ độ chính xác và năng lực suy luận mà cả lượng nỗ lực tinh thần người dùng phải bỏ ra để hiểu câu trả lời.
Người dùng và nhà phát triển nên chú ý rằng câu trả lời AI ngắn hoặc giàu thông tin chưa chắc dễ hiểu; có thể yêu cầu mô hình viết rõ ràng, dùng câu ngắn và giải thích thuật ngữ. Các nhóm xây dựng chatbot nên đánh giá cả mức độ dễ đọc và công sức người dùng phải bỏ ra, thay vì chỉ đo độ chính xác.
Đọc bài gốc