DeltaStreamer: Khung tác tử cho việc hiểu video truyền phát theo cách gần với con người
DeltaStreamer là một khung nghiên cứu nhằm giúp hệ thống hiểu các luồng video theo cách gần với con người hơn, trong đó tác tử AI có thể tự lập kế hoạch xem và điều tra. Thay vì nén nội dung quá khứ thành một bản tóm tắt có thể làm mất các thay đổi quan trọng của sự kiện, hệ thống liên tục ghi lại những thay đổi hình ảnh vào bộ nhớ có cấu trúc, qua đó bảo toàn diễn biến theo thời gian. Khi có câu hỏi, bộ lập kế hoạch sẽ xác định bằng chứng cần tìm, truy xuất các ký ức liên quan và phát lại những khung hình lịch sử được chọn để khôi phục các chi tiết hình ảnh đã bị bỏ qua trước đó. Cách tiếp cận này có thể giúp các hệ thống AI hiểu video trả lời chính xác hơn khi ban đầu chưa biết người dùng sẽ hỏi đến bằng chứng nào.
Đọc bài gốc