AR Camera Translator

Các ứng dụng dịch truyền thống thường gặp độ trễ cao, hỗ trợ ngoại tuyến kém và — đáng chú ý nhất — văn bản dịch không ổn định hoặc "nhảy" khi hiển thị đè lên màn hình camera.

Chúng tôi phát triển một ứng dụng di động biến điện thoại thông minh thành công cụ dịch thời gian thực, kết hợp thị giác máy tính, NLP và AR. Để khắc phục vấn đề "văn bản nhảy", chúng tôi xây dựng thuật toán phân cụm văn bản thông minh dựa trên IoU và neo con quay hồi chuyển, giữ cho văn bản dịch ổn định hoàn hảo.

Phương pháp dịch lai — dịch trên thiết bị để bảo mật và dùng ngoại tuyến, kết hợp AI trên đám mây để đạt độ chính xác cao và hiểu ngữ cảnh. Kết quả là trải nghiệm AR mượt mà với độ trễ thấp ở mức 30 FPS.