Rabbit SignLink
Dự án nghiên cứu và dạy học về nhận diện ngôn ngữ ký hiệu bằng computer vision, CNN/SIFT và phản hồi bằng giọng nói.
Rabbit SignLink là prototype nghiên cứu và dạy học cho bài toán học/nghiên cứu ngôn ngữ ký hiệu. Dự án bao gồm quá trình thu thập dữ liệu, gán nhãn gesture, huấn luyện và kiểm thử pipeline nhận diện, thiết kế giao diện PyQt và kiến trúc hệ thống để chuyển ký hiệu thành text và voice feedback.
Dành cho cộng đồng học thuật & nghiên cứu: Dự án ban đầu được thiết kế như một sáng kiến nghiên cứu open-source nhằm khám phá giải pháp hỗ trợ tiếp cận cho cộng đồng người khiếm thính và khó nghe. Trạng thái archive: Dự án đã chính thức được lưu trữ và không còn được phát triển tích cực; các dependency lõi như Keras/TensorFlow phiên bản cũ có thể đã lỗi thời. Mục đích lưu trữ: Mọi cập nhật và cấu hình hiện tại chỉ phục vụ bảo tồn lịch sử, lưu trữ và tham khảo học thuật.
Nổi bật dự án
Dự án nghiên cứu và dạy học về nhận diện ngôn ngữ ký hiệu bằng computer vision, CNN/SIFT và phản hồi bằng giọng nói.
Một công cụ học ngôn ngữ ký hiệu cần có dữ liệu rõ ràng, quy trình kiểm thử lặp lại được và phản hồi đủ nhanh trong khi camera, model inference và audio playback chạy đồng thời.
Hệ thống kết hợp OpenCV để xử lý vùng tay, CNN classification cho ASL alphabet signs, SIFT/FLANN matching cho custom gestures, PyQt threading, local language processing và Edge TTS playback.
Xây dựng prototype nhận diện ngôn ngữ ký hiệu phục vụ nghiên cứu và dạy học.
Video & Walkthrough
Timeline
Câu chuyện đằng sau
Tổng quan
Dự án được giữ ở phạm vi nghiên cứu học thuật: minh họa đầy đủ vòng lặp từ chuẩn bị dữ liệu, nhận diện gesture, kiểm thử, hiển thị kết quả đến phản hồi bằng giọng nói.
Bài toán
Một công cụ học ngôn ngữ ký hiệu cần có dữ liệu rõ ràng, quy trình kiểm thử lặp lại được và phản hồi đủ nhanh trong khi camera, model inference và audio playback chạy đồng thời.
Cách tiếp cận
Hệ thống kết hợp OpenCV để xử lý vùng tay, CNN classification cho ASL alphabet signs, SIFT/FLANN matching cho custom gestures, PyQt threading, local language processing và Edge TTS playback.
Gallery
Quan tâm đến dự án này?
Cùng nhau xây dựng giải pháp AI và edge bền vững cho workflow của bạn.