PowerPoint Presentation NGHIÊN CỨU PHÁT TRIỂN HỆ THỐNG TỰ ĐỘNG NHẬN DIỆN VÀ GIÁM SÁT QUA CAMERA Sinh viên thực hiện Đỗ Đình Nam Khoa Công nghệ thông tin Giảng viên hướng dẫn TS Dương Trần Đức 1 Nội du.
NGHIÊN CỨU PHÁT TRIỂN HỆ THỐNG TỰ ĐỘNG NHẬN DIỆN VÀ GIÁM SÁT QUA CAMERA Sinh viên thực hiện: Đỗ Đình Nam Khoa: Cơng nghệ thơng tin Giảng viên hướng dẫn: TS Dương Trần Đức Nội dung trình bày Nội dung trình bày I Giới thiệu tốn II Mục tiêu đề tài III Tổng quan chương trình IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển Nội dung trình bày Nội dung trình bày I Giới thiệu toán II Mục tiêu đề tài III Tổng quan chương trình IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển I Giới thiệu tốn Nơng nghiệp ngành kinh tế quan trọng Việt Nam Trong đó, chăn ni lợn ngành kinh tế nông nghiệp truyền thống lâu đời, I Giới thiệu tốn Việc quản lý thơng tin nhập xuất chuồng, kiện tiêm vacxin trình theo dõi lợn chuồng diễn nào? Sổ theo dõi lợn Camera theo dõi chuồng ni I Giới thiệu tốn Tồn phương pháp theo dõi lợn • Kiểm soát số lượng lợn theo dõi lợn thủ cơng • Khi lợn có dấu hiệu bất thường thường phát muộn, phụ thuộc nhiều vào kinh nghiệm người chăn nuôi chuyên gia y tế I Giới thiệu toán Dựa vào tồn cách quản lý trang trại vừa nhỏ, hệ thống quản lý tích hợp cơng nghệ giúp đỡ người chăn ni lợn: • Quản lý số lượng cá thể chuồng • Nhận diện theo dõi lợn thông qua video từ camera • Quản lý kiện liên quan đến lợn chuồng từ lợn bắt đầu đưa vào trang trại Nội dung trình bày I Giới thiệu toán II Mục tiêu đề tài III Tổng quan chương trình IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển II Mục tiêu đề tài • Nghiên cứu vấn đề nhận diện, giám sát đối tượng qua ảnh, video sử dụng học máy • Nghiên cứu quy trình giám sát lợn trang trại, ứng dụng học máy để giám sát lợn qua hình ảnh camera • Phát triển hệ thống tự động nhận diện giám sát lợn qua camera sử dụng học máy giúp quản lý cá thể lợn II Mục tiêu đề tài IV Quy trình xây dựng hệ thống Google Colab 20 IV Quy trình xây dựng hệ thống Streaming Service Endpoint / /checkin/ /videoFeed/id//clientUuid/ /terminate_all/ /position// /highlightId /highlightPosition Ý nghĩa Hiển thị UI với streaming video test Hiển thị số lượng active thread Streaming video từ camera video từ source kết hợp với nhận diện, tracking lợn trả realtime cho người dùng Ngắt tất kết nối streaming Lấy danh sách vị trí lợn phiên streaming Highlight lợn xuất video Id Highlight lợn dựa vào vị trí click video (x, y) 21 IV Quy trình xây dựng hệ thống Streaming API quan trọng Streaming Service 22 IV Quy trình xây dựng hệ thống Backend Service • Service chia thành components tương ứng với đối tượng quản lý hệ thống quản lý nghiệp vụ chăn nuôi lợn trang trại bao gồm: Event, EventType, Farm, HealthStatus, Pen, Pig, Role, User, WeightType 23 IV Quy trình xây dựng hệ thống ReactJS WebApp 24 IV Quy trình xây dựng hệ thống Ưu điểm ReactJS • ReactJS cho phép nhúng code HTML Javascript • Tách cấu tạo UI phức tạp thành component độc lập • ReactJS có nhiều thư viện cung cấp sẵn template AntDesign Giúp người lập trình tập trung vào sáng tạo logic thiết kết mà khơng cịn phải tốn cơng sức chỉnh sửa html css thủ công 25 Nội dung trình bày I Giới thiệu tốn II Mục tiêu đề tài III Tổng quan hệ thống IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển 20 V Kết thực nghiệm Kết ứng dụng mạng học sâu vào nhận dạng theo dõi lợn 21 V Kết thực nghiệm • Tỉ lệ khơng nhận lợn cao khoảng 7-10% lợn bị khuất tầm nhìn Xuất phát từ yêu cầu gán nhãn đặt lợn bị che khuất 60% bỏ qua • 90/100 ảnh lượn nhận dạng xác, Accuracy khoảng 90% 22 V Kết thực nghiệm Một vài hình ảnh khác hệ thống 23 Nội dung trình bày I Giới thiệu toán II Mục tiêu đề tài III Tổng quan hệ thống IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển 30 Kết luận hướng phát triển Với mục tiêu đề ra, hệ thống thực được: • Nhận dạng giám sát lợn qua video sử dụng học máy • Xây dựng hệ thống tự động nhận djang lợn theo dõi lợn ứng dụng mạng YOLOv4 deepSORT • Ứng dụng WebApp thân thiện với người dùng • Hệ thống ổn định, có khả chạy thời gian dài, hoạt động nhiều hệ điều hành khác (Windows, Linux) 31 Kết luận hướng phát triển Vấn đề cịn tồn tại: • Khả nhận diện lợn xác việc theo dõi reID lợn lợn dạng thời gian có sai số lớn • Tốc độ truyển tải ảnh từ Streaming Service hiển thị cho người dùng chậm 32 Kết luận hướng phát triển Hướng phát triển: • Phát triển mơ hình nhận diện hành vi lợn, áp dụng tính tốn thời gian hoạt động: ăn, nằm, đi, đứng, • Đề tài mang tính thực cao, đưa vào thị trường nơi người quản lý trang trại cần công cụ thông minh phục vụ việc chăn nuôi quản lý trang trại 33 Cảm ơn thầy, bạn ý lắng nghe! ... hướng phát triển II Mục tiêu đề tài • Nghiên cứu vấn đề nhận diện, giám sát đối tượng qua ảnh, video sử dụng học máy • Nghiên cứu quy trình giám sát lợn trang trại, ứng dụng học máy để giám sát. .. Tổng quan hệ thống IV Quy trình xây dựng hệ thống V Kết thực nghiệm Kết luận hướng phát triển 10 III Tổng quan hệ thống Mơ hình kiến trúc tổng thể hệ thống 11 III Tổng quan hệ thống Hệ thống. .. sát lợn trang trại, ứng dụng học máy để giám sát lợn qua hình ảnh camera • Phát triển hệ thống tự động nhận diện giám sát lợn qua camera sử dụng học máy giúp quản lý cá thể lợn II Mục tiêu đề