Hcmute mô hình xe tự hành sử dụng thị giác máy tính và kĩ thuật học sâu

BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐẠI HỌC SƯ PHẠM KỸ THUẬT THÀNH PHỐ HỒ CHÍ MINH CƠNG TRÌNH NGHIÊN CỨU KHOA HỌC CỦA SINH VIÊN MƠ HÌNH XE TỰ HÀNH SỬ DỤNG THỊ GIÁC MÁY TÍNH VÀ KĨ THUẬT HỌC SÂU MÃ SỐ: SV2021-113 CHỦ NHIỆM ĐỀ TÀI: NGUYỄN HOÀNG HẢI NAM SKC 0 Tp Hồ Chí Minh, tháng 10/2021 Luan van BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐH SƯ PHẠM KỸ THUẬT TPHCM BÁO CÁO TỔNG KẾT ĐỀ TÀI NGHIÊN CỨU KHOA HỌC CỦA SINH VIÊN Xe tự hành sử dụng thị giác máy tính và kĩ thuật học sâu Mã sớ: SV2021-113 Thuộc nhóm ngành khoa học: CNKT Điều Khiển Tự Động Hóa SV thực hiện: Nguyễn Hoàng Hải Nam Nam, Nữ: Nam Phạm Duy Hưng Nam Lê Huy Phương Nam Dân tộc: Kinh Lớp: 18151CLA2 Khoa: Khoa Đào tạo Chất lượng cao Năm thứ: /Số năm đào tạo: Ngành học: CNKT Điều Khiển Tự Động Hóa Sinh viên chịu trách nhiệm: Nguyễn Hoàng Hải Nam Người hướng dẫn: PGS.TS Lê Mỹ Hà Luan van PHẦN MỞ ĐẦU .10 Tổng quan tình hình nghiên cứu thuộc lĩnh vực đề tài 10 Lý chọn đề tài 13 Mục tiêu đề tài 14 Phương pháp nghiên cứu .14 Đối tượng nghiên cứu .15 Phạm vi nghiên cứu 15 CƠ SỞ LÍ THUYẾT 16 CHƯƠNG 1: CÁC NGUYÊN LÍ CỦA XE TỰ HÀNH 16 1.1 Giới thiệu xe tự hành .16 1.2 Các công nghệ sử dụng xe tự hành 17 1.2.1 Lidar 18 1.2.2 GPS .21 1.2.3 Camera .22 1.2.4 Cảm biến siêu âm 23 1.3 Tổng quan ứng dụng trí tuệ nhân tạo xe tự lái 24 1.3.1 Artificial Inteligence 24 1.3.2 Machine learning 25 1.3.3 Học sâu .27 1.3.4 Ứng dụng mạng thần kinh học sâu lĩnh vực xe tự lái 29 CHƯƠNG 2: MẠNG THẦN KINH NHÂN CHẬP 31 2.1 Giới thiệu mạng thần kinh nhân chập 31 2.2 Cấu trúc mạng thần kinh nhân chập 32 2.2.1 Lớp nhân chập 32 2.2.2 Hàm kích hoạt 35 2.2.3 Bước sải và bước đệm .36 2.1.4 Lớp pooling 37 2.1.5 Fully-Connected Layer .38 CHƯƠNG 3: TỔNG QUA VỀ PHÂN ĐOẠN ẢNH .40 Luan van 3.1 Giới thiệu phân đoạn ảnh 40 3.2 Nhiệm vụ phân khúc hình ảnh 40 3.3 Cấu trúc mạng phân khúc hình ảnh 41 3.3.1 Upsampling 42 3.3.2 UNet 44 3.4 BiSeNet .45 3.4.1 Spatial Information và Receptive Field 45 3.4.2 Global average pooling .46 3.4.3 Cấu trúc BiSeNet .47 3.4.4 Lợi ích mạng phân đoạn ảnh so với xử lí ảnh truyền thống 49 3.5 Bộ liệu phân đoạn ảnh (dataset) .52 3.5.1 Bộ liệu Cityscapes 52 3.6 Ứng dụng phân khúc hình ảnh xác định đích đến 53 CHƯƠNG 4: MÔ HÌNH VÀ THUẬT TOÁN ĐIỀU KHIỂN 55 4.1 Mô hình thuật toán xe tự hành 55 4.1.1 Động học lái Ackermann 55 4.1.2 Phân tích mô hình động học xe ô tô 55 4.1.3 Phân tích động lực học mơ hình xe tơ 57 4.2 Thiết kế điều khiển 58 4.2.1 Giải thuật điều khiển bánh lái cho xe tự hành .58 4.2.2 Bộ điều khiển Pure Pursuit 58 4.2.3 Bộ điều khiển Stanley .59 4.3 Giải thuật PID điều khiển tốc độ cho xe .60 4.4 Phương pháp điều khiển 61 CHƯƠNG 5: THIẾT KẾ PHẦN CỨNG MƠ HÌNH XE TỰ HÀNH 62 CHƯƠNG KẾT QUẢ NGHIÊN CỨU VÀ ĐÁNH GIÁ 63 KẾT LUẬN VÀ KIẾN NGHI 67 TÀI LIỆU THAM KHẢO: 68 PHỤ LỤC 70 Luan van DANH MỤC BẢNG BIỂU Luan van DANH MỤC CÁC TỪ VIẾT TẮT ADAS: Advacne Driving Assistance System AI: Artificial Inteligence CP: Context Path CNN: Convolutional neural network DL: Deep Learning GPS: Global Positioning System LIDAR: Light Detection And Ranging ML: Machinge learning RADAR: Radio Detection And Ranging SP: Spatial Path Luan van BỘ GIÁO DỤC VÀ ĐÀO TẠO TRƯỜNG ĐH SƯ PHẠM KỸ THUẬT TPHCM THÔNG TIN KẾT QUẢ NGHIÊN CỨU CỦA ĐỀ TÀI Thông tin chung: - Tên đề tài: Xe tự hành sử dụng thị giác máy tính và kĩ thuật học sâu - Chủ nhiệm đề tài: Nguyễn Hoàng Hải Nam - Lớp: 18151CLA2 Mã số SV: 18151021 Khoa: Đào tạo Chất lượng cao - Thành viên đề tài: Stt Họ tên MSSV Lớp Nguyễn Hoàng Hải Nam 18151021 18151CLA2 Lê Huy Phương 18151030 18151CLA2 Phạm Duy Hưng 18151188 18151CLA2 Khoa Đào tạo Chất lượng cao Đào tạo Chất lượng cao Đào tạo Chất lượng cao - Người hướng dẫn: PGS.TS Lê Mỹ Hà Mục tiêu đề tài: Thiết kế mơ hình xe tự lái ứng dụng thị giác máy tính kỹ thuật học sâu Tính mới sáng tạo: Sử dụng kỹ thuật phân đoạn ảnh dựa kiến trúc BiseNet cho độ chính xác tương đối cao, kỹ thuật trích xuất tọa độ biên dạng đường cho kết quả ổn định Luan van Kết nghiên cứu: Mạng phân đoạn ảnh phân tách hình ảnh đường từ camera gắn mơ hình xe, Tḥt toán PID cho xe tự hành, Mô hình xe tự hành kích cỡ 1/10 nguyên gốc tích hợp với camera và máy tính nhúng Jetson Đóng góp mặt giáo dục và đào tạo, kinh tế - xã hội, an ninh, q́c phịng khả áp dụng đề tài: Công bố khoa học SV từ kết nghiên cứu đề tài (ghi rõ tên tạp chí có) nhận xét, đánh giá sở áp dụng kết quả nghiên cứu (nếu có): Ngày 14 tháng 10 năm 2021 SV chịu trách nhiệm SV thực đề tài (kí, họ tên) Nguyễn Hồng Hải Nam Luan van Nhận xét người hướng dẫn đóng góp khoa học SV thực đề tài: Ngày 14 tháng 10 năm 2021 Người hướng dẫn (kí, họ tên) Luan van PHẦN MỞ ĐẦU Tổng quan tình hình nghiên cứu thuộc lĩnh vực đề tài Công nghệ xe tự hành cái tên được nhắc đến từ rất lâu là trở thành tên tiên phong giới công nghệ mà các nước giới theo đuổi Bằng chứng cho thấy có rất nhiều robot tự hành được sử dụng rộng rãi chuỗi sản xuất nhà máy khiến cho công suất làm việc tăng lên đáng kể, đáp ứng kịp thời cho cầu Không dừng lại đó, có thể chứng kiến nhiều thiết bị tự vận hành ngoài đời ví dụ xe tự hành đến từ cơng ty Tesla Tesla làm bật giá trị vượt trội về cơng nghệ giới Về sau cịn rất nhiều công ty giới và theo công nghệ Ngay cả đất nước Việt Nam chúng ta, VinGroup tập đoàn FPT là đơn vị hoi tiên phọng lĩnh vực xe tự hành có nhiều sự cải tiến sản phẩm chạm gần tới giấc mơ làm làm chủ xe tự hành Việt Nam Ý tưởng về xe tự hành bắt đầu từ năm kỷ 20 mà cịn điều viễn tưởng, mơ mộng thiếu thực tế Xe tự hành xuất chương trình Disney từ năm 1958, chương trình diễn tả tương lai xe tự hành chạy đường cao tốc dải màu địa vị về mã hóa thẻ đục lỗ Chỉ đên năm 1980, máy tính cơng nghệ phát triển mạnh, cơng nghệ tự hành bắt đầu được thực hóa Nhìn chung, lĩnh vực xe tự hành được chia làm ba giai đoạn chính: Nguyên cứu nền tảng, Các thử thách vĩ đại và Thương mại hóa Ở kỉ nguyên giai đoạn đầu, số các trường đại học, số trung tâm kết hợp với công ty vận tải công ty ô tô tập trung vào hướng phát triển xe tự hành dựa sở hạ tầng cao tốc để dẫn đường nhờ vào miếng nam châm tương tác các xe khác; là sở được sử dụng cho robot xếp hàng xưởng ngày Về sau phát triển lên hướng xe tự hành ít phụ thuộc Kết quả được ghi nhận tốt nhất đến từ trường đại học Bundeswehr Munich Đức mà xe đạt đến tốc độ 100 km/h điều kiện không có các phương tiện khác Ở thời điểm thử thách vĩ đại, các trường tổ chức cố gắng đạt cách thành tựu khác đạt khoảng cách 150 dặm hay đường đô thị và đảm bảo theo luật giao thông, số tập thể nhỏ đạt được thành tích đáng khen ngợi từng bước bước vào giai đoạn thương mại hóa Thời kỳ thương mại hóa, thử thách vĩ đại trước củng cố mối quan 10 Luan van 4.1.3 Phân tích động lực học mơ hình xe tơ Khi phân tích động lực học, xem xét yếu tố có thể ảnh hưởng lên mơ hình xe thực tế ví dụ gia tốc, lực gió, góc trượt bánh xe, ma sát, gia tốc, khối lượng xe Trong trường hợp này phương trình biểu diễn chuyển động xe tọa độ (X, Y) có dạng [10]: 𝑥̈ = 𝜓̇𝑦̇ + 𝑎𝑥 𝑦̈ = −𝜓̇𝑥̇ + 𝜓̈ = (4.2a) ⋅ (𝐹𝑐,𝑓 ⋅ 𝑐𝑜𝑠 𝛿𝑓 + 𝐹𝑐,𝑟 ) (4.2b) 𝑚 ⋅ (𝑙 ⋅ 𝐹 − 𝑙𝑟 ⋅ 𝐹𝑐,𝑟 ) 𝐼𝑧 𝑓 𝑐,𝑓 (4.2c) 𝑋̇ = 𝑥̇ 𝑐𝑜𝑠 𝜓 − 𝑦̇ 𝑠𝑖𝑛 𝜓 (4.2d) 𝑌̇ = 𝑥̇ 𝑠𝑖𝑛 𝜓 + 𝑦̇ 𝑐𝑜𝑠 𝜓 (4.2e) Trong đó x y biểu thị tốc độ dọc ngang xe hệ quy chiếu, tương ứng ψ̇ biểu thị tỉ lệ góc lệch so với đích đến, m Iz biểu thị khối lượng quán tính lệch xe Fc,f Fc,r biểu thị lực lốp bên bánh trước và bánh sau tương ứng khung tọa độ chỉnh với bánh xe Lực tác dụng lên cặp bánh trước được diễn tả mơ hình lốp tuyến tính sau: 𝐹𝑐 = −𝐶𝛼𝑖 ⋅ 𝛼𝑖 (4.2f) Trong đó ⅈ ∈ {f, r}, αi là góc trượt, Cαi hệ số độ cứng bánh (trước sau) mặt đường Mơ hình khơng gian trạng thái (state space) diễn tả chủn động mơ hình xe bậc tự được biểu diễn phương trình 4.3 𝑦 𝑦̇ ⅆ { }= ⅆ𝑡 𝜓 𝜓̇ [0 − 2𝐶𝛼𝑓 + 2𝐶𝛼𝑟 𝑚𝑉𝑥 − −𝑉𝑥 − 2𝑙𝑓 𝐶𝛼𝑓 − 2𝑙𝑟 𝐶𝛼𝑟 𝐼𝑧 𝑉𝑥 0 2𝑙𝑓 𝐶𝛼𝑓 − 2𝑙𝑟 𝐶𝛼𝑟 2𝐶𝛼𝑓 𝑚𝑉𝑥 𝑚 + 2𝑙𝑓 𝐶𝛼𝑓 − 2𝑙𝑟 𝐶𝛼𝑟 𝐼𝑧 𝑉𝑥 𝛿 (4.3) 2𝑙𝑓 𝐶𝛼𝑓 ] { 𝐼𝑧 } 57 Luan van 4.2 Thiết kế điều khiển 4.2.1 Giải thuật điều khiển bánh lái cho xe tự hành Hiện tại, giải thuật điều khiển bánh lái cho xe tự hành có thể được chia làm loại: giải thuật điều khiển dựa vào hình học (Geometric Controller) giải thuật điều khiển dự đoán chủn động dựa vào mơ hình tốn (MPC – Model Predictive Controller) Các giải thuật MPC cho kết quả chính xác hình học rất phức tạp địi hỏi mơ hình hệ thống chính xác và có độ tin cậy cao Trong này, nhóm tác giả nghiên cứu về điều khiển hình học Stanley ứng dụng lên xe tự hành 4.2.2 Bộ điều khiển Pure Pursuit Theo đuổi túy (Pure Pursuit) điều khiển bám quỹ đạo dựa vào hình học Bộ điều khiển Pure Pursuit sử dụng điểm nhìn về phía trước khoảng cách cố định đường tham chiếu phía trước xe sau Xe cần đến điểm đó cách sử dụng góc lái mà cần tính tốn Hình 4.4 mơ tả điều khiển Hình 4.4 Minh họa mơ hình bợ điều khiển thuần túy (Pure Pursuit) Dựa vào định luật sin, các phương trình 4.4 mô tả điều khiển 𝑙𝑑 𝑅 = 𝑠𝑖𝑛 2𝛼 𝑠𝑖𝑛 (𝜋 − 𝛼) 𝑙𝑑 𝑅 = 𝑠𝑖𝑛 𝛼 𝑐𝑜𝑠 𝛼 𝑐𝑜𝑠 𝛼 𝑙𝑑 = 2𝑅 𝑠𝑖𝑛 𝛼 (4.4a) (4.4b) (4.4c) 58 Luan van 𝑘= 𝑠𝑖𝑛 𝛼 = 𝑅 𝑙𝑑 (4.4d) Trong đó, k là đường cong quỹ đạo, áp dụng mô hình động học xe đạp nên với 𝑅= 𝐿 𝑡𝑎𝑛 𝛿 (4.4e) Thế R tại (4.4d) Góc lái δ được định nghĩa sau: 𝛿 = 𝑎𝑟𝑐𝑡𝑎𝑛 ( 2𝐿 𝑠𝑖𝑛 𝛼 ) 𝑙𝑑 (4.4f) 4.2.3 Bộ điều khiển Stanley Bộ điều khiển Stanley là phương pháp theo dõi đường được sử dụng nhóm tham dự thử thách Darpa Grand Challenge Đại học Standford Khác với phương pháp truy đuổi túy (Pure Pursuit) sử dụng trục bánh sau sau làm điểm tham chiếu, phương pháp Stanley sử dụng trục bánh trước làm điểm tham chiếu Giải thuật xem xét cả lỗi hướng di chuyển (heading error) lỗi đường cắt ngang (cross-track error) Trong phương pháp này, lỗi đường cắt ngang (cross-track error) được định nghĩa là khoảng cách điểm gần nhất đường dẫn với trục trước xe Hình 4.5 Xe tự lái Stanley của ĐH Stanford tham dự và vô địch Darpa Grand Challenge [11] 59 Luan van Hình 4.6 Minh họa mơ hình giải tḥt Stanlley [11] Góc lái xe được xác định hình học theo cơng thức sau: 𝑘𝑒(𝑡) 𝛿 (𝑡 ) = 𝑡𝑎𝑛−1 ( 𝑣𝑓 (𝑡) ) (4.5) Trong trường hợp lỗi hướng di chuyển (heading error) lớn lấy góc lệch yaw ψ tại thời điểm t cộng với góc lái tại để xe nhanh chóng về lại vị trí mong muốn 𝑘𝑒(𝑡) 𝛿 (𝑡 ) = 𝜓(𝑡 ) + 𝑡𝑎𝑛−1 ( 𝑣𝑓 (𝑡) ) , 𝛿 (𝑡 ) ∈ [𝛿𝑚𝑖𝑛 , 𝛿𝑚𝑎𝑥 ] (4.6) Trong trường hợp lỗi đường cắt ngang lớn biểu thức 𝑡𝑎𝑛−1 ( 𝑘𝑒(𝑡) ) được 𝑘𝑆 +𝑣𝑓 (𝑡) xấp xỉ Π nhằm ổn định góc lái 𝛿 (𝑡 ) = 𝜓(𝑡 ) + 𝑡𝑎𝑛−1 ( 𝑘𝑒(𝑡) ) = 𝜓 (𝑡 ) + 𝑘𝑆 +𝑣𝑓 (𝑡) 𝛱 (4.7) 4.3 Giải thuật PID điều khiển tốc độ cho xe Nhằm giúp phương tiện di chuyển với tốc độ mong muốn ổn định thời gian ngắn nhất, PID được sử dụng để giảm sai số vận tốc tại xe vận tốc mong muốn 60 Luan van Hình 4.7 Mơ hình giải tḥt PID điều khiển tốc đợ xe Với ẋ ref vận tốc mong muốn, ẋ vận tốc tại xe k P , k I , k D số PID cho trước Gia tốc tại thời điểm ẍ ⅆes được xác định phương trình 4.8 𝑡 𝑥̈ ⅆ𝑒𝑠 = 𝑘𝑃 (𝑥̇ 𝑟𝑒𝑓 − 𝑥̇ ) + 𝑘𝐼 ∫(𝑥̇ 𝑟𝑒𝑓 − 𝑥̇ ) 𝑑𝑡 + 𝑘𝐷 𝑑(𝑥̇ 𝑟𝑒𝑓 − 𝑥̇ ) (4.8) 𝑑𝑡 4.4 Phương pháp điều khiển Hình 4.8 Phương pháp điều khiển xe tự hành 61 Luan van CHƯƠNG 5: THIẾT KẾ PHẦN CỨNG MÔ HÌNH XE TỰ HÀNH Mơ hình xe tự hành tỉ lệ 1/10 bao gồm mô hình xe điều khiển kích thước 1/10, camera Logitech C270, máy tính nhúng Jetson TX2, pin Lipo 3200mah, ESC điều tốc động không chổi than 60A, 2s, mạch driver mở rộng 16 chân servo PCA-9685 Thiết kế mơ hình có nhiều cải tiến so với thiết kế trước đó [2] ví dụ camera góc hẹp nên được đặt cao lên giúp bắt được hầu hết phần làn đường, khung xe được gá thêm lị xo giảm sốc, board mạch có ốp bảo vệ, Hình 5.1 Sơ đồ khối hoạt đợng của xe tự hành 62 Luan van Hình 5.2 Phần cứng sử dụng đề tài CHƯƠNG KẾT QUẢ NGHIÊN CỨU VÀ ĐÁNH GIÁ Mơ hình xe trải qua thử nghiệm mô nền tảng Unity trước đưa vào thực tế Dựa liệu đường mô được huấn luyện trả góc lái sau đó đưa vào điều khiển xe 6.1 Kết mô phỏng xe tự hành tảng Unity Unity game engine đa nền tảng được phát triển Unity Technologies, chủ yếu để phát triển video game cho máy tính, consoles và điện thoại Unity hỗ trợ đồ họa 2D 3D, chức được viết chủ yếu qua ngôn ngữ C# Javascript Ưu điểm Unity 3D Design không cần Render, thiết kế Map, giao diện, nhân vật từ phần mềm khác việc tối ưu hóa nội dung khả chia sẻ bản thiết kế[17] 63 Luan van Hình 6.1: Mơ xe tự hành nền tảng Unity của C̣c Đua Số - FPT Hình 6.1a: Kết mạng phân đoạn ảnh phần mềm mô Mạng phân đoạn ảnh trích xuất biên đường sau đó dùng lượng giác để trích x́t tọa đợ biên, từ đó xác định được góc lái của xe 64 Luan van Hình 6.1b: Kết phân đoạn ảnh góc lái q trình mơ 6.2 Kết mơ hình xe thực tế Mơ hình xe được thử nghiệm trục đường khu C Trường Đại học SPKT Kết quả phân đoạn ảnh trình xe chạy được thể hình dưới: Hình 6.2: Kết phân đoạn (2 lớp) từ mạng BiseNet dựa liệu huấn luyện từ bộ data Cityscapes liệu có sẵn 65 Luan van Hình 6.2a: Phân tách biên dạng đường từ kỹ thuật tách biên Canny Edge Detection Hình 6.2b: Trích x́t tọa đợ lane đường từ biên dạng lượng giác xuất góc lái để điểu khiển bánh lái 66 Luan van KẾT LUẬN VÀ KIẾN NGHI Trong này, nhóm tác giả sử dụng mạng thần kinh tích chập để thực việc phân đoạn ảnh từ liệu Camera Sau tách được biên đường từ ảnh phân đoạn, chúng tơi trích x́t tọa độ biên đường dựa vào lượng giác, từ đó suy được góc lái để điều khiển xe Để xe di chuyển mượt đường, nhóm đề xuất cảm biển GPS va IMU để giúp khả định vị bản đồ tình hình dịch COVID-19 nên kế hoạch bị hoãn lại 67 Luan van TÀI LIỆU THAM KHẢO: S Verghese, "Self-driving cars and lidar," 2017 Conference on Lasers and Electro-Optics (CLEO), 2017, pp 1-1 W Vijitkunsawat and P Chantngarm, "Comparison of Machine Learning Algorithm’s on Self-Driving Car Navigation using Nvidia Jetson Nano," 2020 17th International Conference on Electrical Engineering/Electronics, Computer, Telecommunications and Information Technology (ECTI-CON), 2020, pp 201204, doi: 10.1109/ECTI-CON49241.2020.9158311 Wikipedia contributors (2021, October 10) Global Positioning System In Wikipedia, The Free Encyclopedia Retrieved 15:34, October 13, 2021, from https://en.wikipedia.org/w/index.php?title=Global_Positioning_System&oldi d=1049134903 G Verma, C Taluja and A K Saxena, "Vision Based Detection and Classification of Disease on Rice Crops Using Convolutional Neural Network," 2019 International Conference on Cutting-edge Technologies in Engineering (IConCuTE), 2019, pp 1-4, doi: 10.1109/ICon-CuTE47290.2019.8991476 Wikipedia contributors (2021, October 10) Convolutional neural network In Wikipedia, The Free Encyclopedia Retrieved 15:38, October 13, 2021, from https://en.wikipedia.org/w/index.php?title=Convolutional_neural_network&o ldid=1049198248 N N, P Patil, S Patil and M Kokatanur, "Alpha Beta Pruned UNet - A Modified UNet Framework to Segment MRI Brain Image to Analyse the Effects of CNTNAP2 Gene towards Autism Detection," 2021 3rd International Conference on Computer Communication and the Internet (ICCCI), 2021, pp 23-26, doi: 10.1109/ICCCI51764.2021.9486783 Y Hu et al., "Fully Automatic Pediatric Echocardiography Segmentation Using Deep Convolutional Networks Based on BiSeNet," 2019 41st Annual International Conference of the IEEE Engineering in Medicine and Biology Society (EMBC), 2019, pp 6561-6564, doi: 10.1109/EMBC.2019.8856457 H Huang et al., "UNet 3+: A Full-Scale Connected UNet for Medical Image Segmentation," ICASSP 2020 - 2020 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), 2020, pp 1055-1059, doi: 10.1109/ICASSP40776.2020.9053405 H Heiser, Vehicle and Engine Technology, 2nd ed., Society of Automotive Engineers, 1999 68 Luan van 10 Kong, Jason & Pfeiffer, Mark & Schildbach, Georg & Borrelli, Francesco (2015) Kinematic and dynamic vehicle models for autonomous driving control design 1094-1099 10.1109/IVS.2015.7225830 11 Thrun S et al (2007) Stanley: The Robot That Won the DARPA Grand Challenge In: Buehler M., Iagnemma K., Singh S (eds) The 2005 DARPA Grand Challenge Springer Tracts in Advanced Robotics, vol 36 Springer, Berlin, Heidelberg https://doi.org/10.1007/978-3-540-73429-1_1 12 Gabriel M Hoffmann, Claire J Tomlin, Michael Montemerlo, Sebastian Thrun, Autonomous Automobile Trajectory Tracking for Off-Road Driving: Controller Design, Experimental Validation and Racing, 2007 American Control Conference, July 2007 13 Linda G Shapiro and George C Stockman (2001): “Computer Vision”, pp 279– 325, New Jersey, Prentice-Hall, ISBN 0-13-030796-3K Elissa, “Title of paper if known,” unpublished 14 Kentaro Wada, labelme: Image Polygonal Annotation with Python, https://github.com/wkentaro/labelme, 2016 15 R Kulkarni, S Dhavalikar and S Bangar, "Traffic Light Detection and Recognition for Self Driving Cars Using Deep Learning," 2018 Fourth International Conference on Computing Communication Control and Automation (ICCUBEA), 2018, pp 1-4, doi: 10.1109/ICCUBEA.2018.8697819 16 W Lin, W Hsu and Y Chiang, "A Combination of Feedback Control and VisionBased Deep Learning Mechanism for Guiding Self-Driving Cars," 2018 IEEE International Conference on Artificial Intelligence and Virtual Reality (AIVR), 2018, pp 262-266, doi: 10.1109/AIVR.2018.00062 17 D Ansari and G Kochar, "Simulation of Steering a Self-Driving Car Using 1) PID Controller 2) Neural Network," 2019 International Conference on Smart Systems and Inventive Technology (ICSSIT), 2019, pp 212-218, doi: 10.1109/ICSSIT46314.2019.8987865 69 Luan van PHỤ LỤC 70 Luan van Luan van ... Người hướng dẫn: PGS.TS Lê Mỹ Hà Mục tiêu đề tài: Thiết kế mơ hình xe tự lái ứng dụng thị giác máy tính kỹ thuật học sâu Tính mới sáng tạo: Sử dụng kỹ thuật phân đoạn ảnh dựa kiến... 1.3.3 Học sâu Deep learning (DL) hay học sâu là kĩ thuật học máy dạy cho máy tính cách học người bình thường, qua các ví dụ Học sâu là kĩ thuật trọng điểm giúp cho xe không người... ví dụ cụ thể cơng nghệ xe tự hành Waymo cơng ty Google phát triển, xe được tích hợp Laser Range Finder dùng để quét môi trường xung quanh hình thành nên địa hình 3-D ảo nhằm xác định