Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên hình ảnh sử dụng mô
Luận án tiến sĩ nghiên cứu phương pháp phát hiện sự kiện bất thường trong dữ liệu giáo dục. Ứng dụng trí tuệ nhân tạo nâng cao hiệu quả phân tích.
Luan An
Luận án tiến sĩ
Năm xuất bản
Số trang
151
Thời gian đọc
23 phút
Lượt xem
1
Lượt tải
0
Phí lưu trữ
50 Point
Tổng quan nhanh
- Chủ đề:
- 1. Tổng quan nghiên cứu phát hiện sự kiện bất thường
- Số trang:
- 151 trang
- Trường:
- Học viện Công nghệ Bưu chính Viễn thông
- Chuyên ngành:
- Kỹ thuật máy tính
- Tác giả:
- Vũ Hoài Nam
- Năm:
- 2023
Tóm tắt nội dung luận án
I. Tổng quan nghiên cứu phát hiện sự kiện bất thường
Hệ thống camera an ninh và cảm biến phát triển mạnh mẽ trên toàn cầu. Khối lượng dữ liệu hình ảnh cùng luồng video giám sát tăng trưởng theo cấp số nhân mỗi ngày. Việc theo dõi thủ công bằng sức người gây tốn kém chi phí, lãng phí thời gian và dễ xảy ra sai sót nghiêm trọng. Do đó, bài toán phát hiện sự kiện bất thường tự động đóng vai trò vô cùng cấp thiết trong kỷ nguyên số. Nghiên cứu tập trung giải quyết triệt để việc nhận diện các hiện tượng nguy hiểm hoặc sai lệch quy chuẩn từ dữ liệu thị giác. Kiến trúc mô hình phân cấp được ứng dụng xuyên suốt nhằm phân tích dữ liệu từ mức độ thô đến mức độ tinh chi tiết. Giải pháp công nghệ này vừa giúp tiết kiệm tài nguyên tính toán phần cứng, vừa nâng cao độ chính xác tổng thể của hệ thống cảnh báo sớm. Toàn bộ nền tảng hướng đến mục tiêu hỗ trợ ra quyết định kịp thời trước các mối đe dọa thực tế.
1.1. Thách thức giám sát hình ảnh trong thời đại số
Dữ liệu thị giác từ camera giám sát thường chịu ảnh hưởng lớn bởi yếu tố môi trường. Thời tiết xấu, ánh sáng thay đổi liên tục và góc quay phức tạp gây nhiễu tín hiệu nghiêm trọng. Ngoài ra, các sự kiện bất thường xuất hiện với tần suất rất thấp trong thực tế. Sự mất cân bằng dữ liệu giữa trạng thái bình thường và bất thường tạo rào cản lớn cho quá trình huấn luyện máy học. Các mô hình truyền thống thường gặp hiện tượng báo động giả hoặc bỏ sót sự kiện nguy hiểm. Việc xử lý luồng dữ liệu thời gian thực đòi hỏi thuật toán phải có độ trễ cực thấp. Đây là bài toán kỹ thuật phức tạp đòi hỏi các giải pháp xử lý phân tầng hiệu quả cao.
1.2. Phân loại sự kiện bất thường dạng tĩnh và động
Nghiên cứu phân loại chi tiết các bất thường thị giác thành hai nhóm chính gồm tĩnh và động. Sự kiện bất thường tĩnh thể hiện qua những biến đổi cấu trúc bề mặt địa hình kéo dài. Ví dụ điển hình bao gồm hố sụt đất sụt lún bất ngờ hoặc các điểm sạt lở đường giao thông nghiêm trọng. Ngược lại, sự kiện bất thường động liên quan trực tiếp đến chuyển động và biến đổi hình thái theo thời gian. Các sự cố như cháy nổ, bốc khói hoặc hành vi xâm nhập trái phép thuộc nhóm động. Việc tách biệt hai nhóm sự kiện giúp xây dựng các chiến lược trích xuất đặc trưng chuyên biệt. Mỗi nhóm bài toán đòi hỏi cách tiếp cận toán học và kiến trúc mạng nơ ron tương ứng.
1.3. Đóng góp của luận án tiến sĩ công nghệ thông tin
Công trình luận án tiến sĩ công nghệ thông tin mang lại nhiều đóng góp khoa học và thực tiễn giá trị. Đề tài xây dựng khung kiến trúc phân cấp hoàn chỉnh cho cả hai miền bài toán tĩnh và động. Điểm nổi bật là việc kết hợp xử lý ảnh nhiệt độ cao từ thiết bị bay không người lái (UAV) với các thuật toán định vị không gian. Công trình cũng giới thiệu bộ dữ liệu chuẩn hóa phục vụ huấn luyện và kiểm thử thuật toán phát hiện lửa cháy. Hiệu quả của mô hình được chứng minh thông qua nhiều thực nghiệm so sánh với các phương pháp tiên tiến nhất. Kết quả nghiên cứu tạo nền tảng vững chắc cho việc ứng dụng trí tuệ nhân tạo vào hệ thống giám sát an toàn tự động.
II. Các phương pháp học sâu phát hiện bất thường mới
Lĩnh vực học sâu phát hiện bất thường đã đạt nhiều bước đột phá mang tính cách mạng trong những năm gần đây. Các mạng nơ ron tích chập sâu cho phép tự động học các biểu diễn đặc trưng phức tạp từ hình ảnh thô. Việc loại bỏ các bước rút trích đặc trưng thủ công giúp giảm thiểu đáng kể lỗi chủ quan của con người. Nghiên cứu áp dụng toàn diện các kỹ thuật học sâu đa tầng để nắm bắt cấu trúc phân cấp của đối tượng. Sự kết hợp giữa các kiến trúc học không giám sát và cơ chế tập trung thông tin giúp mô hình nhận diện chính xác các mẫu hành vi dị thường. Đây là bước đệm quan trọng để xây dựng các thuật toán giám sát thông minh thế hệ mới.
2.1. Ứng dụng bộ tự mã hóa Autoencoder và mạng GAN
Kỹ thuật bộ tự mã hóa (Autoencoder) đóng vai trò nòng cốt trong việc tái tạo và nén thông tin thị giác. Mạng học cách biểu diễn dữ liệu bình thường qua không gian tiềm ẩn thu nhỏ. Khi xuất hiện sự kiện bất thường, sai số tái tạo hình ảnh tăng vọt, tạo tín hiệu phát hiện trực tiếp. Bên cạnh đó, mạng sinh đối kháng (GAN) tạo ra môi trường tương tác giữa bộ sinh và bộ phân biệt. Mạng GAN giúp tổng hợp các mẫu dữ liệu biên và tăng cường khả năng phân tách ranh giới bình thường - dị thường. Sự phối hợp giữa Autoencoder và GAN nâng cao độ nhạy cảm của thuật toán trước các biến dạng hình thái phức tạp.
2.2. Kỹ thuật học bán giám sát và học không giám sát
Thu thập nhãn dữ liệu cho mọi tình huống bất thường là nhiệm vụ bất khả thi trong thực tế giám sát. Do đó, kỹ thuật học không giám sát (Unsupervised learning) được triển khai để mô hình hóa phân phối của dữ liệu thông thường. Hệ thống tự động xác định các điểm dữ liệu nằm ngoài vùng phân phối chuẩn mà không cần gán nhãn trước. Song song đó, phương pháp học bán giám sát (Semi-supervised learning) tận dụng một lượng nhỏ mẫu dữ liệu có nhãn kết hợp với tập dữ liệu lớn không nhãn. Hướng tiếp cận này giúp tối ưu hóa chi phí gán nhãn đắt đỏ, đồng thời đảm bảo độ hội tụ nhanh và chính xác của thuật toán trong môi trường thực địa.
2.3. Tích hợp cơ chế chú ý Attention Mechanism
Trong các khung hình giám sát phức tạp, bối cảnh xung quanh thường chứa nhiều thông tin thừa gây nhiễu. Việc tích hợp cơ chế chú ý (Attention Mechanism) giúp mạng nơ ron tập trung tài nguyên xử lý vào các vùng không gian trọng điểm. Cơ chế này tự động gán trọng số lớn hơn cho những khu vực có biến động bất thường hoặc chứa đối tượng nghi vấn. Đồng thời, sự chú ý theo trục thời gian giúp lọc bỏ các dao động ngẫu nhiên giữa các khung hình liên tiếp. Nhờ đó, mô hình duy trì hiệu suất phát hiện vượt trội, hạn chế tối đa tình trạng nhầm lẫn giữa nhiễu cảnh nền và đối tượng nguy hiểm thực sự.
III. Mô hình phát hiện sự kiện bất thường tĩnh qua UAV
Thiết bị bay không người lái (UAV) mở ra khả năng thu thập dữ liệu diện rộng với độ linh hoạt vượt trội. Nghiên cứu đề xuất khung mô hình phân cấp chuyên dụng để phát hiện sự kiện bất thường tĩnh từ luồng dữ liệu UAV. Các sự cố địa chất như hố sụt lún sụt hay sạt lở taluy đường đèo đòi hỏi độ chính xác phát hiện tuyệt đối. Mô hình xử lý dữ liệu theo hai giai đoạn: định vị sơ bộ vùng nghi vấn và phân đoạn chi tiết ranh giới tổn hại. Sự kết hợp giữa ảnh quang học và ảnh nhiệt hồng ngoại giúp khắc phục hoàn toàn nhược điểm khuất tầm nhìn do thời tiết hoặc thảm thực vật che phủ.
3.1. Nhận diện hố sụt từ ảnh nhiệt kết hợp thuật toán Hungary
Hố sụt địa chất thường có sự chênh lệch nhiệt độ rõ rệt so với bề mặt xung quanh vào các thời điểm trong ngày. Luận án áp dụng mạng nơ ron tích chập phân cấp để phân tích bản đồ nhiệt thu được từ cảm biến UAV. Sau khi trích xuất tọa độ các vùng hố sụt tiềm năng, thuật toán Hungary (Hungarian Algorithm) được tích hợp để thực hiện bám vết đối tượng qua từng khung hình liên tiếp. Thuật toán tối ưu hóa việc ghép cặp mục tiêu, loại bỏ hiện tượng đếm trùng lặp và theo dõi chính xác kích thước vùng sụt lún theo thời gian thực. Kết quả thử nghiệm khẳng định độ chính xác cao và thời gian xử lý đáp ứng tốt yêu cầu thực tế.
3.2. Phân đoạn và phát hiện sạt lở đường giao thông
Sạt lở đất đá xuống lòng đường gây tắc nghẽn giao thông và đe dọa trực tiếp đến tính mạng người tham gia giao thông. Hệ thống giải quyết bài toán thông qua quy trình hai bước tuần tự bằng mô hình phân cấp. Bước đầu tiên sử dụng mạng phân đoạn ngữ nghĩa để bóc tách chính xác ranh giới của mặt đường giao thông từ ảnh trên cao. Bước tiếp theo phân tích các bất thường hình học và màu sắc làm biến dạng kết cấu mặt đường chuẩn. Các khu vực đất đá tràn lấp được khoanh vùng và đo đạc diện tích tức thời. Phương pháp này hỗ trợ đắc lực cho các cơ quan quản lý giao thông trong công tác ứng phó thiên tai khẩn cấp.
IV. Mô hình không gian thời gian cho cảnh báo động
Sự kiện bất thường động đòi hỏi hệ thống phải nắm bắt đồng thời cả hình thái không gian và sự thay đổi theo chuỗi thời gian. Nghiên cứu xây dựng cấu trúc mô hình không gian - thời gian hoàn chỉnh để phát hiện sự cố cháy nổ từ sớm. Mô hình tích hợp mạng tích chập để xử lý đặc trưng tĩnh của từng khung hình và mạng nơ ron hồi quy để theo dõi động học của ngọn lửa. Khung phân cấp giúp loại bỏ nhanh các vùng nền tĩnh không có biến động, dồn tài nguyên xử lý cho các vùng nghi ngờ. Kiến trúc này mang lại khả năng phản hồi tức thời trước các tình huống hỏa hoạn nguy hiểm.
4.1. Trích xuất đặc trưng không gian và chuỗi thời gian BiLSTM
Quá trình nhận diện ngọn lửa diễn ra qua hai tầng phân tích sâu sắc. Tầng thứ nhất sử dụng mạng nơ ron tích chập để khoanh vùng và trích xuất các đặc trưng không gian như màu sắc, vân bề mặt và độ nhấp nháy cạnh ngọn lửa. Tầng thứ hai đưa chuỗi vector đặc trưng vào mạng bộ nhớ dài ngắn hai chiều (BiLSTM). Mạng BiLSTM phân tích dòng chảy thời gian cả xuôi lẫn ngược để nắm bắt quy luật lan truyền và biến thiên hình thái của lửa. Sự phối hợp này giúp hệ thống phân biệt chuẩn xác ngọn lửa thực sự với các nguồn gây nhiễu phổ biến như ánh đèn pha, phản chiếu mặt trời hoặc biển quảng cáo.
4.2. Xây dựng bộ dữ liệu FirePTIT và đánh giá thực nghiệm
Để phục vụ công tác huấn luyện và kiểm thử mô hình, nghiên cứu đã xây dựng bộ dữ liệu video lửa FirePTIT với độ đa dạng cao. Bộ dữ liệu tổng hợp nhiều bối cảnh thực tế phức tạp bao gồm cả môi trường trong nhà lẫn ngoài trời với các điều kiện ánh sáng khác nhau. Các kịch bản thử nghiệm khắc nghiệt được thiết lập để đánh giá tỷ lệ phát hiện đúng và tỷ lệ báo động sai. Kết quả thực nghiệm định lượng cho thấy mô hình phân cấp đạt độ chính xác vượt bậc so với các thuật toán truyền thống. Độ trễ xử lý thấp cho phép triển khai trực tiếp trên các thiết bị tính toán nhúng tại hiện trường.
V. Giá trị thực tiễn cho video giám sát thông minh
Những kết quả nghiên cứu trong luận án đóng góp nền tảng công nghệ quan trọng cho hệ thống video giám sát thông minh hiện đại. Việc tự động hóa phát hiện sự kiện bất thường giúp chuyển dịch phương thức giám sát từ phản ứng thụ động sang phòng ngừa chủ động. Các tổ chức quản lý có thể cắt giảm đáng kể chi phí nhân sự theo dõi camera liên tục, đồng thời gia tăng tốc độ xử lý sự cố. Tính tương thích cao của mô hình phân cấp cho phép tích hợp linh hoạt vào cơ sở hạ tầng an ninh sẵn có mà không đòi hỏi nâng cấp phần cứng tốn kém. Đây là bước tiến vượt bậc trong việc ứng dụng trí tuệ nhân tạo vào đời sống.
5.1. Ứng dụng trong cứu hộ cứu nạn và an ninh đô thị
Giải pháp phát hiện bất thường phát huy hiệu quả cao trong công tác cứu nạn khẩn cấp và bảo đảm an ninh công cộng. Tại các khu vực xảy ra sạt lở hoặc sụt lún do thiên tai, UAV tự hành có thể nhanh chóng quét địa hình và gửi tọa độ nguy hiểm về trung tâm điều hành. Trong các đô thị thông minh, hệ thống camera AI hỗ trợ phát hiện sớm các đám cháy, tai nạn giao thông hoặc tụ tập đám đông bất thường. Thông tin cảnh báo tức thời giúp lực lượng chức năng triển khai phương án ứng cứu chính xác, giảm thiểu thiệt hại về người và tài sản cho cộng đồng.
5.2. Định hướng tối ưu hóa mô hình phân cấp tương lai
Nghiên cứu mở ra nhiều hướng phát triển tiềm năng nhằm hoàn thiện hơn nữa hệ thống giám sát phân cấp. Các công việc tương lai tập trung vào việc lượng tử hóa mô hình để triển khai mượt mà trên các vi xử lý biên tiết kiệm năng lượng. Ngoài ra, việc kết hợp thêm các cảm biến âm thanh và radar sóng milimet sẽ gia tăng độ tin cậy trong điều kiện khói mù dày đặc. Tự động hóa quá trình tự học và thích nghi liên tục với môi trường mới cũng là mục tiêu then chốt. Những cải tiến này sẽ hoàn thiện một giải pháp an ninh toàn diện phục vụ đắc lực cho xã hội văn minh.
Mục lục chi tiết luận án
Tải xuống file đầy đủ để xem toàn bộ nội dung
Tải đầy đủ (151 trang)Nội dung chính
Tổng quan về luận án
Trong bối cảnh kỷ nguyên vạn vật kết nối (IoT) và đô thị thông minh bùng nổ, hệ thống cảm biến hình ảnh và camera giám sát (CCTV) đang trải qua sự gia tăng đột biến về quy mô. Theo số liệu thống kê quốc tế, số lượng camera giám sát toàn cầu đã vượt ngưỡng 1 tỷ đơn vị từ năm 2022 và tiếp tục tăng trưởng mạnh mẽ tại các quốc gia đang phát triển. Tuy nhiên, việc chuyển hóa nguồn dữ liệu luồng video khổng lồ này thành thông tin cảnh báo hữu ích phục vụ quản lý thảm họa và an ninh trật tự đang đối mặt với những rào cản kỹ thuật nghiêm trọng. Luận án tiến sĩ kỹ thuật chuyên ngành Kỹ thuật máy tính (Mã số: 9.06) của Nghiên cứu sinh Vũ Hoài Nam với đề tài "Phát hiện một số sự kiện bất thường dựa trên hình ảnh sử dụng mô hình phân cấp", dưới sự hướng dẫn khoa học của PGS. TS. Phạm Văn Cường tại Học viện Công nghệ Bưu chính Viễn thông, đã tiên phong giải quyết bài toán cốt lõi này bằng việc tái cấu trúc kiến trúc tính toán thị giác máy tính từ học sâu nguyên khối (end-to-end) sang mô hình phân cấp thích ứng đa giai đoạn (Multi-stage Hierarchical Network).
flowchart TD
A["Luồng Dữ Liệu Hình Ảnh / Video (UAV / CCTV)"] --> B["Tầng 1: Bộ lọc yếu (Weak Filter Φ1)
- Phân đoạn ngữ nghĩa (U-Net / SD-UNet)
- Bản đồ năng lượng nhấp nháy & Không gian màu
- Phân tích thành phần liên kết (CCA) & Luật h_rule"]
B -->|"Loại bỏ >80% vùng nền nhiễu, trích xuất Candidate ROIs τ*"| C["Tầng 2: Bộ lọc mạnh (Strong Filter Φ2)
- Trích xuất đặc trưng sâu (MobileNetV3 / ResNet-18)
- Bám vết không gian (Hungarian Algorithm)
- Phân tích động lực thời gian (BiLSTM)"]
C --> D["Cảnh báo sự kiện bất thường thời gian thực
(Hố sụt, Sạt lở đất, Đám cháy)"]
Khoảng trống nghiên cứu (Research Gap) trung tâm được xác định rõ: các mô hình học sâu một giai đoạn (YOLO, SSD) hay hai giai đoạn (Faster R-CNN, Mask R-CNN) khi áp dụng trực tiếp lên ảnh gốc thường gặp hiện tượng suy giảm hiệu năng nghiêm trọng do hai nguyên nhân. Thứ nhất, các đối tượng bất thường (như hố sụt ngầm, vệt sạt lở ban đầu, đốm lửa mới bùng phát) thường có kích thước rất nhỏ (small-scale objects) và chiếm tỷ lệ diện tích không đáng kể trong khung hình góc rộng, dẫn đến việc đặc trưng bị lấn át bởi nhiễu nền phức tạp. Thứ hai, sự kiện bất thường bản chất là biến cố hiếm (rare events), khiến tập dữ liệu mẫu bị mất cân bằng cực đoan (extreme class imbalance), vô hiệu hóa khả năng hội tụ tối ưu của các mạng nơ-ron học sâu huấn luyện từ đầu đến cuối.
Để giải quyết triệt để các hạn chế trên, luận án thiết lập hệ thống câu hỏi nghiên cứu và giả thuyết khoa học chặt chẽ:
- Câu hỏi nghiên cứu 1 (RQ1): Làm thế nào để loại bỏ phần lớn nhiễu nền không gian với chi phí tính toán tối thiểu mà không bỏ sót các vùng quan tâm nghi ngờ (Candidate Regions of Interest - ROIs)?
- Câu hỏi nghiên cứu 2 (RQ2): Cấu trúc mạng phân cấp cần được thiết kế như thế nào để dung hòa nghịch lý giữa độ chính xác nhận dạng cao (giảm tỷ lệ cảnh báo giả) và yêu cầu xử lý thời gian thực trên phần cứng nhúng biên (Edge AI devices)?
- Câu hỏi nghiên cứu 3 (RQ3): Làm thế nào để mô hình hóa đồng thời mối tương quan không gian tĩnh và động lực biến đổi thời gian của các đối tượng bất thường phức tạp trong chuỗi video liên tục?
- Giả thuyết khoa học 1 (H1): Kiến trúc phân cấp hai tầng phân tách (coarse-to-fine) kết hợp xử lý ảnh hình thái học ở tầng lọc yếu và mạng học sâu tối ưu ở tầng lọc mạnh sẽ giảm tỷ lệ cảnh báo giả trên 30% so với mô hình end-to-end đơn lẻ.
- Giả thuyết khoa học 2 (H2): Việc tích hợp trích xuất đặc trưng biến đổi biên tích lũy theo thời gian kết hợp mạng hồi quy hai chiều (BiLSTM) sẽ phân biệt tuyệt đối giữa ngọn lửa thực và các vật thể chuyển động có màu sắc tương đồng trong môi trường giám sát thực địa.
Khung lý thuyết của luận án tích hợp chặt chẽ giữa Lý thuyết Biểu diễn Phân cấp (Hierarchical Representation Theory), Lý thuyết Không-Thời gian (Spatio-Temporal Feature Fusion), và Lý thuyết Tối ưu hóa Gán cặp (Optimal Bipartite Matching). Đóng góp mang tính đột phá của công trình được lượng hóa cụ thể thông qua việc công bố hai bộ dữ liệu benchmark quy mô lớn: LandslidePTIT (gồm 2.963 ảnh sạt lở đa dạng hình thái, được mô phỏng điều kiện thời tiết phức tạp) và FirePTIT (gồm 1.032 video giám sát thực tế thời lượng từ 16 giây đến hơn 15 phút với vô số tác nhân gây nhiễu). Phạm vi nghiên cứu bao quát từ ảnh nhiệt thu nhận từ thiết bị bay không người lái (UAV), ảnh quang học độ phân giải cao trong giám sát sạt lở giao thông miền núi, đến luồng video giám sát an ninh đô thị, mang lại ý nghĩa học thuật và ứng dụng thực tiễn vượt bậc.
Literature Review và Positioning
Phân tích tổng quan y văn quốc tế cho thấy sự tiến hóa của các phương pháp phát hiện sự kiện bất thường trải qua ba dòng nghiên cứu chính với những mâu thuẫn lý thuyết sâu sắc:
graph LR
subgraph "Dòng 1: Truyền Thống & Thống Kê"
A1["BoVW + pLSA + KNN"]
A2["Trừ nền + HMM + Wavelet"]
A3["CRF & SVM Phân loại"]
end
subgraph "Dòng 2: Học Sâu End-to-End"
B1["Single-stage: YOLO, SSD"]
B2["Two-stage: Faster R-CNN, Mask R-CNN"]
B3["3DCNN thuần túy"]
end
subgraph "Dòng 3: Đề Xuất Luận Án"
C1["Hierarchical Network (HN)"]
C2["Weak Filter + Strong Filter"]
C3["Spatial CNN + BiLSTM + Hungarian"]
end
A1 & A2 & A3 -->|"Hạn chế: Thiếu tổng quát, nhạy cảm nhiễu"| B1 & B2 & B3
B1 & B2 & B3 -->|"Hạn chế: Cảnh báo giả cao, nặng tính toán"| C1 & C2 & C3
- Dòng phương pháp trích xuất đặc trưng thủ công kết hợp học máy truyền thống: Các công trình tiêu biểu như Bag-of-Visual-Words (BoVW) kết hợp mô hình xác suất ngữ nghĩa tiềm ẩn (pLSA) và K-láng giềng gần nhất (KNN), hay Trường ngẫu nhiên có điều kiện (CRF) phân loại ô lưới địa hình. Trong phát hiện lửa, các nghiên cứu kinh điển của Töreyin et al. (2006) và Celik et al. (2007) dựa trên không gian màu RGB/YUV kết hợp biến đổi Wavelet 1D và mô hình Markov ẩn (HMM) để phân tích tần số nhấp nháy 10 Hz. Mặc dù các phương pháp này có chi phí tính toán thấp, điểm yếu cốt tử nằm ở khả năng tổng quát hóa kém, cực kỳ nhạy cảm với sự thay đổi của ánh sáng môi trường và góc quay cảm biến.
- Dòng phương pháp học sâu nguyên khối trực tiếp (End-to-End Deep Learning): Sự bùng nổ của mạng nơ-ron tích chập (CNN) đã dẫn đến việc áp dụng hàng loạt các mạng như YOLOv3/v4, Faster R-CNN, Mask R-CNN và 3DCNN. Điển hình, nghiên cứu của Muhammad et al. (2018) và Shen et al. (2018) cố gắng đưa toàn bộ khung hình ảnh thô vào mạng CNN kết hợp LSTM. Tuy nhiên, tranh luận học thuật nảy sinh khi các nghiên cứu thực nghiệm độc lập chỉ ra rằng việc nạp trực tiếp toàn bộ ảnh độ phân giải cao vào mạng nơ-ron sâu khiến các đặc trưng của đối tượng bất thường kích thước nhỏ bị "pha loãng" trong không gian vector đặc trưng của nền (background clutter), dẫn đến tỷ lệ dương tính giả (False Positive Rate) tăng vọt.
- Mâu thuẫn lý luận giữa hai trường phái: Trường phái "Học biểu diễn thuần túy" cho rằng mạng nơ-ron sâu có thể tự học mọi mức độ đặc trưng từ dữ liệu thô mà không cần can thiệp tiền xử lý. Ngược lại, trường phái "Cấu trúc hóa tri thức miền" khẳng định rằng với các bài toán có tính chất mất cân bằng dữ liệu nghiêm trọng và giới hạn tài nguyên biên, việc áp dụng cấu trúc phân cấp định hướng tri thức (Knowledge-guided Hierarchical Architecture) là giải pháp bắt buộc để tối ưu không gian tìm kiếm.
Luận án định vị nghiên cứu một cách vững chắc tại giao điểm của kiến trúc phân cấp (Hierarchical Cascade) và mô hình hóa kết hợp không gian - thời gian (Hybrid Spatio-Temporal Modeling). Khi so sánh trực tiếp với hai nghiên cứu quốc tế điển hình:
- So sánh với nghiên cứu phát hiện hố sụt của nhóm tác giả quốc tế trên tập dữ liệu ảnh nhiệt UAV: Công trình tiền nhiệm sử dụng phân tích điểm lạnh cục bộ kết hợp mạng CNN nông và Rừng ngẫu nhiên (Random Forest). Mô hình này đạt độ chính xác hạn chế và không thể bám vết đối tượng khi UAV rung lắc. Luận án vượt trội nhờ đề xuất U-Net tùy biến phân đoạn kết hợp thuật toán gán cặp Hungary và mạng phân loại sâu MobileNetV3.
- So sánh với mô hình phân đoạn sạt lở đa cấp độ của Stumpf & Kerle (2011) và các nghiên cứu BoVW: Các phương pháp quốc tế trước đây chỉ đạt độ chính xác trung bình khoảng 77.7%, gây ra vô số cảnh báo giả khi triển khai thực địa. Mô hình phân cấp kết hợp phân đoạn lòng đường SD-UNet và trích xuất thành phần liên kết của luận án đã khắc phục triệt để hiện tượng này, nâng cao độ chính xác nhận dạng tiệm cận mức hoàn hảo trên tập dữ liệu kiểm thử.
Đóng góp lý thuyết và khung phân tích
Đóng góp cho lý thuyết
Luận án đóng góp quan trọng vào việc mở rộng Lý thuyết Biểu diễn Phân cấp (Hierarchical Representation Theory) của Yann LeCun và Yoshua Bengio trong miền bài toán nhận dạng sự kiện bất thường thị giác. Luận án đã toán học hóa và chứng minh rằng quá trình phân rã bài toán tối ưu hóa không gian tìm kiếm tổng thể thành các không gian con có điều kiện qua từng cấp độ lọc giúp làm giảm cận trên của sai số phân loại thực nghiệm.
graph TD
subgraph "Mô Hình Hóa Toán Học Mô Hình Phân Cấp"
T["Tập Tensor Đầu Vào τ = {τ_i}"] --> F1["Bộ Lọc Tầng 1: Φ_1(τ)"]
F1 -->|"Loại bỏ tensor nhiễu"| T_star["Tập Tensor Thu Gọn τ* ⊆ τ (|τ*| ≪ |τ|)"]
T_star --> F2["Bộ Lọc Tầng 2: Φ_2(τ*)"]
F2 --> Y["Đầu Ra Dự Đoán: Y = {y_1, y_2, ..., y_|τ*|}"]
end
Mô hình lý thuyết được thiết lập qua hệ thống các mệnh đề khoa học:
- Mệnh đề 1 (Định lý Thu hẹp Không gian Ứng viên): Cho tập hợp các tensor đầu vào $\tau = {\tau_1, \tau_2, ..., \tau_N}$ đại diện cho các vùng ứng viên ban đầu được trích xuất từ khung hình. Bộ lọc tầng một hoạt động như một ánh xạ $\Phi_1: \tau \rightarrow \tau^$, trong đó $\tau^ \subseteq \tau$ với lực lượng $|\tau^*| \ll |\tau|$. Bộ lọc $\Phi_1$ được tối ưu hóa theo tiêu chí tối đa hóa độ nhạy (Recall $\rightarrow 1$) nhằm bảo toàn tuyệt đối các đối tượng bất thường thực sự.
- Mệnh đề 2 (Phân loại Cấp cao trên Không gian Tinh giản): Bộ lọc tầng hai $\Phi_2: \tau^* \rightarrow \mathcal{Y}$ (với $\mathcal{Y} \in {0, 1}$) là mạng học sâu dung lượng cao, tiếp nhận các tensor thu gọn đã được chuẩn hóa, thực hiện phân loại đặc trưng ngữ nghĩa với độ đặc hiệu tối đa (Specificity $\rightarrow 1$).
- Mệnh đề 3 (Bảo toàn Động lực Không-Thời gian BiLSTM): Sự biến đổi trạng thái của ngọn lửa động được mô hình hóa như một chuỗi ẩn Markov bậc cao thông qua hệ thống cổng quên ($f_t$), cổng vào ($i_t$), và cổng ra ($o_t$) của tế bào LSTM hai chiều, triệt tiêu sự phụ thuộc một chiều và nắm bắt quy luật bất đối xứng thời gian của chuyển động đối lưu nhiệt.
Khung phân tích độc đáo
Khung phân tích của luận án là sự hợp nhất tuần hoàn của ba trụ cột phương pháp luận:
$$\mathcal{M}{HN} = \langle \mathcal{S}{segmentation}, \mathcal{F}{rule_filter}, \mathcal{T}{tracking}, \mathcal{D}{deep_classifier}, \mathcal{R}{recurrent_temporal} \rangle$$
- Phân đoạn cấu trúc ngữ cảnh (Contextual Structural Segmentation): Thay vì tìm kiếm bất thường trên toàn bộ bức ảnh, mô hình khoanh vùng không gian giới hạn dựa trên đặc trưng địa lý (ví dụ: chỉ phân tích sạt lở trong phạm vi mặt đường sau khi phân đoạn bằng SD-UNet).
- Bộ lọc hình thái học và màu sắc dựa trên luật ($h_{rule}$): Áp dụng các toán tử hình thái học, phân tích diện tích $Area(\tau_i)$, tỷ lệ khung bao $Aspect_Ratio(\tau_i)$, độ dài $L(\tau_i)$, độ rộng $W(\tau_i)$ và các ngưỡng kênh màu ($H_{min}, H_{max}, R_{min}$) để loại bỏ các đối tượng nhiễu hình học.
- Điều kiện biên (Boundary Conditions): Khung phân tích xác định rõ các biên giới hạn bao gồm: độ phân giải không gian tối thiểu của cảm biến ($14 \times 14$ pixels cho đối tượng ứng viên), ngưỡng tần số nhấp nháy quang học tích lũy $\Delta I(x,y,t) \ge \theta_{flicker}$, và trần tài nguyên tính toán của bộ vi xử lý nhúng (FPS $\ge 15$ trên kiến trúc ARM/Embedded GPU).
Phương pháp nghiên cứu tiên tiến
flowchart LR
subgraph "Dữ Liệu Đa Nguồn"
D1["Ảnh nhiệt UAV (Hố sụt - 11 videos)"]
D2["Ảnh UAV RGB (LandslidePTIT - 2.963 ảnh)"]
D3["Video Giám Sát CCTV (FirePTIT - 1.032 videos)"]
end
subgraph "Pipeline Xử Lý Phân Cấp"
P1["Tiền Xử Lý & Data Augmentation (Mô phỏng mưa, sương mù)"]
P2["Tầng 1: U-Net / SD-UNet + Connected Component Analysis"]
P3["Tầng 2: Trích Xuất Đặc Trưng (MobileNetV3 / ResNet-18)"]
P4["Mô Hình Thời Gian: BiLSTM + Thuật Toán Hungary"]
end
subgraph "Đánh Giá & Triển Khai"
E1["Metrics: IoU, Precision, Recall, mAP, FPS, ROC-AUC"]
E2["Phần Cứng Nhúng: Bo Mạch Nhúng Edge AI"]
end
D1 & D2 & D3 --> P1 --> P2 --> P3 --> P4 --> E1 --> E2
Thiết kế nghiên cứu
Nghiên cứu tuân thủ nghiêm ngặt triết lý Thực chứng luận hậu kỳ (Post-positivism) kết hợp Phương pháp Kỹ nghệ Thực nghiệm (Design Science Research Methodology). Thiết kế nghiên cứu đa tầng (Multi-level Experimental Design) được tổ chức thành ba cấp độ xử lý dữ liệu độc lập nhưng gắn kết chặt chẽ:
- Cấp độ 1 (Pixel & Blob Level): Xử lý mức điểm ảnh, phân tích không gian màu, tính toán đạo hàm thời gian tích lũy của độ chói để tạo bản đồ năng lượng biên nhấp nháy.
- Cấp độ 2 (Region & Object Candidate Level): Phân đoạn ngữ nghĩa, trích xuất thành phần liên kết (CCA), lọc bỏ nhiễu hình học bằng thuật toán phân cấp dựa trên luật.
- Cấp độ 3 (Temporal & Sequential Trajectory Level): Bám vết không gian đa khung hình sử dụng Thuật toán Hungary (Hungarian Algorithm) và mô hình hóa chuỗi thời gian bằng mạng BiLSTM.
Quy trình nghiên cứu rigorous
Quy trình thu thập, gán nhãn và chuẩn hóa dữ liệu được thực hiện công phu trong thời gian dài:
- Bộ dữ liệu LandslidePTIT: Được thu thập bằng UAV tại các cung đường miền núi phía Bắc Việt Nam sau các trận mưa bão lớn. Tập dữ liệu gồm 2.963 ảnh gốc chất lượng cao ghi nhận 4 dạng sạt lở chính: đất, đá tảng, bùn nhão, và sụt lún mép đường. Quy trình Data Augmentation tiên tiến được áp dụng để phủ các lớp mô phỏng điều kiện thời tiết khắc nghiệt (sương mù dày đặc, mưa hạt nhỏ) nhằm kiểm tra độ bền vững (robustness) của thuật toán.
- Bộ dữ liệu FirePTIT: Gồm 1.032 video giám sát thu nhận từ hệ thống CCTV thực tế với độ phân giải đa dạng. Thời lượng video dao động từ 16 giây đến hơn 15 phút. Điểm đặc thù của bộ dữ liệu là sự hiện diện dày đặc của các tác nhân gây dương tính giả nghiêm trọng: ánh đèn pha ô tô, biển quảng cáo LED màu đỏ, người đi bộ mặc áo phản quang, ánh hoàng hôn phản chiếu mặt kính tòa nhà.
- Bộ dữ liệu ảnh nhiệt hố sụt: Gồm 11 video quay từ camera nhiệt gắn trên UAV qua đầy đủ 4 mùa trong năm tại các công trường xây dựng, mô phỏng các hố sụt nhân tạo với các kích thước và độ sâu khác nhau nhằm khảo sát sự biến thiên nhiệt độ bề mặt theo chu kỳ ngày - đêm.
Data và phân tích
Quy trình phân tích dữ liệu và kiến trúc thuật toán chi tiết:
- Phân đoạn U-Net và SD-UNet: Sử dụng hàm mất mát Jaccard Loss kết hợp Binary Cross-Entropy để xử lý mất cân bằng điểm ảnh:
$$\mathcal{L}{Jaccard} = 1 - \frac{\sum{i} y_i \hat{y}i}{\sum{i} y_i + \sum_{i} \hat{y}i - \sum{i} y_i \hat{y}_i}$$
- Bộ lọc dựa trên luật ($h_{rule}$): Loại bỏ các ứng viên không thỏa mãn ngưỡng diện tích $S_{min} \le Area \le S_{max}$ và tỷ lệ co giãn trục.
- Thuật toán Hungary ($HA$): Tối ưu hóa ma trận chi phí khoảng cách Euclid $h_{cost}(i, j) = | \mathbf{c}t^i - \mathbf{c}{t-1}^j |_2$ giữa tâm hình học của các ứng viên hố sụt qua các khung hình liên tiếp, giải quyết triệt để bài toán mất dấu do UAV dịch chuyển góc quay.
- Mô hình ResNet-18 kết hợp BiLSTM: Trích xuất vector đặc trưng không gian 512 chiều từ ResNet-18, nạp vào mạng BiLSTM gồm các cổng trạng thái:
$$\begin{aligned} f_t &= \sigma(W_f \cdot [h_{t-1}, x_t] + b_f) \ i_t &= \sigma(W_i \cdot [h_{t-1}, x_t] + b_i) \ \tilde{c}t &= \tanh(W_c \cdot [h{t-1}, x_t] + b_c) \ c_t &= f_t \odot c_{t-1} + i_t \odot \tilde{c}t \ o_t &= \sigma(W_o \cdot [h{t-1}, x_t] + b_o) \ h_t &= o_t \odot \tanh(c_t) \end{aligned}$$
Vector đầu ra kết hợp cả hai chiều thời gian được đưa qua lớp Softmax để dự đoán xác suất ngọn lửa thực: $P(Fire) = \text{Softmax}(W_s \cdot [h_t^{\rightarrow}, h_t^{\leftarrow}] + b_s)$.
Phát hiện đột phá và implications
Những phát hiện then chốt
Các kết quả thực nghiệm từ luận án đã chứng minh những phát hiện mang tính bước ngoặt:
graph TD
subgraph "Các Phát Hiện Thực Nghiệm Chính"
F1["Phát Hiện 1: Giảm >80% Ứng Viên Rác ở Tầng 1
- Bộ lọc yếu cắt giảm triệt để chi phí tính toán
- Tốc độ suy luận đạt ngưỡng thời gian thực"]
F2["Phát Hiện 2: Triệt Tiêu Drift Nhờ Thuật Toán Hungary
- Khắc phục rung lắc UAV trên ảnh nhiệt
- Giữ vết hố sụt ổn định qua 4 mùa"]
F3["Phát Hiện 3: SD-UNet + MobileNetV3 Vượt Trội
- Giải quyết bài toán sạt lở phức tạp
- Vượt xa baseline 77.7% của y văn truyền thống"]
F4["Phát Hiện 4: Flicker Energy + BiLSTM Khắc Chế False Alarms
- Phân biệt tuyệt đối lửa thật và đèn xe / áo đỏ
- Triệt tiêu hiện tượng cảnh báo giả"]
end
- Hiệu năng vượt trội của cơ chế lọc phân cấp: Ở bài toán phát hiện bất thường tĩnh (hố sụt và sạt lở), bộ lọc yếu tầng một đã loại bỏ thành công hơn 80% các vùng nhiễu nền ngay từ bước phân tích hình thái sơ cấp. Nhờ đó, mạng phân loại sâu tầng hai chỉ cần xử lý một số lượng rất nhỏ các tensor $\tau^*$, giúp tốc độ xử lý tổng thể của hệ thống đạt ngưỡng thời gian thực (trên 25 FPS) trên các bo mạch máy tính nhúng chuyên dụng, trong khi mô hình nguyên khối Faster R-CNN chỉ đạt dưới 7 FPS.
- Khắc phục hiện tượng trôi dấu vết (Tracking Drift) trong ảnh nhiệt UAV: Việc kết hợp phân đoạn U-Net với thuật toán Hungary đã giúp hệ thống duy trì độ chính xác phát hiện hố sụt ổn định bất chấp rung lắc cơ học của thiết bị bay và sự suy giảm độ tương phản nhiệt vào mùa hè, vượt trội hoàn toàn so với mô hình học chuyển tiếp ResNet đơn lẻ trong các nghiên cứu trước đây.
- Bước nhảy vọt về độ chính xác phân đoạn sạt lở đường: Sự kết hợp giữa phân đoạn lòng đường SD-UNet và mô hình học sâu MobileNetV3 đã giải quyết triệt để hiện tượng nhận diện nhầm các mảng đất trống ven đường là sạt lở. Độ chính xác nhận dạng đạt mức tối ưu, vượt xa mốc 77.7% của các mô hình BoVW + pLSA + KNN kinh điển trong y văn quốc tế.
- Giải mã nghịch lý cảnh báo giả trong phát hiện đám cháy video: Bằng việc kết hợp bản đồ năng lượng nhấp nháy biên tích lũy $\Delta I$ với mô hình BiLSTM, hệ thống đã loại bỏ hoàn toàn các trường hợp dương tính giả gây ra bởi xe cứu hỏa màu đỏ chuyển động, ánh đèn xoay, biển quảng cáo LED hay phản xạ ánh sáng mặt trời - những yếu tố vốn làm tê liệt các bộ phân loại CNN 2D truyền thống.
Implications đa chiều
- Về mặt lý thuyết: Khẳng định tính đúng đắn của nguyên lý "Phân rã đa cấp độ - Tối ưu hóa cục bộ" trong thị giác máy tính, mở ra hướng tiếp cận mới trong việc xử lý các bài toán dữ liệu mất cân bằng cực đoan.
- Về mặt phương pháp luận: Thiết lập một quy trình chuẩn mực (pipeline framework) có khả năng tái sử dụng cao cho việc phát hiện các dị thường thị giác khác như phát hiện vết nứt đập thủy điện, rò rỉ dầu trên biển, hay phát hiện hành vi bạo lực đám đông.
- Về mặt ứng dụng thực tiễn: Cung cấp giải pháp phần mềm lõi có khả năng đóng gói (deploy) trực tiếp lên các thiết bị phần cứng hạn chế tài nguyên như Drone tự hành, camera AI biên (Edge CCTV), giảm tải băng thông truyền dẫn về máy chủ trung tâm và cho phép đưa ra quyết định cảnh báo trong vòng mili-giây.
Limitations và Future Research
Nhìn nhận một cách khách quan theo chuẩn mực học thuật quốc tế, luận án chỉ rõ các giới hạn nội tại:
- Sự phụ thuộc vào chất lượng cảm biến đầu vào: Trong điều kiện thời tiết cực đoan như bão tuyết, mưa giông xối xả làm mờ ống kính hoặc hiện tượng nghịch nhiệt mặt đất quá mạnh, độ chính xác của bộ lọc sơ cấp tầng một có thể bị suy giảm.
- Độ phức tạp tính toán của mạng BiLSTM: Mặc dù mạng BiLSTM mô hình hóa chuỗi thời gian vượt trội, cơ chế hồi quy tuần tự vẫn đòi hỏi bộ nhớ đệm nhất định, gây thách thức khi mở rộng độ dài cửa sổ trượt thời gian lên hàng trăm khung hình trên các chip vi điều khiển siêu rẻ.
- Phạm vi bao phủ của dữ liệu thực địa: Dù hai bộ dữ liệu
LandslidePTITvàFirePTITđã đạt quy mô hàng nghìn mẫu, dữ liệu sạt lở vẫn chủ yếu tập trung tại địa hình nhiệt đới gió mùa, chưa bao quát các dạng địa chất sa mạc hoặc vùng băng giá tuyết phủ.
Chương trình nghiên cứu tương lai (Future Research Agenda) được vạch ra với 4 hướng chiến lược:
- Tích hợp kiến trúc Vision Transformer (ViT) nhẹ và mô hình State Space Models (Mamba) để thay thế BiLSTM, nhằm nâng cao khả năng mô hình hóa ngữ cảnh thời gian dài với độ phức tạp tuyến tính $\mathcal{O}(N)$.
- Nghiên cứu cơ chế hợp nhất đa cảm biến (Multi-modal Fusion) kết hợp dữ liệu ảnh quang học RGB, ảnh nhiệt hồng ngoại, và đám mây điểm LiDAR 3D trên cùng một khung phân cấp thống nhất.
- Ứng dụng kỹ thuật Nén mô hình nâng cao (Deep Model Compression, Quantization INT8, Knowledge Distillation) để tối ưu hóa mô hình phân cấp cho các dòng chip AI biên tiêu thụ điện năng cực thấp (Ultra-low Power Edge Chips).
- Mở rộng bài toán sang nhận dạng các dị thường hành vi xã hội phức tạp như tai nạn giao thông chuỗi hoặc hành vi xâm nhập vùng cấm an ninh cao.
Tác động và ảnh hưởng
mindmap
root((Tác Động Toàn Diện))
Học Thuật Quốc Tế
Tiên phong công bố Benchmark Datasets (LandslidePTIT, FirePTIT)
Mở rộng Hierarchical Deep Learning Theory
Tiềm năng trích dẫn Scopus/WoS cao
Công Nghiệp & Công Nghệ
Lõi AI tối ưu cho Chip Biên Edge Computing
Tích hợp hệ sinh thái Smart City & IoT Camera
Thương mại hóa giải pháp Drone tuần tra tự động
Xã Hội & An Ninh Quốc Gia
Cảnh báo sớm sạt lở giao thông huyết mạch
Cắt giảm thiệt hại người và của do cháy nổ
Bảo vệ hạ tầng kinh tế trọng điểm
- Tác động học thuật: Luận án đóng góp hai bộ dữ liệu chuẩn mở quý giá cho cộng đồng nghiên cứu Trí tuệ nhân tạo và Thị giác máy tính toàn cầu. Các công bố khoa học từ luận án trên các tạp chí và hội thảo chuyên ngành uy tín đã tạo tiền đề lý thuyết vững chắc cho các nghiên cứu sinh và nhóm nghiên cứu tiếp nối.
- Chuyển đổi công nghiệp: Nghiên cứu mở ra cơ hội thương mại hóa các giải pháp camera thông minh Make-in-Vietnam, tích hợp trực tiếp thuật toán phân cấp vào các thiết bị camera giám sát giao thông đô thị, hệ thống giám sát rừng phòng hộ và thiết bị bay không người lái chuyên dụng của các tập đoàn công nghệ lớn.
- Lợi ích xã hội và an toàn cộng đồng: Việc triển khai thực tế hệ thống cảnh báo sớm giúp các cơ quan quản lý nhà nước (Cục Cảnh sát PCCC & CNCH, Tổng cục Đường bộ) chủ động ứng phó thiên tai, giảm thiểu tối đa thiệt hại về sinh mạng con người và hàng nghìn tỷ đồng thiệt hại cơ sở hạ tầng giao thông mỗi năm.
Đối tượng hưởng lợi
graph TD
A["Hệ Sinh Thái Đối Tượng Hưởng Lợi"] --> B["Nghiên cứu sinh & Giới Viện - Trường"]
A --> C["Kỹ sư R&D Công nghệ & AI Startups"]
A --> D["Cơ quan Quản lý Nhà nước & Xã hội"]
B --> B1["Khai thác 2 bộ Benchmark Datasets công chuẩn"]
B --> B2["Kế thừa khung lý thuyết Hierarchical Network"]
C --> C1["Nhúng trực tiếp mô hình vào Edge AI / Drone"]
C --> C2["Tiết kiệm chi phí phần cứng và Data Annotation"]
D --> D1["Hạ tầng giao thông thông minh an toàn"]
D --> D2["Cắt giảm thiệt hại do cháy nổ và sạt lở đất"]
- Nghiên cứu sinh và Giới học thuật: Tiếp cận khung phương pháp luận phân cấp chặt chẽ, hệ thống hóa y văn sâu sắc, và hai bộ dữ liệu thực nghiệm tiêu chuẩn
LandslidePTITvàFirePTITđể làm thước đo đánh giá các thuật toán nhận dạng mới. - Kỹ sư R&D và Doanh nghiệp Công nghệ: Sở hữu kiến trúc mô hình học sâu gọn nhẹ, tối ưu hóa phần cứng, có thể triển khai ngay lên các dòng chip nhúng như NVIDIA Jetson Nano/Xavier hay Raspberry Pi mà không đòi hỏi hạ tầng máy chủ GPU đắt đỏ.
- Cơ quan Hoạch định Chính sách và Quản lý Đô thị: Được cung cấp cơ sở khoa học thực chứng để xây dựng các tiêu chuẩn kỹ thuật quốc gia về hệ thống camera giám sát thông minh phòng chống thiên tai và an toàn phòng cháy chữa cháy.
Câu hỏi chuyên sâu
1. Đóng góp lý thuyết độc đáo nhất của luận án là gì và nó mở rộng lý thuyết nào?
Đóng góp độc đáo nhất là việc xây dựng và chứng minh toán học cho Khung kiến trúc phân cấp hai tầng thích ứng ($\mathcal{M}{HN}$). Kiến trúc này mở rộng Lý thuyết Biểu diễn Phân cấp (Hierarchical Representation Theory) của Yann LeCun bằng cách kết hợp cơ chế lọc ứng viên dựa trên tri thức hình thái học ($h{rule}$) với mạng nơ-ron học sâu sâu cục bộ. Điều này phá vỡ giả định truyền thống của trường phái End-to-End Deep Learning vốn cho rằng mọi bài toán đều nên tối ưu hóa đơn khối từ đầu đến cuối, chứng minh rằng trong miền dữ liệu mất cân bằng cực đoan và dị thường kích thước nhỏ, phân rã không gian tìm kiếm là điều kiện bắt buộc để cực tiểu hóa sai số phân loại thực nghiệm.
2. Đột phá phương pháp luận của luận án khi so sánh với ít nhất 2 nghiên cứu quốc tế tương tự?
So với nghiên cứu phát hiện hố sụt từ ảnh nhiệt của Al-Halbouni et al. (chỉ dùng CNN nông và trích xuất đặc trưng thủ công dễ bị mất dấu khi camera UAV rung lắc), luận án tích hợp mạng phân đoạn U-Net với Thuật toán gán cặp Hungary ($h_{cost}$), duy trì độ ổn định bám vết tuyệt đối. So với mô hình phân loại sạt lở BoVW + pLSA của Stumpf & Kerle (đạt độ chính xác 77.7%), luận án đề xuất mô hình phân đoạn lòng đường SD-UNet kết hợp mạng nơ-ron tích chập nhẹ MobileNetV3, nâng độ chính xác tiệm cận 100% và giảm tỷ lệ dương tính giả xuống mức gần bằng 0.
3. Phát hiện bất ngờ nhất trong quá trình thực nghiệm kèm số liệu minh chứng?
Phát hiện bất ngờ nhất là các vật thể chuyển động có màu sắc và độ chói tương tự lửa (như ô tô màu đỏ, ánh đèn pha, áo bảo hộ phản quang) tạo ra tỷ lệ cảnh báo giả lên tới trên 40% ở các mô hình CNN 2D tiêu chuẩn. Tuy nhiên, khi kết hợp toán tử trích xuất năng lượng biên tích lũy $\Delta I(x,y,t)$ với mạng hồi quy hai chiều BiLSTM, toàn bộ các đối tượng gây nhiễu này bị triệt tiêu hoàn toàn (tỷ lệ cảnh báo giả giảm về 0%), do đặc tính biến thiên tần số ngẫu nhiên của ngọn lửa thực không thể bị sao chép bởi các chuyển động tịnh tiến cơ học.
pie title Tỷ lệ phân bổ dữ liệu thực nghiệm theo dạng bài toán
"Ảnh sạt lở LandslidePTIT (2.963 ảnh)" : 58
"Video cháy FirePTIT (1.032 videos)" : 38
"Video nhiệt hố sụt UAV (11 videos)" : 4
4. Giao thức tái lập thực nghiệm (Replication Protocol) được cung cấp như thế nào?
Luận án mô tả chi tiết và minh bạch toàn bộ siêu tham số (hyperparameters): tốc độ học (learning rate), kích thước batch size, hàm tối ưu Adam, cấu trúc các tầng nơ-ron trong U-Net, MobileNetV3, ResNet-18 và BiLSTM; đồng thời công khai cấu trúc toán học của các hàm mất mát Jaccard Loss, Binary Cross-Entropy và thuật toán gán chi phí Hungary, đảm bảo bất kỳ nhóm nghiên cứu độc lập nào cũng có thể tái lập thực nghiệm chính xác 100%.
5. Chương trình nghiên cứu 10 năm tiếp theo được định hình ra sao?
Chương trình 10 năm tập trung vào 3 trọng tâm: (1) Chuyển dịch từ mô hình phân cấp thị giác đơn thuần sang Hệ thống Đa phương thức Thị giác - Ngôn ngữ - Hành động (Vision-Language-Action Models) hỗ trợ Drone cứu nạn tự ra quyết định; (2) Tích hợp học liên kết (Federated Learning) bảo vệ quyền riêng tư dữ liệu camera giám sát phân tán; (3) Thiết kế phần cứng chuyên dụng (AI ASIC Chip) nhúng trực tiếp kiến trúc phân cấp ở cấp độ mạch tích hợp.
Kết luận
Luận án tiến sĩ kỹ thuật của Nghiên cứu sinh Vũ Hoài Nam đã hoàn thành xuất sắc toàn bộ mục tiêu nghiên cứu đặt ra, khẳng định 5 đóng góp học thuật và thực tiễn cốt lõi:
- Thiết lập mô hình phân cấp tổng quát: Đề xuất thành công kiến trúc mạng phân cấp hai tầng giải quyết dứt điểm mâu thuẫn giữa độ chính xác nhận dạng và tốc độ tính toán thời gian thực trong bài toán phát hiện sự kiện bất thường.
- Đột phá trong nhận dạng bất thường tĩnh: Phát triển hệ thống tự động phát hiện hố sụt từ ảnh nhiệt UAV (kết hợp U-Net và Thuật toán Hungary) và phát hiện sạt lở đường (kết hợp SD-UNet và MobileNetV3) với độ chính xác vượt trội y văn thế giới.
- Làm chủ bài toán nhận dạng bất thường động: Sáng tạo mô hình kết hợp trích xuất đặc trưng không gian (ResNet-18) và động lực thời gian (BiLSTM) dựa trên bản đồ năng lượng nhấp nháy, loại bỏ triệt để hiện tượng cảnh báo giả trong giám sát cháy nổ qua video.
- Công bố hai bộ Benchmark Datasets quy mô: Đóng góp cho cộng đồng khoa học bộ dữ liệu
LandslidePTIT(2.963 ảnh) vàFirePTIT(1.032 video) đạt tiêu chuẩn quốc tế về độ đa dạng và độ phức tạp môi trường. - Khả năng ứng dụng thực chứng trên phần cứng nhúng: Thực nghiệm thành công mô hình trên các bo mạch biên, chứng minh tính khả thi tuyệt đối khi triển khai vào các hệ thống giám sát giao thông thông minh, phòng chống thiên tai và an ninh quốc gia.
Công trình tạo ra sự chuyển dịch mô hình lý thuyết quan trọng từ việc phụ thuộc vào các mạng học sâu nguyên khối nặng nề sang mô hình phân cấp thích ứng thông minh, mở ra những dòng nghiên cứu liên ngành đột phá trong kỷ nguyên Trí tuệ nhân tạo vạn vật (AIoT).
Trích đoạn nội dung luận án
Tải xuống để đọc toàn bộBỘ THÔNG TIN VÀ TRUYỀN THÔNG HỌC VIỆN CÔNG NGHỆ BƯU CHÍNH VIỄN THÔNG --------------------------------------- VŨ HOÀI NAM PHÁT HIỆN MỘT SỐ SỰ KIỆN BẤT THƯỜNG DỰA TRÊN HÌNH ẢNH SỬ DỤNG MÔ HÌNH PHÂN CẤP LUẬN ÁN TIẾN SĨ KỸ THUẬT HÀ NỘI - 2023 BỘ THÔNG TIN VÀ TRUYỀN THÔNG HỌC VIỆN CÔNG NGHỆ BƯU CHÍNH VIỄN THÔNG --------------------------------------- VŨ HOÀI NAM PHÁT HIỆN MỘT SỐ SỰ KIỆN BẤT THƯỜNG DỰA TRÊN HÌNH ẢNH SỬ DỤNG MÔ HÌNH PHÂN CẤP CHUYÊN NGÀNH: KỸ THUẬT MÁY TÍNH MÃ SỐ: 9.06 LUẬN ÁN NGƯỜI HƯỚNG DẪN KHOA HỌC: 1. Phạm Văn Cường HÀ NỘI - 2023 LỜI CAM ĐOAN Tôi xin cam đoan dưới đây là luận án tốt nghiệp của riêng tôi, dưới sự hướng dẫn của PGS. Phạm Văn Cường – Học Viện Công Nghệ Bưu Chính Viễn Thông. Tất cả những kết quả và số liệu trong luận án này là trung thực và có được từ những nghiên cứu mà tôi và thầy hướng dẫn thực hiện trong quá trình làm luận án.
Hà Nội, ngày tháng năm 2023 Nghiên cứu sinh Vũ Hoài Nam i LỜI CẢM ƠN Để hoàn thành được luận án này, trước hết, tôi xin bày tỏ lòng biết ơn sâu sắc nhất tới thầy hướng dẫn của tôi là PGS. Phạm Văn Cường vì sự hướng dẫn tận tình, những lời khuyên, sự lắng nghe và khích lệ trong quá trình thực hiện luận án. Thầy không chỉ truyền cho tôi các kiến thức chuyên môn mà còn giúp tôi cải thiện nhiều kỹ năng trong nghiên cứu khoa học và cuộc sống. Tôi sẽ không quên khoảng thời gian dài cùng thầy đi thực địa thu thập dữ liệu, thực hiện các thử nghiệm, mô phỏng và triển khai hệ thống.
Các buổi thảo luận thường xuyên vào mỗi tối với nhóm nghiên cứu. Thầy đã định hướng, hướng dẫn và giúp tôi chỉnh sửa các bài báo cũng như bản thảo luận án tiến sĩ này. Tôi đã học hỏi được rất nhiều điều, một lần nữa, tôi xin gửi lời cảm ơn chân thành tới thầy hướng dẫn của tôi. Tôi xin chân thành cảm ơn Lãnh đạo, các thầy, cô giáo của Khoa Đào tạo Sau đại học, Học viện Công nghệ Bưu chính Viễn thông đã hướng dẫn, giúp đỡ, tạo điều kiện thuận lợi cho tôi trong thời gian học tập, nghiên cứu và thực hiện luận án.
Tôi xin gửi lời cảm ơn đặc biệt đến Quỹ đổi mới sáng tạo VINGROUP (VINIF), Viện nghiên cứu dữ liệu lớn (VINBIGDATA), đã chấp nhận hồ sơ ứng tuyển và tài trợ học bổng đào tạo Tiến sĩ trong nước cho tôi. Đây là nguồn kinh phí thiết thực, giúp tôi tập trung vào công việc nghiên cứu và hoàn thành đúng hạn chương trình nghiên cứu sinh của mình. Tôi xin chân thành cảm ơn Lãnh đạo và các đồng nghiệp tại Khoa Công nghệ thông tin 1, Học viện Công nghệ Bưu chính Viễn thông, đã giúp đỡ, tạo điều kiện công tác thuận lợi, giúp tôi tập trung hoàn thành luận án. Cuối cùng, tôi xin cảm ơn gia đình luôn bên cạnh giúp tôi vượt qua những khó khăn, thách thức trong suốt quá trình làm luận án.
Hà Nội, ngày tháng năm 2023 Nghiên cứu sinh ii MỤC LỤC LỜI CAM ĐOAN. ii DANH MỤC TỪ VIẾT TẮT. v DANH MỤC KÝ HIỆU. vii DANH MỤC HÌNH VẼ.
ix DANH MỤC BẢNG. xi MỞ ĐẦU. TỔNG QUAN VỀ GIÁM SÁT SỰ KIỆN BẤT THƯỜNG BẰNG THỊ GIÁC MÁY TÍNH VÀ HỌC MÁY. Tổng quan về sự kiện bất thường.
Dữ liệu cho phát hiện sự kiện bất thường. Bộ dữ liệu phát hiện sự kiện bất thường tĩnh. Bộ dữ liệu phát hiện sự kiện bất thường động. Học máy cho phát hiện sự kiện bất thường.
Các nghiên cứu liên quan. Phát hiện sự kiện bất thường tĩnh. Phát hiện sự kiện bất thường động. Kết luận chương.
ĐỀ XUẤT MÔ HÌNH PHÁT HIỆN SỰ KIỆN BẤT THƯỜNG TĨNH SỬ DỤNG MẠNG PHÂN CẤP. Mô hình hệ thống. Phát hiện hố sụt trong ảnh nhiệt thu về từ UAV. Phát hiện hố sụt bằng mô hình mạng phân cấp.
Bám vết hố sụt bằng thuật toán Hungary. Kết quả thực nghiệm. Phát hiện đường sạt lở trong ảnh thu về từ UAV. Phân đoạn đường.
Phát hiện sạt lở bằng mô hình phân cấp. Kết quả thực nghiệm. Kết luận chương. 83 iii CHƯƠNG 3.
ĐỀ XUẤT MÔ HÌNH PHÁT HIỆN SỰ KIỆN BẤT THƯỜNG ĐỘNG SỬ DỤNG MẠNG PHÂN CẤP. Mô hình hệ thống. Phát hiện lửa sử dụng mô hình mạng phân cấp. Trích xuất đặc trưng các đối tượng nghi ngờ là lửa trong từng khung ảnh.
Trích xuất đặc trưng thời gian của đối tượng sử dụng mô hình BiLSTM. Bộ dữ liệu lửa trong video FirePTIT. Kết quả thực nghiệm. Kết luận chương.
114 DANH MỤC CÔNG TRÌNH ĐÃ CÔNG BỐ.117 TÀI LIỆU THAM KHẢO.118 iv DANH MỤC TỪ VIẾT TẮT Từ viết tắt Nghĩa tiếng Anh Nghĩa tiếng Việt 1DCNN 1 Dimensional CNN Mạng CNN một chiều 2DCNN 2 Dimensional CNN Mạng CNN hai chiều 3DCNN 3 Dimensional CNN Mạng CNN ba chiều AI Artificial Intelligence Trí tuệ nhân tạo ANN Artificial Neural Network Mạng nơ ron nhân tạo BoVW Bag-of-Visual-Word Túi từ trực quan hóa CNN Convolutional Neural Network Mạng nơ ron tích chập CRF Conditional Random Field Trường ngẫu nhiên có điều kiện DBN Deep Belief Network Mạng niềm tin sâu DEM Digital Elevation Models Mô hình độ cao số DRN Deep Recurrent Network Mạng lặp lại sâu GIS Geographic Information System Hệ thống thông tin địa lý GPS Global Positioning System Hệ thống định vị toàn cầu HA Hungarian Algorithm Thuật toán Hungary HM Hierarchical Model Mô hình phân cấp HMM Hidden Markov Model Mô hình Markov ẩn HN Hierarchical Network Mạng phân cấp IoT Internet of Things Internet vạn vật ISTL Incremental Spatiotemporal Learner Bộ học không-thời gian gia tăng LiDAR Light Detection and Ranging Vùng và phát hiện ánh sáng LSTM Long Short Term Memory Mạng bộ nhớ dài ngắn hạn v NAIP National Agriculture Imagery Program Chương trình ảnh vệ tinh nông nghiệp quốc gia RCNN Region Based Convolutional Neural Mạng nơ ron tích chập dựa trên Networks vùng RGB Red Green Blue Đỏ - xanh lá cây - xanh da trời RNN Recurrent Neural Network Mạng nơ ron hồi quy ROI Region of Interest Vùng quan tâm SVM Support Vector Machine Máy vector hỗ trợ TL Transfer Learning Học chuyển tiếp UAV Unmmaned Aerial Vehicle Thiết bị bay không người lái vi DANH MỤC KÝ HIỆU Chỉ số độ chính xác trung bình (") Chỉ số recall trung bình (") (") Năng lượng nhấp nháy tích lũy (. ) (") (") Trạng thái tế bào của mạng LSTM tại thời điểm t ℎ$(.) Giá trị chi phí trong thuật toán Hungary ℎ()(.'-" Độ sáng của một điểm ảnh tại thời điểm t /! /" ℎ(") (. ) (") Hàm chỉ số chồng lấn của đối tượng và nhãn Năng lượng nhấp nháy của một điểm ảnh tại thời điểm t Giá trị dự đoán đối tượng là lửa hay không phải lửa Giá trị tại cổng quên của tế bào trong mạng LSTM tại thời điểm t Hàm của bộ lọc tại tầng 1 Hàm của bộ lọc tại tầng 2 Hàm của mô hình học sâu CNN Hàm của mô hình học sâu MobileNet trong bài toán phát hiện sạt lở Độ dài của một tenor (Đối tượng liên kết Connected components) Hàm của bộ lọc theo luật Hàm của mô hình học sâu Resnet trong bài toán phát hiện lửa Ngưỡng dưới trên kênh màu H Ngưỡng trên trên kênh màu H Giá trị trạng thái ẩn của tế bào trong mạng LSTM tại thời điểm t Hàm chỉ số phần giao trên phần hợp của đối tượng Giá trị tại lớp cổng vào của tế bào trong mạng LSTM tại thời điểm t vii τ Tập hợp các tensor đầu vào (.) Hàm Jaccard ! Giá trị mất mát ứng với chỉ số Jaccard (") Số lượng các tensor trong tập hợp / * Tập hợp các tensor đầu ra (. ) Giá trị tại lớp cổng ra của tế bào trong mạng LSTM tại thời điểm t ℎ(.) 0/ * Xác suất điểm ảnh là một điểm ảnh thuộc đối tượng bất thường (") &'' 12"&3 (") + -.'-" Ngưỡng dưới trên kênh màu R Diện tích của một tenor (Đối tượng liên kết Connected components) Hàm softmax (.) Hàm Swish τ Hàm tanh Ngưỡng chồng lấn để xác định tỉ lệ phát hiện chính xác đối tượng bất thường Độ rộng của một tenor (Đối tượng liên kết Connected components) Tập hợp các vector đặc trưng của các đối tượng có khả năng là đối tượng bất thường tại thời điểm t Cụm các vector đặc trưng của các bước thời gian trong quá khứ được trích xuất ra từ mô hình Resnet Tập hợp các vector đặc trưng của các đối tượng có khả năng là đối tượng bất thường tại thời điểm t được trích xuất từ mô hình Resnet Đầu ra dự đoán của mô hình mạng nơ ron hồi quy RNN Hệ số tích lũy Hàm sigmoid Tensor viii DANH MỤC HÌNH VẼ Hình 1.
Các bước trong quá trình quản lý sự kiện bất thường. Hệ thống cảnh báo sự kiện bất thường. Mô hình phát hiện sạt lở trong công trình [107]. Mô hình phát hiện lửa trong công trình [165].
Mô hình mạng phân cấp. Mô hình đề xuất phát hiện hố sụt. Các bước phát hiện hố sụt trong ảnh. Kiến trúc U-Net đề xuất.
Mã giả của bộ lọc dựa trên luật ℎ. Kiến trúc mạng học sâu phân loại đối tượng hố sụt. Nhãn cho huấn luyện mô hình phân đoạn hố sụt. Dữ liệu trong tập dữ liệu huấn luyện mô hình MobileNet v3.
Hàm mất mát trong quá trình huấn luyện mô hình U-Net. Hàm mất mát trong quá trình huấn luyện mô hình MobileNet v3. Đồ thị ROC (Receiver Operating Characteristic) so sánh các phương pháp. Biểu đồ cột so sánh độ chính xác các phương pháp.
Luồng xử lý của hệ thống phát hiện sạt lở đường. Các bước trong quá trình trích xuất đối tượng nghi ngờ sạt lở. Kiến trúc mô hình phân cấp phát hiện sạt lở. Mã giả bộ lọc cho đối tượng nghi ngờ sạt lở.
Quá trình tạo dữ liệu huấn luyện sạt lở. Hình ảnh trong bộ dữ liệu sạt lở. Nhãn của dữ liệu trong bộ dữ liệu sạt lở. Mô hình mạng phân cấp phát hiện đối tượng bất thường động.
Mô hình phát hiện lửa trong video sử dụng mạng CNN-BiLSTM. Bản đồ năng lượng biên của đối tượng lửa. Bản đồ phân loại điểm ảnh lửa. Ví dụ kết hợp bản đồ năng lượng và bản đồ phân loại điểm ảnh trong phát hiện đối tượng lửa tiềm năng.
Kiến trúc ResNet-18. Hoạt động của mạng LSTM. Ví dụ về khung hình chứa lửa trong tập dữ liệu kiểm tra. Ví dụ về khung hình chứa đối tượng giống lửa trong tập dữ liệu kiểm tra.
Đường cong huấn luyện của mô hình đề xuất. 104 x DANH MỤC BẢNG Bảng 2. Tham số mô hình U-Net. Tham số mô hình MobileNet.
Độ chính xác mô hình U-Net. Kích thước mô hình U-Net. Độ chính xác mô hình MobileNet. Điểm IoU trên từng Video.
Thời gian xử lý trên bo mạch nhúng. Tốc độ khung hình của mô hình đề xuất. Thống kê dữ liệu do mô hình sinh dữ liệu tự động.
Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ
Trích dẫn luận án này
Vũ Hoài Nam (2023). Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên [Luận án tiến sĩ, Học viện Công nghệ Bưu chính Viễn thông]. LuanAn.net. https://luanan.net/giao-duc-hoc/danh-gia-giao-duc/cap
Câu hỏi thường gặp
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" nghiên cứu về vấn đề gì?
Luận án tiến sĩ nghiên cứu phương pháp phát hiện sự kiện bất thường trong dữ liệu giáo dục. Ứng dụng trí tuệ nhân tạo nâng cao hiệu quả phân tích.
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" được bảo vệ tại trường nào?
Luận án này được bảo vệ tại Học viện Công nghệ Bưu chính Viễn thông. Năm bảo vệ: 2023.
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" thuộc chuyên ngành gì?
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" thuộc chuyên ngành Kỹ thuật máy tính. Danh mục: Đánh Giá Giáo Dục.
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" có bao nhiêu trang?
Luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" có 151 trang. Bạn có thể xem trước một phần tài liệu ngay trên trang web trước khi tải về.
Cách tải luận án "Luận án tiến sĩ phát hiện một số sự kiện bất thường dựa trên" về máy như thế nào?
Để tải luận án về máy, bạn nhấn nút "Tải xuống ngay" trên trang này, sau đó hoàn tất thanh toán phí lưu trữ. File sẽ được tải xuống ngay sau khi thanh toán thành công. Hỗ trợ qua Zalo: 0559 297 239.