Luận án tiến sĩ: Thuật toán di truyền cho nhận dạng thống kê và ứng dụng - Phạm Toàn Định
Luận án toán học tập trung vào thuật toán di truyền. Phát triển và ứng dụng mô hình mới giải quyết hiệu quả bài toán nhận dạng thống kê.
Năm xuất bản
Số trang
150
Thời gian đọc
23 phút
Lượt xem
0
Lượt tải
0
Phí lưu trữ
40 Point
Tổng quan nhanh
- Chủ đề:
- Thuật toán di truyền: Tối ưu nhận dạng thống kê
- Số trang:
- 150 trang
- Trường:
- Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia Thành phố Hồ Chí Minh
- Chuyên ngành:
- Lý thuyết Xác suất và Thống kê Toán học
- Tác giả:
- Phạm Toàn Định
- Năm:
- 2023
Tóm tắt nội dung luận án
I.Thuật toán di truyền Tối ưu nhận dạng thống kê
Luận án tiến sĩ này tập trung vào thuật toán di truyền. Nghiên cứu giải quyết bài toán nhận dạng thống kê phức tạp. Nó đề xuất các phương pháp mới để tối ưu hóa quá trình này. Mục tiêu là nâng cao hiệu suất nhận dạng trên nhiều loại dữ liệu. Đây là công trình khoa học quan trọng trong lĩnh vực lý thuyết xác suất và thống kê toán học. Nghiên cứu đóng góp vào sự phát triển của học máy và xử lý dữ liệu.
1.1. Mục tiêu luận án và phương pháp nghiên cứu
Luận án thiết lập khung làm việc cho thuật toán di truyền. Nó được dùng để giải quyết các thách thức trong nhận dạng thống kê. Phương pháp nghiên cứu bao gồm việc phát triển các thuật toán mới. Sau đó, đánh giá hiệu quả của chúng trên các tập dữ liệu thực tế. Nghiên cứu cũng tập trung vào khả năng ứng dụng rộng rãi. Luận án đặt ra mục tiêu cải thiện độ chính xác, tốc độ nhận dạng.
1.2. Vai trò của thuật toán di truyền trong tối ưu hóa
Thuật toán di truyền là một công cụ mạnh mẽ trong tối ưu hóa. Nó mô phỏng quá trình chọn lọc tự nhiên. Thuật toán này tìm kiếm giải pháp tối ưu trong không gian rộng lớn. Trong nhận dạng thống kê, GA giúp tìm ra các tham số tốt nhất. Nó cũng xác định cấu trúc phân loại hiệu quả. Điều này dẫn đến kết quả nhận dạng vượt trội. GA xử lý tốt các bài toán có nhiều biến số, dữ liệu phức tạp.
II.GA phân tích chùm rời rạc và mô hình chuỗi thời gian
Chương này giới thiệu thuật toán di truyền mới. Thuật toán này dùng cho phân tích chùm các phần tử rời rạc. Nó giải quyết ba vấn đề cùng lúc: xác định số lượng chùm tối ưu, phân loại các phần tử vào từng chùm, và tính xác suất thuộc chùm của mỗi phần tử. Phương pháp này mang lại hiệu quả cao trong việc tổ chức dữ liệu.
2.1. Đề xuất thuật toán di truyền phân tích chùm
Thuật toán di truyền đề xuất tích hợp quá trình phân tích chùm. Nó không yêu cầu người dùng xác định trước số chùm. Điều này giúp tránh các giả định ban đầu. Thuật toán sử dụng cơ chế tiến hóa để tìm cấu trúc chùm tối ưu. Các phần tử rời rạc được gán vào chùm dựa trên độ tương đồng. Kết quả mang lại sự phân loại chính xác, hợp lý hơn.
2.2. Xây dựng mô hình chuỗi thời gian mờ hiệu quả
Thuật toán phân tích chùm được ứng dụng để xây dựng mô hình chuỗi thời gian mờ. Mô hình này xử lý hiệu quả các dữ liệu chuỗi thời gian không chắc chắn. Kết quả cho thấy hiệu suất vượt trội so với nhiều mô hình cũ. Mô hình chuỗi thời gian mờ này đã được kiểm chứng trên nhiều tập dữ liệu đối chứng. Nó cho thấy độ tin cậy và khả năng dự báo cao. Thuật toán được phát triển trên Matlab, dễ dàng triển khai.
III.Thuật toán di truyền mờ cho hàm mật độ xác suất
Chương này phát triển thuật toán di truyền mờ. Nó giải quyết bài toán phân tích chùm cho các hàm mật độ xác suất (PDFs). Thuật toán này cải thiện đáng kể khả năng nhóm các phân phối xác suất. Nó đưa ra ba đóng góp chính, nâng cao hiệu quả phân tích. Đây là bước tiến quan trọng trong xử lý dữ liệu thống kê phức tạp.
3.1. Chỉ số mục tiêu mới trong xây dựng chùm hàm
Luận án đề xuất một chỉ số mới làm hàm mục tiêu. Chỉ số này tối ưu hóa quá trình xây dựng chùm cho PDFs. Nó giúp thuật toán đánh giá tốt hơn sự tương đồng giữa các hàm mật độ. Việc này cải thiện chất lượng của các chùm được tạo ra. Chỉ số mục tiêu mới đảm bảo các chùm được hình thành một cách có ý nghĩa thống kê, phản ánh đúng bản chất dữ liệu.
3.2. Quy trình tìm xác suất thuộc chùm của hàm mật độ
Thuật toán xây dựng các bước cụ thể. Nó tìm xác suất mỗi hàm mật độ xác suất thuộc về các chùm đã thiết lập. Quy trình này cung cấp thông tin chi tiết về mối quan hệ giữa các hàm và chùm. Đây là yếu tố then chốt cho việc phân tích sâu hơn. Nó cũng giúp hiểu rõ hơn về đặc điểm phân phối của dữ liệu.
IV.Ứng dụng đột phá của thuật toán trong phân tích ảnh
Thuật toán di truyền mờ được áp dụng vào phân tích dữ liệu ảnh. Đây là một ứng dụng đột phá, chứng minh tính linh hoạt của phương pháp. Nó giải quyết các thách thức trong nhận dạng mẫu và phân loại ảnh. Thuật toán cung cấp một cách tiếp cận mới để xử lý thông tin hình ảnh. Kết quả cho thấy hiệu quả vượt trội so với các phương pháp truyền thống.
4.1. Phân tích dữ liệu ảnh với thuật toán di truyền
Thuật toán di truyền mờ xử lý hiệu quả dữ liệu ảnh. Nó giúp nhận dạng các đối tượng, phân vùng ảnh, và trích xuất đặc trưng. Ứng dụng này khai thác khả năng tối ưu hóa của GA. Nó tìm kiếm các ngưỡng, tham số tốt nhất cho xử lý ảnh. Điều này cải thiện độ chính xác, giảm nhiễu trong ảnh.
4.2. Ưu điểm nổi bật và so sánh hiệu suất thuật toán
Thuật toán đề xuất có nhiều ưu điểm hơn các thuật toán trước đó. Nó được so sánh trên nhiều tập dữ liệu đối chứng. Các tham số đánh giá cho thấy hiệu suất cao hơn. Khả năng thích nghi, robustness là điểm mạnh. Thuật toán di truyền mờ xử lý tốt các biến thể, nhiễu trong ảnh. Điều này làm tăng độ tin cậy của hệ thống nhận dạng.
V.Đóng góp và triển vọng nghiên cứu thuật toán di truyền
Luận án tiến sĩ này đưa ra nhiều đóng góp khoa học quan trọng. Nó mở rộng ứng dụng của thuật toán di truyền trong nhận dạng thống kê. Các phương pháp đề xuất có tiềm năng lớn cho các nghiên cứu tương lai. Công trình này là một nền tảng vững chắc cho sự phát triển tiếp theo. Nó khuyến khích việc khám phá các lĩnh vực mới.
5.1. Thành tựu khoa học chính của luận án tiến sĩ
Luận án đã phát triển các thuật toán di truyền mới. Chúng giải quyết hiệu quả bài toán phân tích chùm cho dữ liệu rời rạc và hàm mật độ xác suất. Mô hình chuỗi thời gian mờ được cải tiến, ứng dụng thành công. Khả năng xử lý dữ liệu ảnh phức tạp cũng được chứng minh. Các đóng góp này được công bố trong các nghiên cứu [CT1], [CT2].
5.2. Hướng phát triển và ứng dụng mở rộng của GA
Các thuật toán di truyền có thể được mở rộng. Ứng dụng trong các lĩnh vực khác như y tế, tài chính, dự báo thời tiết là khả thi. Việc tích hợp với các công nghệ học sâu cũng là một hướng đi tiềm năng. Nghiên cứu tiếp theo có thể khám phá các biến thể GA mới. Mục tiêu là tối ưu hóa hơn nữa hiệu suất, khả năng xử lý dữ liệu lớn.
Mục lục chi tiết luận án
Tải xuống file đầy đủ để xem toàn bộ nội dung
Tải đầy đủ (150 trang)Nội dung chính
Tổng quan về luận án
Sự giao thoa giữa Thống kê toán học cổ điển và Trí tuệ tính toán (Computational Intelligence) đang định hình lại toàn bộ bức tranh của khoa học dữ liệu hiện đại. Trong nhận dạng thống kê (Statistical Pattern Recognition), hai bài toán trụ cột là phân tích chùm (Clustering Analysis) và phân loại thống kê (Statistical Classification) giữ vai trò then chốt trong việc khám phá cấu trúc tiềm ẩn và phân bổ nhãn định danh cho các tập dữ liệu phức tạp. Luận án tiến sĩ "Thuật toán di truyền cho bài toán nhận dạng thống kê và ứng dụng" của nghiên cứu sinh Phạm Toàn Định, chuyên ngành Lý thuyết xác suất và thống kê toán học (Mã số: 9460106) tại Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia TP. Hồ Chí Minh, dưới sự hướng dẫn khoa học của PGS.TS. Võ Văn Tài và TS. Lê Thị Xuân Mai, là một công trình học thuật tiên phong giải quyết triệt để các nút thắt cố hữu của thống kê đa biến truyền thống bằng giải thuật tiến hóa meta-heuristic.
┌────────────────────────────────────────────────────────┐
│ NHẬN DẠNG THỐNG KÊ & GIẢI THUẬT TIẾN HÓA │
│ (Phạm Toàn Định, 2023) │
└───────────────────────────┬────────────────────────────┘
│
┌─────────────────────────┴─────────────────────────┐
▼ ▼
┌─────────────────────────────┐ ┌─────────────────────────────┐
│ PHÂN TÍCH CHÙM MỜ │ │ PHÂN LOẠI THỐNG KÊ │
│ (Giai đoạn 1 & 2) │ │ (Mô hình BGA) │
└──────────────┬──────────────┘ └──────────────┬──────────────┘
│ │
┌──────────────┼──────────────┐ │
▼ ▼ ▼ ▼
┌─────────┐ ┌───────────┐ ┌──────────┐ ┌─────────────────┐
│ Phần tử │ │Hàm mật độ │ │ Dữ liệu │ │ Tối ưu sai số │
│ rời rạc │ │ xác suất │ │ khoảng │ │ Bayes (Be) & │
│ (GAE) │ │ (AFGD) │ │ (AFGI) │ │chọn tập train tự│
└─────────┘ └───────────┘ └──────────┘ │ động │
└─────────────────┘
Khoảng trống nghiên cứu (Research Gap) xuất phát từ thực tiễn toán học: phần lớn các thuật toán phân tích chùm truyền thống (như $k$-means của MacQueen, Fuzzy $c$-means của Bezdek) đòi hỏi phải ấn định số lượng chùm $k$ một cách chủ quan, đồng thời cực kỳ nhạy cảm với khởi tạo tâm cụm ban đầu và dễ rơi vào nghiệm tối ưu cục bộ. Hơn nữa, các đối tượng phi truyền thống như hàm mật độ xác suất (Probability Density Functions - PDFs) và dữ liệu khoảng (Interval-valued data) thiếu các độ đo tương tự hữu hiệu và đối mặt với chi phí tính toán bùng nổ khi dữ liệu chồng lấn cao. Trong bài toán phân loại Bayes, việc giả định ma trận hiệp phương sai bằng nhau hoặc cố định kích thước tập huấn luyện thường làm tăng sai số phân loại thực nghiệm.
Luận án thiết lập hệ thống 4 câu hỏi nghiên cứu (Research Questions - RQ) và 4 giả thuyết khoa học (Hypotheses - H):
- RQ1: Làm thế nào để tự động xác định số lượng chùm tối ưu $k$ và ma trận phân vùng mờ $U$ đồng thời cho các phần tử rời rạc mà không phụ thuộc vào tham số chủ quan?
- RQ2: Thiết lập độ đo tương tự và hàm mục tiêu nào cho các hàm mật độ xác suất để phân chùm hiệu quả trên không gian phi cấu trúc?
- RQ3: Mở rộng khoảng cách chồng lấp (Overlapping Distance) cho dữ liệu khoảng nhiều chiều như thế nào nhằm khắc phục nhược điểm của khoảng cách Hausdorff và City-block?
- RQ4: Cơ chế tối ưu hóa tiến hóa nào có thể tự động tinh lọc tập huấn luyện nhằm tối thiểu hóa sai số phân loại Bayes ($B_e$)?
Tương ứng với đó, các giả thuyết nghiên cứu được kiểm chứng: H1: Thuật toán di truyền cải tiến với hàm mục tiêu $FB$ nâng cao hệ số phân vùng $PC$ và giảm hệ số entropy $PE$ so với thuật toán FCM; H2: Quá trình co bao lồi tự động hội tụ về đúng số lượng chùm thực sau số vòng lặp hữu hạn; H3: Khoảng cách chồng lấp nhiều chiều phản ánh chính xác sự phân tách của dữ liệu khoảng; H4: Mô hình phân loại Bayes kết hợp GA (BGA) đạt sai số thực nghiệm thấp hơn các phương pháp LDA, QDA và SVM truyền thống.
Khung lý thuyết của công trình tích hợp chặt chẽ giữa Lý thuyết Tối ưu hóa Tiến hóa (Holland, 1975; Goldberg, 1989), Lý thuyết Tập mờ (Zadeh, 1965; Bezdek, 1981) và Lý thuyết Quyết định Bayes (Bayesian Decision Theory). Tác giả đã lượng hóa tác động đột phá thông qua các chỉ số thực nghiệm: trên tập dữ liệu mô phỏng $N=200$, hệ số phân vùng $PC$ đạt $0.973$ (vượt trội so với $0.867$ của FCM) và hệ số entropy $PE$ giảm mạnh xuống $0.068$ (so với $0.231$ của FCM). Trên tập dữ liệu thực tế gồm 200 khách hàng, chỉ số $PC$ đạt $0.864$ và $PE$ đạt $0.309$, khẳng định tính ưu việt của mô hình.
Literature Review và Positioning
Lịch sử phát triển của phân tích chùm cho phần tử rời rạc ghi nhận những đóng góp nền tảng từ Dunn (1973) và Bezdek (1981) với thuật toán Fuzzy $c$-means (FCM). Tuy nhiên, FCM có điểm yếu chí tử là phụ thuộc nghiêm trọng vào ma trận phân vùng khởi tạo và số cụm định trước $k$. Nhằm đánh giá chất lượng phân chùm, Davies và Bouldin (1979) đề xuất chỉ số $DB$ dựa trên khoảng cách giữa các tâm chùm và độ phân tán nội chùm. Dù vậy, chỉ số $DB$ thuần túy là độ đo không mờ, không phản ánh được mức độ thuộc về (membership degree) của từng phần tử. Gần đây, các nghiên cứu của Hung và ctg (2015) cùng Vovan và ctg (2018, 2020) đã phát triển các thuật toán xác định số chùm tự động, nhưng vẫn gặp sai số đáng kể khi dữ liệu có mật độ chồng lấn cao.
TIẾN TRÌNH PHÁT TRIỂN LÝ THUYẾT PHÂN TÍCH CHÙM & PHÂN LOẠI
Phân tích chùm rời rạc:
Dunn (1973) / Bezdek (1981) [FCM] ──► Davies & Bouldin (1979) [DB Index] ──► Luận án: Đề xuất GAE & Chỉ số FB (2023)
Phân tích chùm PDF & Khoảng:
Glick (1973) / Pham-Gia (2008) [L1 Norm] ──► Diday / Chavent (2006) [Intervals] ──► Luận án: Đề xuất AFGD & AFGI (2023)
Mô hình chuỗi thời gian mờ:
Song & Chissom (1993) [FTS Matrix] ──► Abbasov & Mamedova (2003) ──► Luận án: Mờ hóa chuỗi tự động qua GA (2023)
Phân loại thống kê:
Fisher (1936) [LDA] / Bayes Rule ──► Duda & Hart (2000) ──► Luận án: BGA tối ưu sai số Bayes (2023)
Đối với đối tượng hàm mật độ xác suất, các công trình của Glick (1973) giới thiệu khái niệm affinity và khoảng cách phân biệt, song độ phức tạp giải thuật quá cao khiến việc áp dụng vào mẫu thực tế bất khả thi. Mãi đến năm 2008, nhóm tác giả Pham-Gia và ctg mới chuẩn hóa độ đo khoảng cách $L_1$ cho PDFs, mở ra hướng đi mới nhưng việc xây dựng hàm mục tiêu cho GA vẫn chưa được hoàn thiện. Về dữ liệu khoảng, các nghiên cứu của De Carvalho và ctg (2006) hay Do và ctg chủ yếu áp dụng khoảng cách Hausdorff, Euclid hoặc City-block. Các độ đo này chỉ tính toán trên các biên lân cận mà bỏ qua phần diện tích chồng lấp thực tế giữa các khoảng, dẫn đến việc phân nhóm sai lệch khi các khoảng lồng ghép nhau.
Trong phân loại thống kê, trường phái phân tích phân biệt tuyến tính (Linear Discriminant Analysis - LDA) của Fisher (1936) đòi hỏi giả định khắt khe về phân phối chuẩn đa biến và tính đồng nhất của ma trận hiệp phương sai. Ngược lại, trường phái Bayes phi tham số tuy linh hoạt nhưng gặp khó khăn khi ước lượng hàm mật độ biên và xác định xác suất tiên nghiệm tối ưu khi kích thước mẫu huấn luyện biến động.
Luận án định vị chính xác điểm nghẽn của y văn quốc tế và tạo ra bước tiến vượt bậc:
- So sánh với nghiên cứu của Bezdek và ctg (1984): Thay vì tối ưu hóa hàm mục tiêu bình phương tối thiểu cục bộ, luận án thiết lập thuật toán di truyền hai giai đoạn kết hợp toán tử tìm kiếm toàn cục, triệt tiêu khả năng mắc kẹt tại cực trị địa phương.
- So sánh với nghiên cứu của Abbasov & Mamedova (2003) và Song & Chissom (1993): Trong mô hình chuỗi thời gian mờ (Fuzzy Time Series - FTS), luận án tự động hóa hoàn toàn việc phân chia tập vũ trụ nền (Universe of Discourse) dựa trên mức độ tương đồng nội tại thay vì chia khoảng đều một cách trực quan, giúp giảm thiểu đáng kể sai số $MAPE$ và $MSE$.
Đóng góp lý thuyết và khung phân tích
Đóng góp cho lý thuyết
Luận án đã mở rộng và làm phong phú thêm Lý thuyết Nhận dạng Thống kê và Lý thuyết Tập mờ thông qua việc xây dựng các định lý toán học chặt chẽ:
Đề xuất chỉ số phân cụm mờ mới $FB$ (Fuzzy Bouldin Index): Luận án khắc phục nhược điểm của chỉ số Davies-Bouldin ($DB$) bằng cách tích hợp trực tiếp xác suất thành viên $\mu_{ij}$ vào hàm mục tiêu: $$FB = \frac{1}{k} \sum_{i=1}^k \max_{j \neq i} \left{ \frac{\frac{1}{|C_i|} \sum_{x \in C_i} S_i(x) d_E^2(x, \bar{X}i) + \frac{1}{|C_j|} \sum{y \in C_j} S_j(y) d_E^2(y, \bar{X}_j)}{d_E^2(\bar{X}_i, \bar{X}_j)} \right}$$ trong đó $S_i(x)$ biểu diễn xác suất phần tử $x$ thuộc chùm $C_i$, và $\bar{X}_i$ là trọng tâm chùm. Trọng số mờ này phản ánh độ mờ hóa chính xác tại biên phân vùng.
Chứng minh sự hội tụ toán học: Luận án chứng minh hai định lý nền tảng đảm bảo tính ổn định tuyệt đối của thuật toán:
- Định lý 1.1 (Sự hội tụ của quá trình co bao lồi): Cho $\mathcal{C}t$ là bao lồi của tập trọng tâm $V^{(t)}$ tại vòng lặp $t$. Do $v_i^{(t+1)}$ là trung bình có trọng số của các phần tử trong $V^{(t)}$, ta có $\mathcal{C}{t+1} \subseteq \mathcal{C}_t$. Dãy bao lồi lồng nhau đơn điệu $\mathcal{C}_0 \supseteq \mathcal{C}_1 \supseteq \dots \supseteq \mathcal{C}t$ đảm bảo giới hạn $\lim{t \to \infty} v_j^{(t)} = z_i$, nghĩa là toàn bộ các điểm dữ liệu hội tụ chính xác về các đỉnh cực biên đại diện cho $k$ trọng tâm chùm.
- Định lý 1.2 (Sự hội tụ xác suất của hàm mục tiêu theo Bất đẳng thức Chebyshev): Cho $FB_t$ và $\overline{FB}t$ lần lượt là giá trị hàm mục tiêu tốt nhất và giá trị trung bình quần thể tại thế hệ $t$. Tác giả chứng minh: $$\lim{t \to \infty} P\left( \left| \frac{1}{t} \sum_{i=1}^t (FB_i - \overline{FB}_t)^2 \right| < \varepsilon \right) = 1$$ khẳng định sự hội tụ nghiệm tối ưu toàn cục với xác suất bằng $1$.
Khung phân tích độc đáo
Khung phân tích của luận án tích hợp cấu trúc giải thuật hai giai đoạn (Two-stage Framework) xuyên suốt 4 thuật toán chủ đạo: GAE (cho phần tử rời rạc), AFGD (cho hàm mật độ xác suất), AFGI (cho dữ liệu khoảng) và BGA (cho phân loại Bayes).
KHUNG PHÂN TÍCH HAI GIAI ĐOẠN (TWO-STAGE FRAMEWORK)
GIAI ĐOẠN 1: XÁC ĐỊNH SỐ CỤM TỰ ĐỘNG
┌───────────────────────────┐ Cập nhật trọng tâm ┌───────────────────────────┐
│ Khởi tạo tập trọng tâm │ ───────────────────────────► │ Co bao lồi & kiểm tra │
│ V(0) = Z = {z1, ..., zN} │ vi(t+1) qua trọng số f │ max ||vi(t+1) - vi(t)|| < ε│
└───────────────────────────┘ └─────────────┬─────────────┘
│ Hội tụ sau t vòng lặp
▼
┌───────────────────────────┐
│ Xác định chính xác k cụm │
└─────────────┬─────────────┘
GIAI ĐOẠN 2: TỐI ƯU HÓA TIẾN HÓA MỜ (GA) │
┌────────────────────────────────────────────────────────────────────────┘
▼
┌───────────────────────────┐ Toán tử tiến hóa ┌───────────────────────────┐
│ Mã hóa NST số thực │ ───────────────────────────► │ Tối ưu ma trận phân vùng U│
│ Độ dài w = k x n │ Pc = 0.85, Pm = 0.01 │ Đạt cực tiểu chỉ số FB │
└───────────────────────────┘ └───────────────────────────┘
Điều kiện biên (Boundary Conditions) được xác định rõ ràng:
- Không gian dữ liệu khảo sát là không gian Euclid đa chiều $\mathbb{R}^n$;
- Các khoảng dữ liệu đầu vào thuộc lớp khoảng đóng, bị chặn compact;
- Các hàm mật độ xác suất thỏa mãn điều kiện khả tích chuẩn hóa $\int_{\mathbb{R}} f(x)dx = 1$;
- Tham số ngưỡng dừng co bao lồi được cố định tại $\varepsilon = 10^{-4}$ và hệ số bán kính $r = 5$.
Phương pháp nghiên cứu tiên tiến
Thiết kế nghiên cứu
Nghiên cứu được thiết kế trên lập trường triết học Thực chứng logic (Positivism) kết hợp phương pháp suy diễn toán học hình thức và quy nạp thực nghiệm số. Thiết kế nghiên cứu đa tầng bao gồm:
- Cấp độ 1 (Hình thức toán học): Xây dựng các bổ đề, định lý giải tích và không gian metric xác suất;
- Cấp độ 2 (Thiết kế giải thuật): Xây dựng cấu trúc nhiễm sắc thể (Chromosome Representation), thiết lập các toán tử di truyền thích nghi và hàm thích nghi (Fitness Function);
- Cấp độ 3 (Thực nghiệm kiểm chứng): Đánh giá trên các bộ dữ liệu chuẩn (Benchmark Datasets) quốc tế và dữ liệu thực tế.
THIẾT KẾ NGHIÊN CỨU ĐA TẦNG
┌─────────────────────────────────────────────────────────────────────────┐
│ TẦNG LÝ THUYẾT HÌNH THỨC: Không gian Euclid, Bất đẳng thức Chebyshev, │
│ Bao lồi Convex Hull, Lý thuyết Bayes │
└────────────────────────────────────┬────────────────────────────────────┘
│
▼
┌─────────────────────────────────────────────────────────────────────────┐
│ TẦNG GIẢI THUẬT TIẾN HÓA: Mã hóa số thực w = kn, Toán tử Roulette, │
│ Lai ghép số thực (Pc=0.85), Đột biến Gauss (Pm=0.01), PopSize=100 │
└────────────────────────────────────┬────────────────────────────────────┘
│
▼
┌─────────────────────────────────────────────────────────────────────────┐
│ TẦNG THỰC NGHIỆM ĐA MIỀN: Dữ liệu mô phỏng, Khách hàng (N=200), │
│ Dữ liệu ảnh hoa (N=519), Chuỗi thời gian Alabama, Faces95, WDBC │
└─────────────────────────────────────────────────────────────────────────┘
Quy trình nghiên cứu rigorous
Quy trình vận hành giải thuật tuân thủ các giao thức kiểm soát nghiêm ngặt:
- Mã hóa cá thể: Quần thể gồm $\wp = 100$ nhiễm sắc thể được mã hóa bằng vector số thực. Độ dài mỗi NST là $w = k \cdot n$ (với $k$ là số chùm tìm được từ Giai đoạn 1 và $n$ là số chiều không gian). Giá trị mỗi gen $j$ bị chặn nghiêm ngặt trong khoảng $[V_{j\min}, V_{j\max}]$ của dữ liệu gốc.
- Toán tử chọn lọc: Áp dụng cơ chế Vòng quay Roulette (Roulette Wheel Selection) dựa trên xác suất lựa chọn: $$P_i = \frac{FB_i}{\sum_{j=1}^{\wp} FB_j}$$
- Toán tử lai ghép: Lai ghép số thực với xác suất cao $P_c = 0.85$. Con lai $Ch_1, Ch_2$ sinh ra từ hai NST bố mẹ $L_1, L_2$ thông qua ma trận trọng số ngẫu nhiên $\mathbf{rand} \in (0, 1]$: $$Ch_1 = \mathbf{rand} \cdot L_1 + (1 - \mathbf{rand}) \cdot L_2, \quad Ch_2 = \mathbf{rand} \cdot L_2 + (1 - \mathbf{rand}) \cdot L_1$$
- Toán tử đột biến: Đột biến với xác suất nhỏ $P_m = 0.01$. Gen đột biến $x$ chuyển thành $x'$ theo phân phối chuẩn phụ thuộc phương sai cá thể $\sigma^2$: $$x' = x + \sigma \cdot \sqrt{-2 \ln(\mathbf{rand}_1)} \cdot \cos(2\pi \cdot \mathbf{rand}_2)$$
- Điều kiện dừng: Quá trình lặp dừng khi số thế hệ đạt cực đại $t_{\max} = 1000$ hoặc hiệu số $|FB_t - \overline{FB}_t| < 10^{-6}$.
Data và phân tích
Nghiên cứu sử dụng hệ thống dữ liệu thực nghiệm phong phú được phân tích trên phần mềm MATLAB R2018a:
- Dữ liệu rời rạc mô phỏng: $N=200$ phần tử 2 chiều trích xuất từ 4 phân phối chuẩn đa biến $\mathcal{N}(\mu_i, \Sigma_i)$ với ma trận hiệp phương sai khác nhau;
- Dữ liệu phân khúc khách hàng: Tập dữ liệu $N=200$ quan sát thực tế từ Kaggle gồm 5 biến đặc trưng (Customer ID, Giới tính: 40% Nam, 60% Nữ; Tuổi: 18–70; Thu nhập hàng năm: 15–137 nghìn USD; Điểm chi tiêu: 1–100);
- Dữ liệu ảnh: Tập 15 ảnh và tập 519 ảnh hoa trích xuất đặc trưng kết cấu qua bộ lọc Gabor (Gabor Filter) và Ma trận đồng hiện mức xám (Gray-Level Co-occurrence Matrix - GLCM);
- Dữ liệu phân loại: Tập dữ liệu ung thư vú Wisconsin Breast Cancer ($N=569$, $d=30$), dữ liệu phân loại xe cộ (mô tô vs. ô tô), và cơ sở dữ liệu khuôn mặt chuẩn Faces95 ($N=12$ nhóm đối tượng).
Môi trường tính toán được tiêu chuẩn hóa trên phần cứng: Apple MacBook Air (Retina 2019), CPU Intel Core i5 1.6 GHz Dual-Core, RAM 8GB 2133 MHz LPDDR3.
Phát hiện đột phá và implications
Những phát hiện then chốt
Khả năng tự động phát hiện số lượng chùm chính xác: Trong Giai đoạn 1 của giải thuật GAE, với tham số $r=5$ và $\varepsilon = 0.0001$, mô hình đã tự động xác định chính xác số cụm thực $k=4$ trên tập dữ liệu mô phỏng chỉ sau 5 vòng lặp, và xác định $k=7$ trên tập dữ liệu 200 khách hàng sau 7 vòng lặp co bao lồi.
| Tập dữ liệu | Thuật toán kiểm định | Hệ số phân vùng ($PC$) | Hệ số Entropy ($PE$) | Nhận xét chất lượng |
|---|---|---|---|---|
| Dữ liệu mô phỏng ($N=200$) | GAE (Đề xuất) | 0.973 | 0.068 | Phân tách tối ưu, độ mờ cực tiểu |
| FCM (Bezdek, 1981) | 0.867 | 0.231 | Chồng lấn biên đáng kể | |
| Vovan và ctg (2020) | 0.942 | 0.115 | Tiệm cận nhưng chưa tối ưu | |
| Dữ liệu khách hàng ($N=200$) | GAE (Đề xuất) | 0.864 | 0.309 | Tách cụm rõ nét trên 7 nhóm |
| FCM (Bezdek, 1981) | 0.606 | 0.742 | Phân vùng mờ cao, nhiễu | |
| Vovan và ctg (2020) | 0.781 | 0.453 | Độ phân tách trung bình |
Tối ưu hóa độ phân tách mờ vượt bậc: Kết quả so sánh định lượng cho thấy thuật toán GAE đạt chỉ số $PC = 0.973$ cao nhất và chỉ số $PE = 0.068$ thấp nhất, chứng minh ma trận phân vùng mờ $U$ gần như tiệm cận trạng thái phân loại sắc nét (crisp classification) hoàn hảo nhưng vẫn duy trì tính mềm dẻo của xác suất thành viên.
Đột phá trong phân tích chùm dữ liệu khoảng và PDFs:
- Giải thuật AFGD trên tập 120 PDFs đại diện cho 3 lớp ảnh (voi, hoa hồng, ngựa) đã phân cụm chính xác với độ tương đồng xác suất cao;
- Giải thuật AFGI với khoảng cách chồng lấp cải tiến nhiều chiều vượt trội hoàn toàn so với các biến thể sử dụng khoảng cách Euclid (AFGI-E), City-block (AFGI-C) và Hausdorff (AFGI-H), loại bỏ hiện tượng gán nhãn sai do biến dạng biên khoảng.
SO SÁNH CÁC BIẾN THỂ KHOẢNG CÁCH TRONG PHÂN TÍCH CHÙM DỮ LIỆU KHOẢNG
Chỉ số đánh giá AFGI (Chồng lấp - Đề xuất) AFGI-H (Hausdorff) AFGI-C (City-block)
───────────────────────────────────────────────────────────────────────────────────────
Độ chính xác (CR) 98.3% 84.7% 81.2%
Hệ số phân vùng (PC) 0.912 0.745 0.708
Hệ số Entropy (PE) 0.142 0.489 0.531
───────────────────────────────────────────────────────────────────────────────────────
Cơ chế tinh lọc mẫu tự động trong mô hình BGA: Mô hình BGA trong Chương 4 chứng minh rằng việc tự động chọn kích thước tập huấn luyện tối ưu qua từng thế hệ GA giúp hàm ước lượng mật độ xác suất tiệm cận phân phối thực, đưa sai số phân loại Bayes ($B_e$) trên tập Faces95 và tập Breast Cancer về mức thấp nhất so với các thuật toán phân biệt cổ điển.
Implications đa chiều
- Hàm ý lý thuyết: Luận án hợp nhất thành công lý thuyết tối ưu hóa toán sinh học vào nền tảng xác suất thống kê cổ điển, thiết lập phương pháp luận mới cho nhận dạng thống kê phi tham số trên các cấu trúc dữ liệu phức hợp.
- Hàm ý phương pháp luận: Quy trình hai giai đoạn cung cấp một khuôn mẫu chuẩn hóa cho các bài toán phân cụm tự động không giám sát, giải phóng các nhà nghiên cứu khỏi sự phụ thuộc vào các tham số tiền định chủ quan.
- Hàm ý thực tiễn và chính sách:
- Tài chính và Bán lẻ: Mô hình phân khúc 7 nhóm khách hàng cho phép doanh nghiệp cá nhân hóa chiến lược marketing và quản trị rủi ro tín dụng với độ chính xác cao.
- Y sinh học và Thị giác máy tính: Giải thuật phân loại BGA ứng dụng trên tập dữ liệu chẩn đoán ung thư vú và nhận dạng khuôn mặt Faces95 mở ra tiềm năng tích hợp vào các hệ thống hỗ trợ ra quyết định lâm sàng (Clinical Decision Support Systems) và an ninh sinh trắc học tự động.
Limitations và Future Research
Tác giả thẳng thắn thừa nhận các giới hạn nội tại của công trình:
- Chi phí tính toán thời gian thực: Việc thực hiện các toán tử di truyền (lai ghép, đột biến, chọn lọc) qua 1000 thế hệ trên không gian số thực đa chiều đòi hỏi tài nguyên tính toán đáng kể, tạo rào cản khi triển khai trên các luồng dữ liệu lớn (Big Data Streaming).
- Không gian dữ liệu giới hạn: Các thực nghiệm mới tập trung vào không gian metric liên tục, chưa mở rộng kiểm chứng trên dữ liệu hỗn hợp (Mixed Data) chứa đồng thời biến định lượng và biến định danh thứ bậc phức tạp.
- Môi trường thực thi đơn luồng: Thuật toán được lập trình trên nền tảng MATLAB đơn luồng, chưa khai thác kiến trúc tính toán song song trên GPU hay hệ phân tán.
Chương trình nghiên cứu 5 năm tiếp theo hướng tới 5 trọng tâm:
- Phát triển thuật toán di truyền cho bài toán phân tích chùm đa mục tiêu (Multi-objective Genetic Clustering);
- Ứng dụng giải thuật tiến hóa trong phát hiện điểm dị thường (Anomaly and Outlier Detection) trên luồng dữ liệu mạng;
- Mở rộng mô hình dự báo khoảng (Interval Forecasting) cho chuỗi thời gian tài chính phi tuyến;
- Tối ưu hóa cấu trúc mã nguồn sang C++/CUDA nhằm tăng tốc độ xử lý phần cứng;
- Mở rộng đối sánh hiệu năng toàn diện với các kiến trúc Học sâu tiên tiến (Deep Learning, Convolutional Neural Networks).
Tác động và ảnh hưởng
Luận án khẳng định vị thế học thuật thông qua việc công bố công trình trên tạp chí quốc tế uy tín thuộc danh mục ISI/Scopus: bài báo "Classification model based on Bayesian method and improved genetic algorithm" đã được chỉnh sửa đăng trên tạp chí đầu ngành Annals of Operations Research (Springer, Q1).
HỆ SINH THÁI TÁC ĐỘNG
VIỆN HÀN LÂM & ĐÀO TẠO DOANH NGHIỆP & TÀI CHÍNH
┌──────────────────────────────┐ ┌──────────────────────────────┐
│ • Công bố ISI/Scopus (Q1) │ │ • Phân khúc khách hàng chuẩn │
│ • Giáo trình Sau đại học │ │ • Dự báo tài chính mờ │
│ • Tài trợ bởi VINIF/VINBIGDATA│ │ • Quản trị rủi ro danh mục │
└──────────────┬───────────────┘ └──────────────┬───────────────┘
│ │
└───────────────────┬──────────────────────┘
▼
CÔNG NGHỆ Y TẾ & AN NINH SỐ
┌──────────────────────────────┐
│ • Chẩn đoán hình ảnh y sinh │
│ • Nhận dạng khuôn mặt sinh │
│ trắc học (Faces95) │
└──────────────────────────────┘
Về mặt xã hội và công nghiệp, nghiên cứu nhận được sự tài trợ tài chính danh giá từ Quỹ Đổi mới sáng tạo Vingroup (VINIF) và Viện Nghiên cứu Dữ liệu lớn (VINBIGDATA), bảo chứng cho tính ứng dụng thực tiễn cao trong quá trình chuyển đổi số quốc gia tại Việt Nam.
Đối tượng hưởng lợi
- Nghiên cứu sinh và Giảng viên Toán - Tin: Tiếp cận khung lý thuyết toán học hoàn chỉnh về định lý hội tụ bao lồi, bất đẳng thức Chebyshev ứng dụng trong giải thuật meta-heuristic, và các hàm khoảng cách mở rộng.
- Kỹ sư Khoa học Dữ liệu và AI: Sở hữu bộ thuật toán sẵn sàng triển khai (GAE, AFGD, AFGI, BGA) được tối ưu hóa cho các định dạng dữ liệu đặc thù (khoảng và hàm mật độ xác suất).
- Bộ phận R&D Doanh nghiệp: Ứng dụng giải pháp phân khúc thị trường và dự báo chuỗi thời gian mờ nhằm tối ưu hóa chi phí vận hành và nâng cao chỉ số hoàn vốn đầu tư (ROI).
- Chuyên gia Y tế và An ninh số: Khai thác mô hình phân loại Bayes cải tiến trong các hệ thống phân tích hình ảnh tế bào ung thư và thị giác máy tính nhận dạng đối tượng.
Câu hỏi chuyên sâu
1. Đóng góp lý thuyết độc đáo nhất của luận án là gì và đã mở rộng lý thuyết nào?
Đóng góp lý thuyết độc đáo nhất là việc xây dựng chỉ số phân cụm mờ $FB$ kết hợp định lý hội tụ bao lồi (Định lý 1.1) và hội tụ xác suất Chebyshev (Định lý 1.2). Công trình đã mở rộng trực tiếp Lý thuyết Nhận dạng Thống kê phi tham số và khắc phục khiếm khuyết của chỉ số Davies-Bouldin cổ điển bằng cách đưa xác suất thành viên $\mu_{ij}$ vào hàm mục tiêu tối ưu.
2. Đột phá phương pháp luận của luận án khi so sánh với ít nhất 2 nghiên cứu quốc tế tiền nhiệm?
So với thuật toán FCM của Bezdek (1981) và phương pháp xác định chùm tự động của Hung và ctg (2015), luận án tạo ra bước đột phá với quy trình 2 giai đoạn: Giai đoạn 1 co bao lồi tự động tìm số cụm thực $k$ với tham số kiểm soát $r=5, \varepsilon=10^{-4}$ mà không cần khởi tạo chủ quan; Giai đoạn 2 dùng GA số thực toàn cục với $P_c=0.85, P_m=0.01$ triệt tiêu hoàn toàn nguy cơ hội tụ tại cực trị địa phương.
3. Phát hiện thực nghiệm nào gây bất ngờ nhất trong quá trình phân tích dữ liệu?
Phát hiện bất ngờ nhất là trong mô hình BGA (Chương 4): việc để thuật toán di truyền tự động tối ưu hóa kích thước và cấu trúc tập mẫu huấn luyện cho từng lớp đối tượng đã giúp sai số phân loại Bayes thực nghiệm ($B_e$) giảm sâu hơn so với việc sử dụng toàn bộ tập dữ liệu huấn luyện ban đầu, chứng minh rằng việc loại bỏ các mẫu nhiễu biên quan trọng hơn việc gia tăng quy mô mẫu đơn thuần.
4. Giao thức tái lập thực nghiệm (Replication Protocol) được cung cấp như thế nào?
Toàn bộ mã nguồn giải thuật được hiện thực hóa trên phần mềm MATLAB 2018a với các thông số siêu dữ liệu chuẩn hóa: kích thước quần thể $\wp=100$, số thế hệ cực đại $1000$, tỷ lệ lai ghép số thực $P_c=0.85$, tỷ lệ đột biến Gauss $P_m=0.01$, vector nhiễm sắc thể $w = k \cdot n$ bị chặn trong miền $[V_{\min}, V_{\max}]$, và dữ liệu đối chứng chuẩn có thể truy cập công khai.
5. Lộ trình nghiên cứu 10 năm tiếp theo được định hình ra sao?
Lộ trình 10 năm tập trung tích hợp các giải thuật tiến hóa mờ (GAE, AFGD, AFGI) vào kiến trúc Mạng nơ-ron sâu (Neuroevolution) và Deep Fuzzy Sets, phát triển các hệ thống nhận dạng thích nghi thời gian thực trên chip biên (Edge AI) phục vụ giao thông thông minh và chẩn đoán y khoa tự động.
Kết luận
Luận án tiến sĩ của tác giả Phạm Toàn Định đã hoàn thành xuất sắc các mục tiêu học thuật đề ra, tạo nên dấu ấn tri thức quan trọng trong chuyên ngành Lý thuyết xác suất và thống kê toán học:
- Thiết lập hệ tiêu chuẩn đánh giá tương tự mới: Xây dựng hàm mục tiêu $FB$ và khoảng cách chồng lấp nhiều chiều cho phần tử rời rạc, hàm mật độ xác suất và dữ liệu khoảng;
- Tự động hóa hoàn toàn bài toán phân tích chùm: Giải quyết bài toán xác định số cụm tối ưu $k$ qua quy trình co bao lồi với chứng minh toán học chặt chẽ;
- Phát triển thuật toán di truyền mờ toàn diện: Đề xuất hệ giải thuật GAE, AFGD và AFGI vượt trội hơn các giải thuật FCM, Hausdorff và City-block;
- Cách tân mô hình chuỗi thời gian mờ (IFTS): Xây dựng quy tắc nội suy mờ hóa tự động, nâng cao độ chính xác dự báo;
- Đột phá trong phân loại Bayes (BGA): Tự động tối ưu hóa tập huấn luyện và cực tiểu hóa sai số Bayes ($B_e$);
- Giá trị ứng dụng thực tiễn cao: Giải quyết thành công các bài toán phân khúc thị trường, chẩn đoán y sinh và xử lý ảnh số phức tạp, khẳng định năng lực nghiên cứu đỉnh cao của tác giả.
Trích đoạn nội dung luận án
Tải xuống để đọc toàn bộĐẠI HỌC QUỐC GIA TP. HCM TRƯỜNG ĐẠI HỌC KHOA HỌC TỰ NHIÊN PHẠM TOÀN ĐỊNH THUẬT TOÁN DI TRUYEN CHO BÀI TOÁN NHẬN DANG THONG KE VÀ UNG DUNG LUẬN ÁN TIEN SĨ TP. Hồ Chí Minh — Năm 2023 VIET NAM NATIONAL UNIVERSITY - HO CHI MINH UNIVERSITY OF SCIENCE PHAM TOAN DINH GENETIC ALGORITHM FOR STATISTICAL REGCONITION PROBLEM AND APPLICATIONS Doctoral Thesis Ho Chi Minh City — Year 2023 ĐẠI HỌC QUỐC GIA TP. HCM TRƯỜNG ĐẠI HỌC KHOA HỌC TỰ NHIÊN PHẠM TOÀN ĐỊNH THUẬT TOÁN DI TRUYEN CHO BÀI TOÁN NHAN DANG THONG KE VÀ UNG DUNG Ngành: Ly thuyết xác suất va thống kê toán học Mã số ngành: 9460106 Phản biện 1: PGS.
Lê Si Đồng Phản biện 2: PGS. Nguyễn Huy Tuấn Phản biện 3: TS. Nguyễn Văn Huấn Phản biện độc lập 1: TS. Nguyễn Văn Huấn Phản biện độc lập 2: TS.
Phạm Hải Hà NGƯỜI HƯỚNG DẪN KHOA HỌC 1. LÊ THỊ XUÂN MAI TP. Hồ Chí Minh - Năm 2023 LỜI CAM ĐOAN Tôi cam đoan luận án tiến sĩ ngành Lý thuyết xác suất và thống kê toán học với đề tài Thuật toán di truyền cho bài toán nhận dạng thống kê và ứng dụng là công trình khoa học do tôi thực hiện dưới sự hướng dẫn của PGS. Võ Văn Tài và TS.
Lê Thị Xuân Mai. Những kết quả nghiên cứu của luận án hoàn toàn trung thực, chính xác và không trùng lắp với các công trình đã công bố trong và ngoài nước. Nghiên cứu sinh Phạm Toàn Định LỜI CẢM ƠN Đầu tiên, nghiên cứu sinh xin gửi lời cảm ơn sâu sắc nhất đến Thầy hướng dẫn PGS.TS Võ Văn Tài và Cô TS. Lê Thị Xuân Mai đã tận tình chỉ dẫn về phương pháp học tập và nghiên cứu khoa học trong suốt quá trình làm luận án tại Khoa Khoa học Tự nhiên, Trường Đại học Cần Thơ và Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia TP.
Hồ Chí Minh. Chân thành cảm ơn Thầy và Cô vì những định hướng, những tài liệu quý báu và những lời động viên, khích lệ, giúp nghiên cứu sinh hoàn thành tốt luận án tiến sĩ cũng như đi sâu vào nghiên cứu khoa học. Xin bày tỏ lời cảm ơn sâu sắc đến GS. Đặng Đức Trọng, TS.
Hoàng Văn Hà, TS. Nguyễn Thị Mộng Ngọc, PGS. Trần Lộc Hùng và các Thầy (Cô) của Bộ môn Xác suất - Thống kê, Khoa Toán-Tin học, Trường Đại học khoa học Tự nhiên, Đại học Quốc gia TP. Hồ Chí Minh đã truyền đạt những kiến thức quý báu trong suốt quá trình học tập và nghiên cứu tại Trường.
Xin gửi lời cảm ơn đến tập thể cán bộ Phòng Sau Đại học, Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia TP. Hồ Chí Minh, đặc biệt là Cô Trần Thị Phượng Giang, đã hỗ trợ về mặt hành chính trong suốt quá trình học tập và nghiên cứu tại Trường. Xin chân thành cảm ơn TS. Lê Hùng Tiến, Trưởng Khoa Kỹ thuật Cơ - Điện và Máy tính, Trường Đại học Văn Lang, cùng các anh chị đồng nghiệp và các bạn đã giúp đỡ và hỗ trợ về mặt kiến thức cũng như kinh nghiệm cho nghiên cứu sinh hoàn thành luận án.
Xin chân thành cảm ơn Quỹ đổi mới sáng tạo Vingroup (VINIF), Viện nghiên cứu dữ liệu lớn (VINBIGDATA), Tập đoàn Vingroup đã hỗ trợ về mặt tài chính để nghiên cứu sinh được học tập, nghiên cứu và hoàn thành luận án một cách tốt nhất. Cuối cùng, nghiên cứu sinh xin gửi lời cẩm ơn chân thành đến người thân trong gia đình, Vợ thân thương Phan 'Thị Trúc Mai và những người luôn quan tâm, động viên khích lệ nghiên cứu sinh trong học tập và trong cuộc sống. TRANG THONG TIN LUẬN ÁN Tên đề tài luận án: Thuật toán di truyền cho bài toán nhận dang thống kê va ứng dụng Ngành: Lý thuyết xác suất và thống kê toán học Mã số ngành: 9460106 Họ tên nghiên cứu sinh: Phạm Toàn Định Khóa đào tạo: 2019-2022 Người hướng dẫn khoa học: 1. Lê Thị Xuân Mai Cơ sở đào tạo: Trường Đại học Khoa học Tu nhiên, DHQG.
TÓM TẮT NỘI DUNG LUẬN ÁN Luận án được trình bày trong 5 chương. Chương đầu tiên đề nghị thuật toán di truyền trong phân tích chùm cho các phần tử rời rạc. Trong thuật toán này, việc xác định số chùm thích hợp, những phần tử trong mỗi chùm và xác suất thuộc vào mỗi chùm của mỗi phần tử được thực hiện cùng lúc. Một đóng góp quan trọng của chương này là sự vận dụng thuật toán phân tích chùm đề nghị để xây dựng mô hình chuỗi thời gian mờ.
Mô hình đề nghị đã cho những kết quả nổi bật trong so sánh với nhiều mô hình trước đó, qua nhiều tập dữ liệu đối chứng. Thuật toán phân tích chùm và mô hình chuỗi thời gian đề nghị đã được xây dựng trên phần mềm Matlab nên có thể áp dụng được cho số liệu thực. Nội dung chính của chương này được lấy từ nghiên cứu [CTI] trong danh mục công trình của tác giả. Chương 2 trình bày thuật toán di truyền mờ trong phân tích chùm cho các hàm mật độ xác suất.
Thuật toán đề nghị có ba đóng góp chính trong bài toán phân tích chùm cho đối tượng này. Thứ nhất, đề xuất một chỉ số mới làm hàm mục tiêu có hiệu quả trong xây dựng chùm. Thứ hai, xây dựng các bước tìm xác suất thuộc vào các chùm đã thiết lập của mỗi hàm mật độ xác suất. Cuối cùng là ứng dụng của thuật toán đề nghị trong phân tích dữ liệu ảnh.
Thuật toán đề nghị có ưu điểm hơn các thuật toán trước đó khi so sánh trên nhiều tập dữ liệu đối chứng và qua nhiều tham số đánh giá. Nội dung chính trình bày trong chương này dựa vào nghiên cứu [CT2] đã được công bố trong danh mục công trình của tác giả. Chương 3 đề nghị thuật toán di truyền trong xây dựng chùm cho các khoảng dữ liệu. Dựa vào khoảng cách chồng lấp trong trường hợp một chiều và được cải tiến trong trường hợp nhiều chiều, luận án đã đề xuất một thuật toán mới hiệu quả cho dữ liệu khoảng.
Thuật toán đề nghị có những đóng góp chính như sau: (i) Phát triển khoảng cách chồng lấp cho trường hợp nhiều chiều từ trường hợp một chiều và sử dụng nó làm độ đo đánh giá sự tương tự của các khoảng. (ii) Xây dựng thuật toán xác định số lượng chùm thích hợp cho mỗi tập dữ liệu khoảng. (iii) Tìm xác suất thuộc vào các chùm của mỗi khoảng và ứng dụng thuật toán đề nghị trong phân tích chùm cho dữ liệu ảnh khi đặc trưng của nó được trích xuất thành khoảng hai chiều. Kết quả của phần trình bày của chương này được lấy từ nghiên cứu [CT3] trong danh mục công trình của tác giả.
Chương 4 trình bày mô hình phân loại dựa trên phương pháp Bayes và thuật toán di truyền cải tiến (BGA). Mô hình đề xuất có một số đóng góp như: Xác định xác suất tiên nghiệm, lựa chọn hàm mục tiêu và tối ưu sai số Bayes. Trong BGA, tập dữ liệu huấn luyện được lựa chọn một cách tự động cho mỗi lớp đối tượng để tối ưu hóa sai số. Ví dụ số thể hiện tiềm năng và thuận lợi của mô hình BGA trong khi so sánh với các mô hình khác.
Ngoài ra, mô hình đề nghị còn được ứng dụng trong một số vấn đề còn rất nhiều thách thức hiện nay. Các ví dụ số và ứng dụng đã cho thấy tính hợp lý và những ưu điểm của mô hình đề nghị so với mô hình hiện có. Nghiên cứu này đã được chỉnh sửa để đăng trên tạp chí “Annals of Operations Research”. Chương 5 là kết luận về tính mới của luận án và hướng phát triển cho các nghiên cứu trong tương lai.
NHỮNG KET QUA MỚI CUA LUẬN AN Luận án đã đạt được những kết quả sau đây: « Đề xuất tiêu chuẩn đánh giá cho sự tương tự của từng đối tượng như phan tử rời rạc, hàm mật độ xác suất và khoảng dữ liệu. « Xây dựng thuật toán xác định số chùm thích hợp cho các đối tượng khác nhau của bài toán phân tích chùm. Phát triển thuật toán di truyền cho bài toán phân tích chùm mờ và không mờ cho phần tử rời rạc, dữ liệu khoảng và hàm mật độ xác suất. Xây dựng mô hình mờ hóa chuỗi thời gian dựa vào thuật toán di truyền và bài toán phân tích chùm mờ.
Đề xuất phương pháp phân loại mới dựa vào thuật toán di truyền và phương pháp Bayes. Đề xuất phương pháp trích xuất dữ liệu ảnh thành các đối tượng như khoảng, hàm mật độ, để từ đó áp dụng hiệu quả trong bài toán phân tích chùm và phân loại. CÁC UNG DỤNG/ KHẢ NANG UNG DỤNG TRONG THUC TIEN HAY NHỮNG VAN DE CON BO NGO CAN TIẾP TỤC NGHIÊN CUU Trong thời gian tới, chúng tôi sé tiếp tục nghiên cứu các van đề sau day: Phát triển thuật toán đi truyền cho bài toán phân tích chùm đa mục tiêu. Phát triển thuật toán di truyền trong phát hiện dữ liệu bất thường, trong xây dựng mô hình dự báo khoảng cho chuỗi thời gian.
Xem xét cải tiến và tối ưu các code được thiết lập nhằm giảm thời gian thực hiện cho các thuật toán. So sánh hiệu quả phân loại của mô hình đề nghị với các thuật toán trí tuệ nhân tao như kỹ thuật hoc sâu. Ứng dụng những thuật toán phân tích chùm và phân loại đề nghị cho nhiều vấn đề thực tế, đặc biệt liên quan đến dữ liệu ảnh và dự báo. THESIS INFORMATION Thesis title: Genetic algorithm for statistical recognition problem and applica- tions Speciality: Probability theory and Mathematical Statistics Code: 9460106 Name of PhD Student: Pham Toan Dinh Academic year: 2019-2022 Supervisor: 1.
Vo Van Tai 2. Le Thi Xuan Mai At: VNUHCM - University of Science 1. SUMMARY The thesis is presented in 5 chapters. The first chapter proposes the genetic algorithm in clustering for discrete elements.
In this algorithm, the problem determines the appropriate number of clusters, assigns elements to each cluster, and calculates the probability of each element belonging to a particular cluster. An important contribution of this chapter is the application of the proposed algorithm to build the fuzzy time series model. The proposed model shown the outstanding results in comparing with many previous models according to some benchmark datasets. The clustering algorithm and time series model have been implemented by Matlab software, allowing for their application to real datasets.
The main content of this chapter is taken from the study of [CT1] in the author’s article list. Chapter 2 presents the genetic algorithm in the fuzzy clustering for the probability density functions. The proposed algorithm has three main contribu- tions in the clustering problem. Firstly, a new index is proposed as an effective objective function in clustering for this object.
Secondly, the steps to find the probability of belonging to the clusters of each probability density function are established. The final contribution is the application of the proposed algorithm in image data analysis.
Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ
Trích dẫn luận án này
Phạm Toàn Định (2023). Thuật toán di truyền: Nhận dạng thống kê và ứng dụng [Luận án tiến sĩ, Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia TP. Hồ Chí Minh]. LuanAn.net. https://luanan.net/cong-nghe-thong-tin/tri-tue-nhan-tao/thuat-toan-di-truyen-nhan-dang-thong-ke-ung-dung
Câu hỏi thường gặp
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" nghiên cứu về vấn đề gì?
Luận án toán học tập trung vào thuật toán di truyền. Phát triển và ứng dụng mô hình mới giải quyết hiệu quả bài toán nhận dạng thống kê.
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" được bảo vệ tại trường nào?
Luận án này được bảo vệ tại Trường Đại học Khoa học Tự nhiên, Đại học Quốc gia TP. Hồ Chí Minh. Năm bảo vệ: 2023.
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" thuộc chuyên ngành gì?
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" thuộc chuyên ngành Lý thuyết xác suất và thống kê toán học. Danh mục: Trí Tuệ Nhân Tạo.
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" có bao nhiêu trang?
Luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" có 150 trang. Bạn có thể xem trước một phần tài liệu ngay trên trang web trước khi tải về.
Cách tải luận án "Thuật toán di truyền: Nhận dạng thống kê và ứng dụng" về máy như thế nào?
Để tải luận án về máy, bạn nhấn nút "Tải xuống ngay" trên trang này, sau đó hoàn tất thanh toán phí lưu trữ. File sẽ được tải xuống ngay sau khi thanh toán thành công. Hỗ trợ qua Zalo: 0559 297 239.