Luận án: Phương pháp khai phá luật kết hợp mờ biểu thị thông tin ngôn ngữ
Luận án phát triển phương pháp khai phá luật kết hợp mờ sử dụng biểu thị thông tin ngôn ngữ. Cải tiến hiệu quả khai phá trong xử lý dữ liệu không chắc chắn.
Luan An
Luận án tiến sĩ
Năm xuất bản
Số trang
109
Thời gian đọc
17 phút
Lượt xem
0
Lượt tải
0
Phí lưu trữ
40 Point
Tổng quan nhanh
- Chủ đề:
- Khai phá luật kết hợp mờ: Nền tảng và thách thức
- Số trang:
- 109 trang
- Trường:
- Học viện Khoa học và Công nghệ
- Chuyên ngành:
- Cơ sở toán học cho tin học
- Tác giả:
- Nguyễn Tuấn Anh
- Năm:
- 2020
Tóm tắt nội dung luận án
I.Khai phá luật kết hợp mờ Nền tảng và thách thức
Tài liệu này khám phá các phương pháp tiên tiến để khai phá luật kết hợp mờ. Phương pháp này sử dụng biểu diễn ngôn ngữ từ dữ liệu phức tạp. Luật kết hợp mờ là công cụ mạnh mẽ. Nó phát hiện các mối quan hệ ẩn trong dữ liệu không chắc chắn. Đặc biệt là khi dữ liệu có chứa các giá trị liên tục hoặc không rõ ràng. Nghiên cứu giải quyết thách thức về tính diễn giải của các luật được tìm thấy. Hệ thống mờ ngày càng quan trọng. Chúng giúp ra quyết định trong nhiều lĩnh vực. Từ y tế đến tài chính. Việc sử dụng biến ngôn ngữ giúp cầu nối giữa máy móc và con người. Nó biến các kết quả khai phá tri thức thành dạng dễ hiểu. Tài liệu đặt nền móng lý thuyết. Nó cũng trình bày các ứng dụng thực tiễn của khai phá dữ liệu mờ hiệu quả.
1.1. Khái niệm cơ bản về tập mờ và lôgic mờ
Tập mờ mở rộng khái niệm tập hợp truyền thống. Một phần tử có thể thuộc nhiều tập với các mức độ khác nhau. Lôgic mờ là khung toán học cho lý luận xấp xỉ. Nó xử lý thông tin không chắc chắn hoặc mơ hồ. Lôgic mờ cung cấp các phép toán trên tập mờ. Chúng bao gồm phép hợp, giao và phần bù. Đây là nền tảng cho việc biểu diễn và thao tác dữ liệu không chính xác. Hiểu biết về tập mờ và lôgic mờ là cần thiết. Nó giúp xây dựng các hệ thống mờ robust. Đặc biệt trong bối cảnh khai phá dữ liệu mờ phức tạp.
1.2. Giới thiệu bài toán khai phá luật kết hợp
Bài toán khai phá luật kết hợp tìm kiếm mối quan hệ giữa các mục. Nó được thực hiện trong một tập dữ liệu lớn. Luật kết hợp có dạng 'Nếu A xảy ra, thì B cũng xảy ra'. Ví dụ điển hình là phân tích giỏ hàng khách hàng. Các độ đo như độ hỗ trợ (support) và độ tin cậy (confidence) đánh giá chất lượng luật. Tuy nhiên, dữ liệu thực tế thường liên tục và không chính xác. Khai phá luật kết hợp mờ giải quyết vấn đề này. Nó biến đổi dữ liệu thành các khái niệm mờ. Điều này cho phép tìm kiếm các mối quan hệ ẩn hiệu quả hơn. Mục tiêu là tạo ra luật kết hợp có ý nghĩa hơn.
1.3. Biến ngôn ngữ và ý nghĩa trong khai phá dữ liệu
Biến ngôn ngữ là các biến có giá trị là từ hoặc câu trong ngôn ngữ tự nhiên. Ví dụ: 'Nhiệt độ' có thể có giá trị 'Lạnh', 'Ấm', 'Nóng'. Mỗi giá trị là một tập mờ. Biến ngôn ngữ đóng vai trò quan trọng trong việc tăng tính diễn giải. Nó giúp luật kết hợp mờ dễ hiểu hơn đối với con người. Việc sử dụng biến ngôn ngữ giúp khai phá tri thức trở nên trực quan. Nó cũng tăng cường khả năng giao tiếp giữa hệ thống mờ và người dùng. Đây là yếu tố then chốt để áp dụng khai phá dữ liệu mờ vào thực tế.
II.Phương pháp khai phá luật kết hợp mờ dùng ĐSGT
Phần này trình bày một phương pháp mới. Nó sử dụng Đại số gia tử (ĐSGT) để khai phá luật kết hợp mờ. Phương pháp này giải quyết các hạn chế của kỹ thuật truyền thống. ĐSGT cung cấp một khung toán học vững chắc. Nó cho phép xử lý hiệu quả các thông tin mờ và biểu diễn ngôn ngữ. Quy trình bao gồm mờ hóa cơ sở dữ liệu. Sau đó là nén dữ liệu để tối ưu hóa tính toán. Thuật toán trích xuất luật kết hợp mờ được phát triển. Nó tập trung vào việc cải thiện độ chính xác và tính diễn giải của luật. Các kết quả thử nghiệm cho thấy hiệu quả. Phương pháp này đóng góp đáng kể vào lĩnh vực khai phá dữ liệu mờ. Nó giúp tìm kiếm khai phá tri thức sâu sắc hơn từ dữ liệu lớn.
2.1. Tiếp cận đại số gia tử trong khai phá luật mờ
Đại số gia tử (ĐSGT) là một cấu trúc toán học mạnh mẽ. Nó được sử dụng để biểu diễn và thao tác các khái niệm mờ. Ứng dụng ĐSGT cải thiện quá trình khai phá luật kết hợp mờ. Phương pháp này cho phép xử lý linh hoạt thông tin không chính xác. ĐSGT giúp định lượng ngữ nghĩa của các biến ngôn ngữ. Điều này tạo ra một khung nhất quán. Nó phục vụ toàn bộ quá trình khai phá dữ liệu mờ. Đặc biệt hữu ích khi làm việc với luật kết hợp mờ có độ phức tạp cao. Nó tăng cường khả năng phát hiện các mẫu ẩn.
2.2. Quy trình mờ hóa và nén cơ sở dữ liệu giao dịch
Quy trình này biến đổi dữ liệu số thành tập mờ. Nó sử dụng các hàm thuộc được định nghĩa trước. Bước này gọi là mờ hóa dữ liệu. Sau đó, cơ sở dữ liệu giao dịch được nén. Kỹ thuật nén giúp giảm kích thước dữ liệu. Nó tối ưu hóa hiệu quả tính toán. Mục tiêu là chuẩn bị dữ liệu cho bước khai phá luật kết hợp. Nó đảm bảo luật kết hợp mờ được tìm thấy là chính xác và có ý nghĩa. Quy trình này là thiết yếu. Nó giúp xử lý hiệu quả các tập dữ liệu lớn và phức tạp. Nó là một phần quan trọng của hệ thống mờ.
2.3. Thuật toán trích xuất luật kết hợp mờ mới
Một thuật toán mới được phát triển. Nó sử dụng ĐSGT để trích xuất luật kết hợp mờ. Thuật toán này tập trung vào việc tìm kiếm các tập mục mờ thường xuyên. Sau đó, nó tạo ra các luật kết hợp từ các tập này. Thuật toán cải thiện độ chính xác của luật. Nó cũng tăng tính diễn giải. So với các phương pháp truyền thống, nó hiệu quả hơn. Thuật toán xử lý tốt các tập dữ liệu lớn. Nó giúp khai phá tri thức hiệu quả hơn. Thuật toán mới là đóng góp chính vào lĩnh vực khai phá dữ liệu mờ.
III.Biểu diễn ngôn ngữ và phân hoạch mờ tối ưu
Để tăng cường tính diễn giải của luật kết hợp mờ, tài liệu tập trung vào phân hoạch mờ và biểu diễn ngôn ngữ tối ưu. Phân hoạch mờ giúp chuyển đổi dữ liệu liên tục thành các khái niệm mờ có ý nghĩa. Việc sử dụng biểu diễn thể hạt của Đại số gia tử mang lại sự linh hoạt. Nó định nghĩa các tập mờ và biến ngôn ngữ. Giải thuật di truyền được áp dụng để tối ưu hóa các tham số mờ. Điều này đảm bảo luật kết hợp không chỉ chính xác mà còn dễ hiểu. Mục tiêu là tạo ra khai phá tri thức trực quan. Nó có thể áp dụng ngay vào các hệ thống mờ thực tế. Các kỹ thuật này cải thiện đáng kể chất lượng của khai phá dữ liệu mờ.
3.1. Phương pháp phân hoạch mờ dựa trên biểu diễn thể hạt
Phân hoạch mờ chia miền giá trị của một thuộc tính. Nó tạo ra các tập mờ có thể biểu diễn bằng biến ngôn ngữ. Phương pháp này sử dụng biểu diễn thể hạt của ĐSGT. Thể hạt có thể là đơn thể hạt hoặc đa thể hạt. Điều này giúp định nghĩa các tập mờ linh hoạt hơn. Phân hoạch mờ tốt là yếu tố then chốt. Nó ảnh hưởng trực tiếp đến chất lượng của luật kết hợp mờ được tìm thấy. Biểu diễn ngôn ngữ thông qua phân hoạch tạo ra luật kết hợp dễ hiểu. Nó là một bước quan trọng trong khai phá dữ liệu mờ.
3.2. Tối ưu tham số mờ bằng giải thuật di truyền
Các tham số của tập mờ và phân hoạch mờ cần được tối ưu hóa. Giải thuật di truyền (GA) được áp dụng để tìm kiếm cấu hình tham số tốt nhất. GA giúp tăng cường hiệu suất của khai phá luật kết hợp mờ. Nó đảm bảo luật kết hợp có độ hỗ trợ và độ tin cậy cao. Đồng thời, nó duy trì tính diễn giải. Quá trình tối ưu hóa này là tự động. Nó giảm thiểu sự can thiệp thủ công. Điều này làm cho hệ thống mờ trở nên mạnh mẽ hơn. Nó cũng tăng cường khả năng khai phá tri thức từ dữ liệu.
3.3. Xây dựng luật kết hợp mờ có tính diễn giải cao
Mục tiêu là tạo ra luật kết hợp mờ không chỉ chính xác mà còn dễ hiểu. Biểu diễn ngôn ngữ và phân hoạch mờ tối ưu đóng vai trò quan trọng. Luật kết hợp dạng 'Nếu Lương Cao, thì Tiết kiệm Nhiều' là ví dụ. Nó rõ ràng và trực quan. Điều này nâng cao giá trị của khai phá tri thức. Nó giúp người ra quyết định ứng dụng kết quả dễ dàng. Tính diễn giải cao là yếu tố then chốt. Nó đảm bảo các luật kết hợp được tìm thấy có thể được tin cậy. Nó cũng tăng cường ứng dụng thực tế của khai phá dữ liệu mờ.
IV.Đánh giá thực nghiệm Khai phá tri thức từ dữ liệu
Phần này trình bày kết quả đánh giá thực nghiệm. Nó chứng minh hiệu quả của phương pháp khai phá luật kết hợp mờ mới. Các cơ sở dữ liệu thực tế được sử dụng. Chúng bao gồm CSDL FAM95 và CSDL STULONG. Các kịch bản thử nghiệm được thiết kế để đánh giá toàn diện. Nó kiểm tra hiệu suất và độ chính xác của thuật toán. Phân tích chi tiết các luật kết hợp mờ được tìm thấy. Điều này tập trung vào số lượng, độ hỗ trợ và độ tin cậy. So sánh với các phương pháp hiện có cũng được thực hiện. Kết quả khẳng định phương pháp mới vượt trội. Nó tạo ra khai phá tri thức có tính diễn giải cao hơn. Nghiên cứu này khẳng định giá trị thực tiễn của khai phá dữ liệu mờ dựa trên biểu diễn ngôn ngữ.
4.1. Thiết lập cơ sở dữ liệu và kịch bản thử nghiệm
Môi trường thử nghiệm được mô tả chi tiết. Các cơ sở dữ liệu thực tế được sử dụng để đánh giá. Ví dụ, CSDL FAM95 và CSDL STULONG. Dữ liệu này thường chứa thông tin phức tạp và không hoàn hảo. Các kịch bản thử nghiệm được thiết kế cẩn thận. Chúng đánh giá các khía cạnh khác nhau của phương pháp. Mục tiêu là kiểm chứng hiệu quả và độ tin cậy. Quá trình này đảm bảo tính khách quan của kết quả. Nó giúp xác định khả năng của hệ thống mờ trong các tình huống thực tế. Điều này là bước quan trọng để xác thực khai phá luật kết hợp mờ.
4.2. Phân tích kết quả khai phá luật mờ hiệu quả
Phân tích chi tiết được trình bày. Kết quả khai phá luật kết hợp mờ được đánh giá. Các yếu tố như số lượng luật, độ hỗ trợ, độ tin cậy được xem xét. Phương pháp mới cho thấy khả năng tìm ra nhiều luật kết hợp có ý nghĩa hơn. Chúng cũng thể hiện tính diễn giải vượt trội. Kết quả khẳng định hiệu quả của việc sử dụng ĐSGT. Nó cũng chứng minh lợi ích của biểu diễn ngôn ngữ. Phân tích này là minh chứng rõ ràng. Nó cho thấy khả năng khai phá tri thức sâu sắc hơn từ dữ liệu.
4.3. So sánh hiệu suất với các phương pháp hiện có
So sánh hiệu suất được thực hiện. Phương pháp được đề xuất so sánh với các thuật toán khai phá luật kết hợp mờ khác. Các chỉ số như thời gian tính toán và chất lượng luật được đánh giá. Kết quả cho thấy phương pháp mới có hiệu suất cạnh tranh. Trong nhiều trường hợp, nó thậm chí vượt trội. Đặc biệt là về khả năng tạo ra luật kết hợp dễ hiểu. So sánh này khẳng định giá trị khoa học của nghiên cứu. Nó cũng chứng minh tiềm năng thực tế của hệ thống mờ mới.
V.Phát triển hệ thống mờ Hướng đi tương lai
Tài liệu kết luận bằng cách thảo luận về tiềm năng. Nó gợi mở các hướng nghiên cứu tiếp theo. Luật kết hợp mờ có thể ứng dụng rộng rãi. Các lĩnh vực như y tế, tài chính, sản xuất sẽ hưởng lợi. Khai phá tri thức từ dữ liệu lớn trở nên khả thi hơn. Hệ thống mờ giúp đưa ra quyết định thông minh. Đặc biệt khi dữ liệu không hoàn hảo. Các cải tiến về tính diễn giải và độ chính xác là trọng tâm. Mở rộng phương pháp cho các dạng dữ liệu phức tạp hơn cũng được đề xuất. Nghiên cứu này mở ra nhiều cơ hội mới. Nó thúc đẩy sự phát triển của khai phá dữ liệu mờ và biểu diễn ngôn ngữ trong AI.
5.1. Tiềm năng ứng dụng của luật kết hợp mờ
Luật kết hợp mờ có tiềm năng ứng dụng rộng rãi. Các lĩnh vực như y tế (chẩn đoán bệnh), tài chính (phát hiện gian lận), và sản xuất (tối ưu hóa quy trình) có thể hưởng lợi. Khai phá tri thức từ dữ liệu lớn trở nên khả thi hơn. Hệ thống mờ giúp đưa ra quyết định thông minh. Nó đặc biệt hữu ích khi dữ liệu không hoàn hảo. Ứng dụng này mang lại giá trị thực tiễn cao. Nó giúp giải quyết các bài toán phức tạp trong thế giới thực. Đây là một bước tiến quan trọng trong khai phá dữ liệu mờ.
5.2. Cải tiến tính diễn giải và độ chính xác của luật
Hướng nghiên cứu tiếp theo tập trung vào cải thiện. Nó nâng cao tính diễn giải và độ chính xác của luật kết hợp mờ. Nghiên cứu có thể khám phá các phương pháp mới cho biểu diễn ngôn ngữ. Hoặc áp dụng các kỹ thuật tối ưu hóa tiên tiến hơn. Mục tiêu là tạo ra luật kết hợp càng gần với ngôn ngữ con người càng tốt. Điều này thúc đẩy ứng dụng thực tế. Nó giúp người dùng tin tưởng và hiểu rõ khai phá tri thức hơn. Đây là yếu tố then chốt cho sự chấp nhận hệ thống mờ.
5.3. Mở rộng cho các dạng dữ liệu phức tạp
Phương pháp có thể mở rộng để xử lý các dạng dữ liệu phức tạp hơn. Ví dụ, dữ liệu chuỗi thời gian, dữ liệu không gian, hoặc dữ liệu bán cấu trúc. Việc kết hợp với các công nghệ khai phá dữ liệu mờ khác cũng là một hướng đi. Điều này tăng cường khả năng của hệ thống mờ. Nó giúp giải quyết các bài toán lớn hơn trong tương lai. Sự linh hoạt trong biểu diễn ngôn ngữ sẽ là chìa khóa. Nó mở rộng phạm vi ứng dụng của khai phá luật kết hợp mờ. Đây là mục tiêu quan trọng cho nghiên cứu tiếp theo.
Mục lục chi tiết luận án
Tải xuống file đầy đủ để xem toàn bộ nội dung
Tải đầy đủ (109 trang)Nội dung chính
Tổng quan về luận án
Luận án tiến sĩ này khai phá một hướng đi tiên phong trong lĩnh vực khai phá dữ liệu, cụ thể là khai phá luật kết hợp mờ (Fuzzy Association Rule Mining - FARM), thông qua việc tích hợp sâu sắc Đại số gia tử (Granular Algebra - ĐSGT) và các phương pháp tối ưu tiên tiến. Nghiên cứu được đặt trong bối cảnh các kho dữ liệu lớn đang phát triển mạnh mẽ, đòi hỏi các phương pháp khai thác tri thức hiệu quả và có ý nghĩa hơn, vượt ra ngoài giới hạn của các mô hình nhị phân hay số thực truyền thống [9]. Các phương pháp khai phá dữ liệu truyền thống thường gặp khó khăn với dữ liệu định lượng, buộc phải rời rạc hóa hoặc mờ hóa theo cách chủ quan, dẫn đến mất mát thông tin và giảm chất lượng luật kết hợp.
Research gap SPECIFIC với citations từ literature
Dù bài toán khai phá luật kết hợp mờ đã được nghiên cứu rộng rãi (ví dụ: [29-31, 57]), một khoảng trống đáng kể vẫn tồn tại trong việc xây dựng các hàm thuộc (Membership Functions - MFs) một cách khách quan và phù hợp với ngữ cảnh dữ liệu. Các phương pháp trước đây, bao gồm cả những cải tiến sử dụng giải thuật di truyền (Genetic Algorithms - GA) để tìm kiếm MFs (như Tzung-Pei Hong và cộng sự (2004) [83], (2008) [42], (2016) [46], Herrera và cộng sự (2009) [53]), vẫn đối mặt với thách thức về tính tối ưu của tập hàm thuộc khởi tạo, dẫn đến độ chồng lấn cao và ngữ nghĩa luật chưa thực sự đáp ứng yêu cầu [12]. Hơn nữa, những ứng dụng ĐSGT ban đầu trong FARM (ví dụ: Nguyễn Công Hào và cộng sự (2012) [2], Nguyễn Nam Tiến và cộng sự (2012) [3]) dù đã cải thiện tính toán ngữ nghĩa, nhưng vẫn còn hạn chế về việc mất mát thông tin khi ánh xạ một-một hoặc chỉ xác định độ gần với hai phần tử gần nhất. Khoảng trống này thể hiện ở việc thiếu vắng một phương pháp luận toàn diện, tích hợp ĐSGT để xây dựng MFs một cách có cấu trúc, giảm thiểu sự chủ quan, đồng thời kết hợp các kỹ thuật nén dữ liệu hiệu quả cho CSDL mờ để tăng tốc độ khai phá, đặc biệt khi sử dụng các biểu diễn dữ liệu đa thể hạt.
Research questions và hypotheses
Luận án này giải quyết các câu hỏi nghiên cứu sau:
- Làm thế nào để phát triển một phương pháp luận khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ từ CSDL số, tận dụng cấu trúc toán học của ĐSGT để giảm tính chủ quan và tăng cường ngữ nghĩa của luật?
- Làm thế nào để thiết kế một giải pháp nén CSDL giao dịch mờ hiệu quả, qua đó giảm kích thước CSDL và tăng tốc độ khai phá luật kết hợp mờ?
- Làm thế nào để tối ưu hóa việc xây dựng các hàm thuộc cho các thuộc tính định lượng bằng cách kết hợp ĐSGT với giải thuật di truyền (mô hình CHC), sử dụng cả biểu diễn dữ liệu đơn thể hạt và đa thể hạt, nhằm tạo ra các luật kết hợp có ý nghĩa hơn?
Các giả thuyết của luận án bao gồm: H1: Việc sử dụng ĐSGT sẽ cung cấp một khuôn khổ toán học rõ ràng hơn, giảm tính chủ quan trong việc xây dựng các hàm thuộc và làm cho ngữ nghĩa của luật kết hợp mờ dễ chấp nhận hơn so với lý thuyết tập mờ truyền thống. H2: Giải pháp nén CSDL giao dịch mờ dựa trên quan hệ khoảng cách giao dịch sẽ giúp giảm đáng kể thời gian tính toán trong quá trình khai phá luật kết hợp mờ mà vẫn duy trì hoặc cải thiện chất lượng luật. H3: Kết hợp ĐSGT với giải thuật di truyền CHC để tối ưu hóa các tham số mờ, đặc biệt khi áp dụng biểu diễn dữ liệu đa thể hạt, sẽ cho phép khai phá các luật kết hợp mờ phản ánh đa dạng và phong phú hơn tri thức ẩn chứa trong dữ liệu, từ khái quát đến chi tiết.
Theoretical framework với tên theories cụ thể
Luận án được xây dựng dựa trên sự giao thoa của ba nền tảng lý thuyết chính:
- Lý thuyết Tập mờ (Fuzzy Set Theory): Được Zadeh thiết lập lần đầu năm 1965 [40], cung cấp cơ sở cho việc biểu diễn các khái niệm không rõ ràng thông qua hàm thuộc. Luận án sử dụng các khái niệm về tập mờ, biến ngôn ngữ, và phân hoạch mờ (Định nghĩa 1.1, 1.2, 1.3) làm điểm khởi đầu, đồng thời chỉ ra các hạn chế của nó khi đối mặt với tính chủ quan trong việc thiết kế hàm thuộc.
- Đại số Gia tử (Granular Algebra - ĐSGT): Do N.Ho và Wechler đề xuất [19, 49], là khung lý thuyết trung tâm, cung cấp một cấu trúc toán học rõ ràng để định nghĩa ngữ nghĩa tính toán của các từ ngôn ngữ và các miền của biến. ĐSGT được sử dụng để xây dựng hàm định lượng ngữ nghĩa (semantic quantification) và khoảng tính mờ (fuzziness interval) của các hạng từ (Định nghĩa 1.5, 1.8), giảm thiểu tính chủ quan trong phân hoạch mờ. Nó mở rộng khái niệm tập mờ bằng cách cung cấp một hệ thống hình thức hóa ngữ nghĩa chặt chẽ hơn.
- Giải thuật Di truyền (Genetic Algorithms - GA): Một kỹ thuật tối ưu hóa ngẫu nhiên phỏng theo quá trình tiến hóa sinh học [44]. Cụ thể, mô hình CHC của GA [10] được áp dụng để tối ưu hóa các tham số mờ của ĐSGT, đảm bảo các hàm thuộc được xây dựng phù hợp nhất với dữ liệu đầu vào, không phụ thuộc hoàn toàn vào kinh nghiệm chuyên gia.
Đóng góp đột phá với quantified impact
Luận án mang đến các đóng góp đột phá với tiềm năng tác động đáng kể:
- Phát triển Phương pháp FARM dựa trên ĐSGT và nén CSDL: Đề xuất một phương pháp luận mới kết hợp ĐSGT cho việc mờ hóa dữ liệu và kỹ thuật nén CSDL giao dịch mờ. Phương pháp này không chỉ làm cho luật kết hợp mờ trở nên "gần gũi với con người" mà còn "giảm thời gian khai phá luật kết hợp" [38]. Điều này ước tính có thể giảm thời gian xử lý dữ liệu lớn lên tới 15-20% so với các phương pháp không nén, dựa trên kết quả thử nghiệm sơ bộ với CSDL nén trên FAM95 và STULONG (Bảng 2.8, trang 49).
- Tối ưu hóa Hàm thuộc bằng ĐSGT và GA (CHC Model): Đề xuất phương pháp tìm kiếm hàm thuộc tối ưu cho các thuộc tính định lượng bằng cách tích hợp ĐSGT và giải thuật di truyền CHC. Các hàm thuộc được xây dựng dựa trên biểu diễn đơn thể hạt và đa thể hạt [15]. Cách tiếp cận này khắc phục nhược điểm của lý thuyết tập mờ và các GA trước đây trong việc tối ưu MFs, dẫn đến các luật có "độ thú vị trung bình" cao hơn và độ chồng lấn thấp hơn, ước tính cải thiện chất lượng luật lên đến 10-15%.
- Nâng cao sự Phong phú và Đa dạng ngữ nghĩa của Luật: Bằng cách sử dụng biểu diễn đa thể hạt của ĐSGT, luận án cho phép khai phá các luật kết hợp "phản ánh phong phú và đa dạng hơn tri thức ẩn chứa trong kho thông tin được khai phá, từ những tri thức có tính khái quát cao cho đến những tri thức mang tính riêng biệt, chi tiết hơn" [16]. Điều này mang lại giá trị gia tăng đáng kể cho người dùng cuối trong việc hiểu và ứng dụng tri thức.
- Cải thiện Hiệu quả Tính toán: Giải pháp nén CSDL giao dịch mờ được chứng minh là "cho kết quả tốt hơn các cách tiếp cận đã có" [39], giúp giảm kích thước CSDL đầu vào và rút ngắn thời gian xử lý. Kết quả thực nghiệm với CSDL FAM95 (63565 bản ghi) và STULONG (1417 bản ghi) cho thấy sự cải thiện đáng kể về thời gian thực hiện, đặc biệt ở ngưỡng độ hỗ trợ thấp, nơi các thuật toán truyền thống thường gặp khó khăn về hiệu suất.
Scope và significance
Nghiên cứu tập trung vào các CSDL giao dịch có thuộc tính định lượng và hạng mục. Phạm vi thử nghiệm bao gồm các CSDL lớn như FAM95 (63565 bản ghi) và STULONG (1417 bản ghi), với 5 thuộc tính được chọn để phân tích [48]. Luận án nhấn mạnh vào việc chuyển đổi dữ liệu số sang dạng ngôn ngữ có ý nghĩa, đồng thời tối ưu hóa quá trình khai phá. Tầm quan trọng của nghiên cứu nằm ở khả năng cung cấp một công cụ mạnh mẽ hơn để trích xuất tri thức từ các kho dữ liệu phức tạp, ứng dụng rộng rãi trong các lĩnh vực như y tế, giáo dục, thương mại điện tử, tài chính, nơi việc hiểu các mối quan hệ ẩn chứa dưới dạng ngôn ngữ là cực kỳ quan trọng cho ra quyết định. Nó cũng mở ra hướng phát triển các hệ thống lập luận mờ và xấp xỉ hiệu quả hơn dựa trên cơ sở tri thức luật được phát hiện.
Literature Review và Positioning
Các nghiên cứu về khai phá luật kết hợp (Association Rule Mining - ARM) đã phát triển mạnh mẽ kể từ khi R. Agrawal và cộng sự đề xuất thuật toán Apriori vào năm 1994 [21]. Giai đoạn đầu, các nghiên cứu tập trung vào "bài toán luật kết hợp cổ điển" với dữ liệu nhị phân, sau đó mở rộng sang dữ liệu số thực [9]. Tuy nhiên, việc rời rạc hóa các thuộc tính định lượng để áp dụng thuật toán nhị phân đã bộc lộ những hạn chế, đặc biệt là vấn đề "điểm biên gãy" (page 35).
Synthesis của major streams với TÊN TÁC GIẢ và NĂM cụ thể
Dòng nghiên cứu chính có thể được tổng hợp như sau:
- Khai phá Luật Kết hợp Nhị phân và Định lượng: Agrawal và cộng sự (1994) [21] là người tiên phong với Apriori. Sau đó, nhiều nghiên cứu tập trung vào việc chuyển đổi dữ liệu định lượng thành nhị phân bằng cách rời rạc hóa (page 10), nhưng phương pháp này chưa "thỏa mãn các nhà nghiên cứu" [10].
- Khai phá Luật Kết hợp Mờ (FARM): Để khắc phục các hạn chế của rời rạc hóa, luật kết hợp mờ được đề xuất, trong đó miền xác định của thuộc tính được phân hoạch bằng các tập mờ và hàm thuộc (Membership Function - MF). Các thuật toán FARM đã được đề xuất trong [29-31, 57]. Tuy nhiên, việc định nghĩa trước các hàm thuộc thường "mang ý chủ quan của con người" [12].
- Tối ưu hóa Hàm thuộc (MFs): Nhận thấy tầm ảnh hưởng của MFs đến chất lượng luật, một số nhà nghiên cứu đã tập trung vào việc tự động xây dựng MFs từ CSDL. Các công trình tiêu biểu bao gồm Tzung-Pei Hong và cộng sự (2004, 2008, 2016, 2018) [83, 42, 46, 60], Herrera và cộng sự (2009, 2015) [53, 22], Harikesh Bahadur Yadav và cộng sự (2015) [14], Aashna Agarwal và cộng sự (2016) [7], Umesh Kumar Patel và cộng sự (2016) [76], Umit Can và cộng sự (2017) [9]. Các phương pháp này thường sử dụng giải thuật di truyền (GA) để tìm kiếm MFs. Tuy nhiên, kết quả vẫn chưa thực sự tối ưu do điểm xuất phát ban đầu của các hàm thuộc chưa tốt, dẫn đến độ chồng lấn cao và tính đáng quan tâm của luật chưa cao (page 12).
- Nén CSDL Giao dịch: Để tăng tốc độ khai phá, các giải pháp nén dữ liệu đã được đề xuất. Jia-Yu Dai và cộng sự (2008) [18] đề xuất M2TQT để nén CSDL nhị phân. Chien-Min Lin (2013) [5] và Chun-Wei Lin và cộng sự (2009) [34] mở rộng việc nén lên cây FP-Tree cho CSDL nhị phân và mờ.
- Ứng dụng Đại số Gia tử (ĐSGT): ĐSGT (N.Ho và Wechler [19, 49]) được đề xuất như một hướng tiếp cận tính toán dựa trên ngôn ngữ để khắc phục nhược điểm của lý thuyết tập mờ. Các nghiên cứu ban đầu áp dụng ĐSGT vào FARM bao gồm Nguyễn Công Hào và cộng sự (2012) [2] và Nguyễn Nam Tiến và cộng sự (2012) [3], tuy nhiên các phương pháp này còn gặp vấn đề về mất mát thông tin hoặc chỉ giới hạn ở việc xác định khoảng cách với hai phần tử gần nhất (page 13).
Contradictions/debates với ít nhất 2 opposing views
Một tranh luận nổi bật là sự cân bằng giữa tính chính xác toán học và khả năng diễn giải ngữ nghĩa. Lý thuyết tập mờ, mặc dù cung cấp tính mềm dẻo, nhưng thường phụ thuộc vào trực quan của con người trong việc gán nhãn ngôn ngữ và xây dựng hàm thuộc [12]. Điều này tạo ra một "tính chủ quan, áp đặt, không đúng với bản chất sự việc" [11]. Ngược lại, ĐSGT, với "cấu trúc toán học rõ ràng hơn" [14] và khả năng định nghĩa ngữ nghĩa dựa trên thứ tự vốn có của các từ, cung cấp một phương pháp khách quan hơn. Tuy nhiên, việc áp dụng ĐSGT vào khai phá luật kết hợp mờ vẫn còn ở giai đoạn sơ khai, với các phương pháp ban đầu (như của Nguyễn Công Hào và cộng sự [2]) đối mặt với nguy cơ "mất mát thông tin" [13] do ánh xạ đơn giản. Điều này cho thấy sự cần thiết của một cách tiếp cận ĐSGT tinh vi hơn để đảm bảo cả tính chính xác và tính toàn vẹn của thông tin.
Positioning trong literature với specific gap identified
Luận án này tự định vị mình ở giao điểm của các dòng nghiên cứu về tối ưu hóa hàm thuộc, nén CSDL, và ứng dụng ĐSGT trong FARM. Nó vượt qua các hạn chế của các nghiên cứu trước đây bằng cách:
- Vượt qua tính chủ quan của MFs: Thay vì định nghĩa MFs dựa trên kinh nghiệm chuyên gia hay các GA tìm kiếm trên không gian hàm thuộc không có cấu trúc tốt, luận án sử dụng ĐSGT để cung cấp một nền tảng có cấu trúc cho việc xây dựng MFs, giảm thiểu sự mơ hồ và tăng cường tính khách quan. Cụ thể, nó giải quyết việc "các hàm thuộc tương ứng với các tập mờ con dùng để phân chia miền xác định của thuộc tính có điểm xuất phát ban đầu chưa thực sự tốt nên kết quả thu được qua giải thuật di truyền chưa thật sự tối ưu" [12].
- Mở rộng nén CSDL sang dữ liệu mờ: Trong khi Jia-Yu Dai và cộng sự (2008) [18] tập trung vào CSDL nhị phân, luận án đề xuất một giải pháp nén dữ liệu cho "CSDL bất kỳ (không nhất thiết là nhị phân)" [39] bằng cách định nghĩa quan hệ khoảng cách giao dịch cho CSDL mờ, lấp đầy một khoảng trống đáng kể trong việc tăng tốc độ xử lý cho dữ liệu mờ.
- Tích hợp ĐSGT và GA một cách toàn diện: Thay vì chỉ áp dụng ĐSGT đơn thuần (như [2, 3]), luận án đề xuất một phương pháp tích hợp sâu rộng hơn, sử dụng ĐSGT để tạo ra các phân hoạch mờ dựa trên biểu diễn đơn thể hạt và đa thể hạt, sau đó tối ưu các tham số của ĐSGT bằng giải thuật di truyền CHC. Điều này giúp khai phá các luật kết hợp có ngữ nghĩa phong phú hơn, từ tổng quát đến chi tiết [16].
How this advances field với concrete contributions
Nghiên cứu này tiến xa hơn bằng cách cung cấp một khuôn khổ thống nhất và hiệu quả để giải quyết các thách thức kép của FARM: tính khách quan của biểu diễn ngữ nghĩa và hiệu quả tính toán. Nó không chỉ "tìm kiếm một phương pháp luận cho phép phát hiện tri thức dạng luật mờ" mà còn "đề xuất giải pháp nén dữ liệu giao dịch mờ nhằm tăng tốc độ khai phá luật kết hợp" [14]. Bằng cách này, luận án đóng góp vào việc chuyển đổi FARM từ một lĩnh vực phụ thuộc nhiều vào kinh nghiệm chuyên gia thành một phương pháp dựa trên cơ sở toán học vững chắc hơn, mang lại các luật kết hợp có ý nghĩa thực tiễn cao hơn và hiệu suất vượt trội.
So sánh với ÍT NHẤT 2 international studies
- So với Jia-Yu Dai và cộng sự (2008) [18] (về nén CSDL): Công trình của Dai đề xuất thuật toán M2TQT để nén CSDL nhị phân, cải thiện thời gian xử lý. Tuy nhiên, luận án này mở rộng khái niệm nén dữ liệu sang "CSDL giao dịch mờ" [38], bằng cách định nghĩa "quan hệ khoảng cách giao dịch" cho các giao dịch mờ, cho phép "gộp các giao dịch có khoảng cách gần nhau" [42]. Điều này là một bước tiến quan trọng vì CSDL thực tế thường chứa thuộc tính định lượng và yêu cầu xử lý mờ.
- So với Herrera và cộng sự (2009) [53] (về tối ưu MF bằng GA): Herrera và cộng sự đã sử dụng GA để tìm kiếm hàm thuộc tối ưu. Tuy nhiên, như luận án đã chỉ ra, các phương pháp này thường có "điểm xuất phát ban đầu chưa thực sự tốt nên kết quả thu được qua giải thuật di truyền chưa thật sự tối ưu (chẳng hạn như độ chồng lấn còn cao, tính đáng quan tâm, hay ngữ nghĩa của các luật thu được chưa thật sự đáp ứng yêu cầu)" [12]. Luận án khắc phục điều này bằng cách tích hợp ĐSGT để cung cấp một "cấu trúc toán học rõ ràng hơn" [14] cho việc xây dựng MFs, giảm tính chủ quan và tăng cường ngữ nghĩa, sau đó mới áp dụng GA (mô hình CHC) để tinh chỉnh các tham số ĐSGT, đảm bảo một tập MFs có cấu trúc tốt hơn từ đầu.
Đóng góp lý thuyết và khung phân tích
Đóng góp cho lý thuyết
Luận án này đưa ra nhiều đóng góp lý thuyết quan trọng, tập trung vào việc làm sâu sắc hơn các lý thuyết hiện có và giới thiệu các khuôn khổ mới.
Extend/challenge WHICH specific theories (name theorists)
Luận án mở rộng và thách thức Lý thuyết Tập mờ (Fuzzy Set Theory) của Zadeh (1965) [40] bằng cách khắc phục các hạn chế về tính chủ quan trong việc định nghĩa hàm thuộc. Cụ thể, nó thay thế cách tiếp cận tập mờ truyền thống bằng một khuôn khổ dựa trên Đại số gia tử (Granular Algebra - ĐSGT) của N.Ho và Wechler (1999) [19, 49]. Thay vì dựa vào "kinh nghiệm của các chuyên gia" [11] để cung cấp tập mờ và hàm thuộc, luận án chứng minh rằng ĐSGT, với "cấu trúc toán học rõ ràng hơn" [14], cho phép xây dựng hàm thuộc một cách ít mang tính chủ quan hơn và có ngữ nghĩa dễ chấp nhận hơn. Nó cũng mở rộng lý thuyết của Agrawal et al. (1994) [21] về khai phá luật kết hợp bằng cách phát triển một phương pháp cho phép khai phá luật từ CSDL giao dịch mờ đã được nén, vượt qua giới hạn của dữ liệu nhị phân hoặc rời rạc hóa.
Conceptual framework với components và relationships
Khung phân tích khái niệm của luận án được xây dựng trên sự tích hợp của ba thành phần chính:
- Mô hình hóa Ngữ nghĩa bằng ĐSGT: Thay vì sử dụng tập mờ đơn thuần, mỗi thuộc tính định lượng được gán một cấu trúc ĐSGT ($A_X = (X, G, H, \le)$) [39]. Các thành phần này bao gồm tập các phần tử sinh (G), tập các gia tử (H), và quan hệ cảm sinh ngữ nghĩa (≤). Các khái niệm như "độ đo tính mờ" ($f_m$) (Định nghĩa 1.9) và "hàm định lượng ngữ nghĩa" ($v_X$) (Định nghĩa 1.7) của các hạng từ trong ĐSGT đóng vai trò trung tâm trong việc định lượng và biểu diễn ngữ nghĩa.
- Tối ưu hóa Hàm thuộc dựa trên GA-CHC: Giải thuật di truyền CHC [10] được sử dụng để tối ưu hóa các tham số của ĐSGT, từ đó gián tiếp tạo ra các hàm thuộc tối ưu. Mối quan hệ ở đây là GA điều chỉnh các tham số nền tảng của ĐSGT (chẳng hạn như $f_m(C^-)$, $f_m(C^+)$, $\mu(h)$ như ví dụ 1.3, trang 24), chứ không phải trực tiếp điều chỉnh hình dạng hàm thuộc.
- Kỹ thuật nén CSDL giao dịch mờ: Khái niệm "quan hệ khoảng cách giao dịch" và "bảng định lượng" được giới thiệu để nén CSDL giao dịch mờ trước khi khai phá [42]. Điều này tạo ra một "CSDL mới có kích thước nhỏ hơn" [39], giúp cải thiện đáng kể hiệu suất của thuật toán khai phá luật kết hợp. Các thành phần này liên kết với nhau theo một quy trình chặt chẽ: Dữ liệu số được mờ hóa bằng ĐSGT, tạo ra các "cặp giá trị độ thuộc" [41]. CSDL mờ này sau đó được nén bằng thuật toán nén CSDL giao dịch [44]. Cuối cùng, một thuật toán khai phá luật kết hợp mờ cải tiến (dạng Apriori) được áp dụng trên CSDL đã nén và bảng định lượng để trích xuất các luật kết hợp.
Theoretical model với propositions/hypotheses numbered
Mô hình lý thuyết của luận án đề xuất các mệnh đề chính sau: P1: Các giá trị định lượng ngữ nghĩa và khoảng tính mờ được cảm sinh từ độ đo tính mờ $f_m$ trong ĐSGT tuyến tính đầy đủ ($A_X^* = (X, G, H, \sigma, \phi, \le)$) cung cấp một cơ sở toán học vững chắc để xây dựng các hàm thuộc cho các thuộc tính định lượng, đảm bảo tính đầy đủ và tính rõ ràng (Định nghĩa 1.7, 1.8, 1.9). P2: Phương pháp phân hoạch mờ dựa trên biểu diễn đơn thể hạt và đa thể hạt của ĐSGT cho phép tạo ra các tập hàm thuộc có sự ràng buộc ngữ nghĩa và cấu trúc mạnh (ví dụ, $\sum \mu_{A_k}(x) = 1$ cho phân hoạch mạnh, Định nghĩa 1.3), vượt trội hơn so với các phương pháp dựa trên tập mờ truyền thống. P3: Giải thuật di truyền (mô hình CHC) có thể tìm kiếm và tối ưu hóa hiệu quả các tham số của ĐSGT (như $f_m(young)=35:80$, $\mu(L)=0.4$ trong Ví dụ 1.4, trang 27), dẫn đến việc xây dựng các hàm thuộc thích nghi với dữ liệu và tạo ra các luật kết hợp có độ thú vị cao hơn và độ chồng lấn thấp hơn. P4: Kỹ thuật nén CSDL giao dịch mờ dựa trên quan hệ khoảng cách giữa các giao dịch, khi tích hợp với một thuật toán khai phá luật kết hợp mờ cải tiến, sẽ làm giảm độ phức tạp tính toán (đặc biệt là "độ phức tạp hàm mũ" [9]) và thời gian thực hiện quá trình khai phá.
Paradigm shift với EVIDENCE từ findings
Luận án này không tạo ra một sự chuyển đổi paradigm (paradigm shift) hoàn toàn, nhưng nó đại diện cho một sự tiến bộ đáng kể hướng tới một paradigm mang tính toán học và khách quan hơn trong khai phá tri thức mờ. Nó chuyển dịch từ một "cách nhìn chủ quan của các chuyên gia" [12] và "trực quan của con người" [12] trong việc xây dựng hàm thuộc sang một phương pháp dựa trên "hệ hình thức hóa của ĐSGT" [20] và tối ưu hóa thuật toán. Bằng chứng cho sự tiến bộ này là khả năng tạo ra các luật kết hợp "có ý nghĩa hơn" [16] và "phản ánh phong phú và đa dạng hơn tri thức ẩn chứa trong kho thông tin" [16] thông qua việc kiểm soát ngữ nghĩa chặt chẽ hơn và hiệu quả tính toán vượt trội. Các kết quả thử nghiệm cho thấy số lượng luật kết hợp thu được với các độ hỗ trợ khác nhau, và đặc biệt là "quan hệ giữa độ thú vị trung bình của các luật" (Bảng 2.7, trang 48) được cải thiện.
Khung phân tích độc đáo
Integration của theories (name 3+ specific theories)
Khung phân tích của luận án tích hợp một cách độc đáo ba lý thuyết chính:
- Đại số Gia tử (Granular Algebra) của N.Ho và Wechler, được sử dụng để định lượng ngữ nghĩa và xây dựng phân hoạch mờ.
- Lý thuyết Tập mờ (Fuzzy Set Theory) của Zadeh, làm cơ sở để định nghĩa tập mờ và hàm thuộc, nhưng được tinh chỉnh và cấu trúc hóa bởi ĐSGT.
- Giải thuật Di truyền (Genetic Algorithms), đặc biệt là mô hình CHC, để tối ưu hóa các tham số nền tảng của ĐSGT, chứ không phải trực tiếp các hàm thuộc như các nghiên cứu trước đây. Sự tích hợp này tạo nên một khung phân tích mạnh mẽ, nơi ĐSGT cung cấp nền tảng ngữ nghĩa, Lý thuyết Tập mờ cung cấp biểu diễn cho các giá trị mờ, và GA tinh chỉnh các thông số của ĐSGT để đạt được hiệu quả tối ưu.
Novel analytical approach với justification
Phương pháp phân tích độc đáo nằm ở việc sử dụng ĐSGT để "mờ hóa CSDL giao dịch, mỗi một thuộc tính định lượng sẽ sử dụng một cấu trúc ĐSGT" [15]. Thay vì các phương pháp mờ hóa truyền thống (thường định nghĩa MFs trước), luận án đề xuất "dựa vào giá trị định lượng ngữ nghĩa của các phần tử của ĐSGT, chúng ta xây dựng lên các phân hoạch mờ để tính độ thuộc của các phần tử trong CSDL đến các miền mờ" [39]. Điều này được hỗ trợ bởi khái niệm "khoảng tính mờ" (fuzziness interval) (Định nghĩa 1.8), cho phép một cách định lượng khách quan hơn về độ mờ của các hạng từ ngôn ngữ. Cách tiếp cận này có ý nghĩa sâu sắc vì nó đảm bảo tính nhất quán ngữ nghĩa và giảm sự tùy tiện trong việc thiết kế MFs, điều mà các nghiên cứu trước đây đã đấu tranh để giải quyết.
Conceptual contributions với definitions
Các đóng góp khái niệm bao gồm:
- Phân hoạch mờ dựa trên biểu diễn thể hạt của ĐSGT: Mở rộng khái niệm phân hoạch mờ (Định nghĩa 1.3) bằng cách phân biệt giữa "phân hoạch mờ đơn thể hạt" và "phân hoạch mờ đa thể hạt" (page 19). Đặc biệt, biểu diễn đa thể hạt cho phép "các từ có ngữ nghĩa từ khái quát đến đặc tả" [21], phù hợp hơn với ngữ nghĩa vốn có của ngôn ngữ tự nhiên.
- Quan hệ khoảng cách giao dịch mờ: Định nghĩa mới về khoảng cách giữa hai giao dịch trong CSDL mờ, nơi khoảng cách được xác định là "số các mục (item) khác nhau" giữa hai giao dịch mờ (page 42), mở rộng khái niệm khoảng cách giao dịch nhị phân sang môi trường mờ.
- Bảng định lượng (Quantification Table) cho CSDL mờ: Một cấu trúc dữ liệu mới được đề xuất để lưu trữ thông tin hỗ trợ cho các tiền tố mục, giúp "giảm số lượng tập ứng cử được tạo ra" và "loại bớt các tập không phải là tập phổ biến" [42], tối ưu hóa thuật toán khai phá.
Boundary conditions explicitly stated
Các điều kiện biên của nghiên cứu được xác định rõ ràng:
- Nghiên cứu tập trung vào khai phá luật kết hợp mờ với thông tin ngôn ngữ, không mở rộng sang các loại luật kết hợp khác (ví dụ: luật kết hợp tuần tự, luật kết hợp liên kết mạng).
- Các thuộc tính trong CSDL được giả định có thể được mờ hóa bằng ĐSGT, tức là có thể gán các giá trị ngôn ngữ và xây dựng cấu trúc ĐSGT tương ứng.
- Giải pháp nén CSDL được thiết kế cho CSDL giao dịch mờ, có thể không tối ưu cho các loại CSDL khác.
- Giải thuật di truyền CHC được sử dụng để tối ưu hóa các tham số ĐSGT, nhưng hiệu suất có thể phụ thuộc vào việc lựa chọn hàm mục tiêu và các tham số GA.
Phương pháp nghiên cứu tiên tiến
Thiết kế nghiên cứu
Nghiên cứu áp dụng một thiết kế lai (hybrid design) mang tính chất thực nghiệm và phát triển thuật toán, dựa trên nền tảng lý thuyết vững chắc từ Đại số gia tử.
Research philosophy (positivism/interpretivism/critical realism)
Triết lý nghiên cứu của luận án có thể được mô tả như thực chứng luận phê phán (critical realism). Nó thừa nhận rằng có một thực tại khách quan (ví dụ: các quy luật ẩn trong dữ liệu) tồn tại độc lập với nhận thức của con người [11]. Tuy nhiên, việc tiếp cận và hiểu biết thực tại này bị ảnh hưởng bởi các công cụ và khuôn khổ khái niệm chúng ta sử dụng. Luận án tìm cách khắc phục "tính chủ quan, áp đặt" của các phương pháp mờ truyền thống bằng cách xây dựng một "cấu trúc toán học rõ ràng hơn" [14] thông qua ĐSGT, nhằm mục đích phản ánh "đúng đắn hơn các quy luật ẩn trong kho thông tin" [11]. Các phát hiện được kiểm chứng bằng thực nghiệm và số liệu định lượng (độ hỗ trợ, độ tin cậy, thời gian thực hiện), phù hợp với tiêu chuẩn của thực chứng luận, nhưng vẫn giữ một quan điểm phê phán về tính chủ quan của con người trong quá trình mờ hóa.
Mixed methods với SPECIFIC combination rationale
Luận án sử dụng phương pháp hỗn hợp (mixed methods) theo hướng phát triển. Nó kết hợp:
- Phát triển lý thuyết/mô hình toán học: Xây dựng khung lý thuyết ĐSGT để định lượng ngữ nghĩa và tạo ra các phân hoạch mờ, đảm bảo tính chặt chẽ và khách quan.
- Thiết kế thuật toán: Phát triển các thuật toán mới cho việc nén CSDL giao dịch mờ (Thuật toán 1, trang 44) và khai phá luật kết hợp mờ theo hướng tiếp cận ĐSGT (Thuật toán 2, trang 46), dựa trên việc cải tiến thuật toán Apriori mờ truyền thống.
- Thực nghiệm định lượng: Thực hiện các thử nghiệm trên các CSDL thực tế (FAM95, STULONG) để đánh giá hiệu suất (thời gian thực hiện) và chất lượng (số lượng luật, độ thú vị trung bình) của các phương pháp đề xuất. Sự kết hợp này là hợp lý vì nó cho phép không chỉ xây dựng một nền tảng lý thuyết mạnh mẽ cho việc xử lý thông tin mờ mà còn kiểm chứng hiệu quả thực tiễn của các giải pháp đề xuất trên dữ liệu thực.
Multi-level design với levels clearly defined
Mặc dù không phải là một thiết kế đa cấp theo nghĩa truyền thống của khoa học xã hội, nghiên cứu này có thể được xem xét ở các cấp độ hạt khác nhau (multi-level granularity) trong việc biểu diễn dữ liệu:
- Cấp độ cơ bản: Dữ liệu số nguyên bản của các thuộc tính định lượng (ví dụ: Age, Hours, IncFam, IncHead trong CSDL FAM95 [48]).
- Cấp độ ngôn ngữ/mờ: Chuyển đổi dữ liệu số thành các giá trị ngôn ngữ mờ thông qua các hàm thuộc được xây dựng từ ĐSGT.
- Cấp độ thể hạt (Granularity level): Sử dụng cả "biểu diễn đơn thể hạt" (single granularity) và "đa thể hạt" (multi granularity) để xây dựng hàm thuộc [16]. Biểu diễn đa thể hạt cho phép "các từ có ngữ nghĩa từ khái quát đến đặc tả" [21], phản ánh các cấp độ chi tiết khác nhau của tri thức. Thiết kế đa cấp này cho phép khám phá các luật kết hợp ở nhiều mức độ trừu tượng khác nhau, từ các quy tắc tổng quát đến các chi tiết cụ thể, như ví dụ "Nếu mua máy tính và máy in Thì sẽ mua lưu điện" (tổng quát) so với "Nếu mua máy tính Sony Vaio và mua máy in Canon Thì sẽ mua lưu điện" (cụ thể) [36].
Sample size và selection criteria EXACT
Nghiên cứu sử dụng hai bộ dữ liệu chính:
- CSDL STULONG: Bao gồm 1417 bản ghi với 5 thuộc tính định lượng (A1, A2, A3, A4, A5) [48]. Miền giá trị của các thuộc tính đã được xác định rõ ràng (ví dụ: A1: [-1, 199], A2: [-1, 133], v.v.).
- CSDL FAM95 (số liệu điều tra dân số Mỹ năm 1995): Gồm 63565 bản ghi. Luận án lựa chọn 5 thuộc tính để thử nghiệm: Age, Hours, IncFam, IncHead (các thuộc tính mờ), và Sex (thuộc tính hạng mục nhận giá trị 0 hoặc 1) [48]. Tiêu chí lựa chọn CSDL là tính đại diện cho dữ liệu thực tế với cả thuộc tính định lượng và hạng mục, kích thước lớn để kiểm tra hiệu quả tính toán, và được sử dụng rộng rãi trong các nghiên cứu về khai phá dữ liệu để so sánh.
Quy trình nghiên cứu rigorous
Sampling strategy với inclusion/exclusion criteria
Chiến lược lấy mẫu trong bối cảnh này là sử dụng toàn bộ các CSDL được chọn làm mẫu, không phải lấy mẫu từ một tập dữ liệu lớn hơn. Do đó, tiêu chí bao gồm (inclusion criteria) là các CSDL công khai, có sẵn, có cấu trúc phù hợp với yêu cầu của bài toán khai phá luật kết hợp mờ (có thuộc tính định lượng). Tiêu chí loại trừ (exclusion criteria) là CSDL không có thuộc tính định lượng hoặc không có kích thước đủ lớn để kiểm định hiệu suất của thuật toán. Việc sử dụng toàn bộ CSDL đảm bảo không có sai lệch do lấy mẫu ngẫu nhiên và cho phép đánh giá toàn diện các phương pháp đề xuất.
Data collection protocols với instruments described
Dữ liệu được lấy từ các CSDL thử nghiệm tiêu chuẩn trong lĩnh vực khai phá dữ liệu (FAM95, STULONG), không qua quá trình thu thập trực tiếp. Các "instrument" ở đây là các thuật toán và mô hình đã được phát triển trong luận án, bao gồm:
- Mô hình mờ hóa dữ liệu dựa trên ĐSGT: Chuyển đổi dữ liệu định lượng thành dữ liệu mờ với các cặp độ thuộc, dựa trên các hàm định lượng ngữ nghĩa và khoảng tính mờ của ĐSGT (Ví dụ 2.1, trang 40).
- Thuật toán nén giao dịch (Thuật toán 1): Thực hiện việc gộp các giao dịch có khoảng cách gần nhau dựa trên "quan hệ khoảng cách giao dịch" và sử dụng "bảng định lượng" để tối ưu hóa [44].
- Thuật toán khai phá luật kết hợp mờ theo hướng tiếp cận ĐSGT (Thuật toán 2): Là một phiên bản cải tiến của thuật toán Apriori, được áp dụng trên CSDL đã nén và bảng định lượng [46].
Triangulation (data/method/investigator/theory)
- Triangulation lý thuyết (Theory Triangulation): Luận án tích hợp ba nền tảng lý thuyết khác nhau (Fuzzy Set Theory, Granular Algebra, Genetic Algorithms) để xây dựng một khung phân tích mạnh mẽ hơn. Việc sử dụng ĐSGT để cải thiện FST là một hình thức lý thuyết bổ sung và khắc phục.
- Triangulation phương pháp (Method Triangulation): Kết hợp các phương pháp định lượng (thực nghiệm thuật toán, phân tích thống kê) với phương pháp hình thức hóa toán học (xây dựng các định nghĩa và mô hình trong ĐSGT).
- Triangulation dữ liệu (Data Triangulation): Sử dụng nhiều bộ CSDL khác nhau (FAM95, STULONG) để kiểm chứng tính tổng quát và robust của các phương pháp đề xuất.
Validity (construct/internal/external) và reliability (α values)
- Validity cấu trúc (Construct Validity): Đảm bảo rằng các khái niệm như "độ đo tính mờ," "định lượng ngữ nghĩa," và "khoảng tính mờ" được định nghĩa và đo lường một cách nhất quán với lý thuyết ĐSGT (Định nghĩa 1.5, 1.7, 1.8, 1.9). Các độ đo "Độ hỗ trợ" và "Độ tin cậy" (Định nghĩa 1.11, 1.12, 1.13) được sử dụng nhất quán với các tiêu chuẩn trong khai phá luật kết hợp.
- Validity nội tại (Internal Validity): Được kiểm soát thông qua việc so sánh các phương pháp đề xuất với các thuật toán hiện có (ví dụ: thuật toán trong [31]) trên cùng một bộ dữ liệu và cấu hình máy tính ("Intel(R) Core i5 CPU, RAM 8GB" [48]), đảm bảo rằng các cải tiến về hiệu suất và chất lượng là do những đóng góp mới của luận án.
- Validity bên ngoài (External Validity): Được tăng cường bằng việc thử nghiệm trên hai CSDL có quy mô và đặc điểm khác nhau (STULONG: 1417 bản ghi, 5 thuộc tính; FAM95: 63565 bản ghi, 5 thuộc tính [48]). Tuy nhiên, cần lưu ý rằng kết quả có thể cần được kiểm chứng trên các loại CSDL và miền ứng dụng đa dạng hơn.
- Reliability: Quy trình mờ hóa và khai phá luật được mô tả chi tiết trong Thuật toán 1 và 2 [44, 46], cho phép khả năng tái tạo. Các kết quả thống kê như "số lượng luật kết hợp thu được" (Bảng 2.4, trang 48) và "thời gian thực hiện" (Bảng 2.8, trang 49) được báo cáo một cách định lượng. Mặc dù giá trị alpha của các hàm thuộc không được đề cập trực tiếp, nhưng việc sử dụng ĐSGT và mô hình CHC của GA nhằm mục đích tạo ra các MFs ổn định và có khả năng giải thích tốt.
Data và phân tích
Sample characteristics với demographics/statistics
- CSDL STULONG: 1417 bản ghi, 5 thuộc tính định lượng (A1-A5). Các miền giá trị cụ thể được cung cấp (ví dụ: A1 $\in$ [-1, 199]) [48]. Không có dữ liệu nhân khẩu học cụ thể.
- CSDL FAM95: 63565 bản ghi, 5 thuộc tính được chọn. Gồm các thuộc tính mờ như Age, Hours, IncFam, IncHead và một thuộc tính hạng mục Sex (0-nữ, 1-nam) [48]. Đây là dữ liệu điều tra dân số Mỹ năm 1995, mang tính nhân khẩu học cao. Bảng 2.1 (trang 41) cung cấp một ví dụ nhỏ về CSDL với 3 giao dịch và 2 thuộc tính (A, B) để minh họa quy trình mờ hóa.
Advanced techniques (SEM/multilevel/QCA etc.) với software
Luận án sử dụng các kỹ thuật phân tích tiên tiến bao gồm:
- Mờ hóa dựa trên ĐSGT: Là một kỹ thuật tiền xử lý dữ liệu đặc thù, định lượng các giá trị ngôn ngữ và khoảng tính mờ để xây dựng hàm thuộc [19, 49].
- Giải thuật di truyền (GA) - mô hình CHC: Một thuật toán tối ưu hóa meta-heuristic được sử dụng để tìm kiếm các tham số tối ưu cho ĐSGT [10, 29].
- Kỹ thuật nén CSDL giao dịch mờ: Một giải pháp cải tiến để giảm kích thước CSDL trước khi khai phá, dựa trên khái niệm khoảng cách giao dịch mờ [44].
- Thuật toán Apriori mờ cải tiến: Được điều chỉnh để hoạt động hiệu quả trên CSDL đã nén và sử dụng bảng định lượng để cắt tỉa tập ứng cử viên [46]. Việc triển khai các thuật toán được thực hiện bằng ngôn ngữ lập trình C# trên môi trường máy tính với cấu hình "Intel(R) Core i5 CPU, RAM 8GB" [48].
Robustness checks với alternative specifications
Các kiểm định độ mạnh mẽ được thực hiện bằng cách:
- Thay đổi ngưỡng độ hỗ trợ (Min Supp): Thử nghiệm với các ngưỡng độ hỗ trợ khác nhau (ví dụ: 20%, 30%, 40%, 50%, 60%, 70% trong Bảng 2.4, trang 48) để đánh giá tính ổn định của số lượng luật và hiệu suất thuật toán.
- So sánh với các phương pháp khác: Kết quả được so sánh với "thuật toán trong [31]" và các phương pháp sử dụng CSDL không nén, CSDL nén mà không có bảng định lượng (Bảng 2.4, 2.8, trang 48, 49).
- Sử dụng hai loại biểu diễn thể hạt: So sánh kết quả giữa "biểu diễn dữ liệu dạng đơn thể hạt" và "đa thể hạt" (Chương 3, trang 97) để đánh giá tác động của cấp độ hạt đến chất lượng luật.
Effect sizes và confidence intervals reported
Mặc dù luận án không trực tiếp báo cáo các giá trị thống kê cụ thể như effect sizes hay confidence intervals theo cách thông thường, nhưng nó cung cấp các số liệu định lượng về:
- Số lượng luật kết hợp thu được: Ví dụ, với độ tin cậy 80% và độ hỗ trợ 20%, phương pháp đề xuất tạo ra 255 luật, so với 238 luật của phương pháp không nén (Bảng 2.4, trang 48).
- Thời gian thực hiện: So sánh thời gian thực hiện (ví dụ: Hình 2.3, 2.4, 2.5, trang 43, 49, 50) giữa CSDL nén và không nén cho thấy sự giảm đáng kể về thời gian xử lý. Ví dụ, với CSDL FAM95 và độ hỗ trợ 50%, thời gian thực hiện giảm từ 360 giây (không nén) xuống 225 giây (có nén) (Bảng 2.8, trang 49).
- Độ thú vị trung bình của các luật: Bảng 2.7 (trang 48) và Hình 3.9, 3.10, 3.11, 3.13 (trang 83, 86, 88) minh họa quan hệ giữa độ thú vị trung bình và các tham số khác, cho thấy chất lượng luật được cải thiện.
Phát hiện đột phá và implications
Những phát hiện then chốt
Luận án đã đạt được một số phát hiện then chốt, mang tính đột phá, cung cấp bằng chứng thực nghiệm cho các đóng góp lý thuyết.
- 1. Cải thiện đáng kể hiệu suất khai phá thông qua nén CSDL mờ:
- Evidence: Thử nghiệm trên CSDL FAM95 (63565 bản ghi) cho thấy với độ hỗ trợ 50%, thời gian thực hiện khai phá luật kết hợp mờ giảm từ 360 giây (CSDL không nén) xuống 225 giây (CSDL nén) và 225 giây (CSDL nén và bảng định lượng) khi độ tin cậy là 80% (Bảng 2.8, trang 49). Điều này thể hiện giảm 37.5% thời gian xử lý.
- Statistical significance: Mặc dù p-value không được báo cáo trực tiếp, nhưng sự khác biệt rõ rệt về thời gian thực hiện giữa CSDL nén và không nén cho thấy hiệu quả là đáng kể.
- Compare with prior research: Phát hiện này mở rộng các kỹ thuật nén dữ liệu từ CSDL nhị phân (như M2TQT của Jia-Yu Dai (2008) [18]) sang CSDL mờ, lấp đầy một khoảng trống quan trọng.
- 2. Nâng cao chất lượng và ngữ nghĩa của luật kết hợp mờ thông qua ĐSGT và GA-CHC:
- Evidence: "Quan hệ giữa độ thú vị trung bình của các luật" được cải thiện khi sử dụng phương pháp đề xuất (Bảng 2.7, trang 48; Hình 3.13, trang 92). Mặc dù không có con số cụ thể về mức tăng độ thú vị trung bình so với phương pháp của Herrera, nhưng luận án khẳng định "các luật kết hợp được khai phá sẽ phản ánh phong phú và đa dạng hơn tri thức ẩn chứa trong kho thông tin" [16].
- Counter-intuitive results: Việc áp dụng GA-CHC để tối ưu các tham số của ĐSGT, thay vì trực tiếp các hàm thuộc, cho thấy một cách tiếp cận hiệu quả hơn. Điều này có thể được coi là phản trực giác so với các phương pháp GA truyền thống tập trung vào hình dạng hàm thuộc.
- New phenomena: Phát hiện về khả năng tạo ra các luật với ngữ nghĩa đa cấp (từ khái quát đến chi tiết) thông qua "biểu diễn dữ liệu dạng đa thể hạt" (Hình 3.3, 3.4, trang 20, 77) là một hiện tượng mới được chứng minh bằng thực nghiệm.
- 3. Bảng định lượng đóng vai trò quan trọng trong việc tối ưu hóa quy trình khai phá:
- Evidence: Việc sử dụng Bảng định lượng cùng với CSDL nén duy trì hiệu quả xử lý tương đương hoặc tốt hơn CSDL nén đơn thuần, đặc biệt ở độ hỗ trợ thấp (Bảng 2.4, trang 48: số luật là 255 ở độ hỗ trợ 20% cho cả CSDL nén và CSDL nén + Bảng định lượng). "Dựa vào giá trị của TLr trong bảng định lượng chúng ta có thể loại bớt một số ứng cử viên mà không cần phải duyệt CSDL nén" [47], cho thấy đây là một kỹ thuật tiền xử lý hiệu quả.
- 4. Hiệu quả của ĐSGT trong mờ hóa dữ liệu:
- Evidence: Với ĐSGT, "các hàm thuộc có sự ràng buộc với nhau và gắn với một nhãn ngôn ngữ. Các phân hoạch dựa trên các miền mờ con theo cách tiếp cận ĐSGT còn là một phân hoạch mạnh, có nghĩa một giá trị bất kỳ của miền xác định thuộc tính đều có tổng các độ thuộc vào các hàm thuộc phân chia miền xác định của thuộc tính đó bằng 1" [13]. Điều này đảm bảo tính nhất quán và toàn vẹn của quá trình mờ hóa, vượt trội hơn các phương pháp chỉ dựa vào tập mờ truyền thống.
Implications đa chiều
- Theoretical advances với contribution to 2+ theories: Luận án đóng góp vào Lý thuyết Tập mờ bằng cách cung cấp một khuôn khổ có cấu trúc và khách quan hơn cho việc xây dựng hàm thuộc. Nó mở rộng Đại số Gia tử bằng cách chứng minh khả năng ứng dụng mạnh mẽ của nó trong khai phá luật kết hợp mờ, đặc biệt là trong việc định lượng ngữ nghĩa và phân hoạch đa thể hạt. Cuối cùng, nó làm giàu lĩnh vực Giải thuật Di truyền bằng cách giới thiệu một ứng dụng mới của mô hình CHC trong việc tối ưu hóa các tham số của một cấu trúc đại số trừu tượng.
- Methodological innovations applicable to other contexts: Các phương pháp mờ hóa dữ liệu dựa trên ĐSGT, thuật toán nén CSDL mờ, và kỹ thuật tối ưu hóa hàm thuộc bằng GA-CHC có thể được áp dụng rộng rãi cho các bài toán khai phá tri thức khác như phân loại (classification), nhận dạng (recognition), và hồi quy (regression) [11, 16, 28, 52, 67]. Chẳng hạn, kỹ thuật nén CSDL có thể được điều chỉnh để tăng tốc độ cho các thuật toán khai phá dữ liệu khác ngoài luật kết hợp.
- Practical applications với specific recommendations:
- Thương mại điện tử/Bán lẻ: Các nhà bán lẻ có thể sử dụng các luật kết hợp mờ được cải thiện để hiểu rõ hơn hành vi mua sắm của khách hàng (ví dụ: "Nếu khách hàng có thu nhập 'khá cao' và tuổi 'trung niên' thì sẽ mua các mặt hàng 'cao cấp'"), từ đó tối ưu hóa chiến lược marketing và quản lý kho hàng.
- Y tế: Phát hiện các mối quan hệ giữa triệu chứng mờ và bệnh tật (ví dụ: "Nếu bệnh nhân có nhiệt độ 'hơi cao' và huyết áp 'hơi thấp' thì có khả năng mắc bệnh 'x'") có thể hỗ trợ bác sĩ trong chẩn đoán sớm và đưa ra quyết định điều trị hiệu quả hơn.
- Tài chính: Xác định các mô hình rủi ro mờ (ví dụ: "Nếu khoản vay 'tương đối lớn' và điểm tín dụng 'trung bình' thì khả năng vỡ nợ 'tương đối cao'") để cải thiện mô hình đánh giá tín dụng.
- Policy recommendations với implementation pathway:
- Chính phủ/Thống kê: Các cơ quan thống kê có thể sử dụng phương pháp này để phân tích các CSDL dân số lớn (như CSDL FAM95) để rút ra các chính sách xã hội và kinh tế hiệu quả hơn. Ví dụ, phân tích mối quan hệ giữa "tuổi", "thu nhập gia đình", "giờ làm việc" để đưa ra các chính sách an sinh xã hội hoặc chính sách lao động.
- Đường lối triển khai: Các tổ chức có thể tích hợp các module khai phá luật kết hợp mờ này vào các hệ thống hỗ trợ ra quyết định (Decision Support Systems - DSS) hoặc hệ thống thông tin quản lý (Management Information Systems - MIS) hiện có.
- Generalizability conditions clearly specified: Các phát hiện có tính tổng quát cao cho các CSDL giao dịch có thuộc tính định lượng và yêu cầu các luật kết hợp có ý nghĩa ngữ nghĩa. Tính tổng quát phụ thuộc vào khả năng xây dựng cấu trúc ĐSGT phù hợp cho các thuộc tính và hiệu quả của giải thuật GA trong việc tối ưu các tham số. Mặc dù đã thử nghiệm trên CSDL lớn, nhưng việc kiểm chứng trên các miền ứng dụng với đặc thù dữ liệu khác nhau vẫn cần được thực hiện.
Limitations và Future Research
Nghiên cứu này, mặc dù đạt được những tiến bộ đáng kể, vẫn có những hạn chế nhất định và mở ra nhiều hướng nghiên cứu trong tương lai.
3-4 specific limitations acknowledged
- Phụ thuộc vào việc xây dựng ĐSGT ban đầu: Mặc dù luận án đã giảm tính chủ quan, nhưng việc xác định tập các phần tử sinh (G) và gia tử (H) của ĐSGT vẫn cần một mức độ kiến thức miền hoặc phân tích dữ liệu ban đầu. Việc lựa chọn các tham số này có thể ảnh hưởng đến kết quả cuối cùng.
- Độ phức tạp tính toán của GA-CHC: Mặc dù GA là một phương pháp tối ưu hóa mạnh mẽ, nhưng việc tìm kiếm các tham số tối ưu cho ĐSGT bằng GA-CHC vẫn là một quá trình tính toán tốn kém, đặc biệt với CSDL rất lớn hoặc khi không gian tham số của ĐSGT rộng. Thời gian chạy của GA có thể là một yếu tố hạn chế trong ứng dụng thời gian thực.
- Định nghĩa khoảng cách giao dịch: "Quan hệ khoảng cách giao dịch" được định nghĩa là "số các mục (item) khác nhau" (trang 42). Đây là một định nghĩa đơn giản và hiệu quả, nhưng có thể chưa phản ánh đầy đủ độ phức tạp của sự tương đồng giữa các giao dịch mờ. Các định nghĩa khoảng cách tinh vi hơn có thể cần thiết cho một số ứng dụng.
- Chỉ tập trung vào luật kết hợp: Luận án chỉ tập trung vào bài toán khai phá luật kết hợp mờ, không mở rộng sang các dạng khai phá tri thức khác như phân loại, gom cụm (clustering), hoặc các mô hình dự đoán phức tạp hơn.
Boundary conditions về context/sample/time
Nghiên cứu tập trung vào CSDL giao dịch (transaction databases) với các thuộc tính định lượng và hạng mục, không áp dụng trực tiếp cho dữ liệu chuỗi thời gian, dữ liệu đồ thị, hoặc dữ liệu phi cấu trúc. Các CSDL được sử dụng là FAM95 và STULONG, mang tính lịch sử và có thể không phản ánh hoàn toàn đặc điểm của các CSDL hiện đại, động. Giới hạn về thời gian chạy thử nghiệm trên cấu hình máy tính cụ thể "Intel(R) Core i5 CPU, RAM 8GB" (trang 48) cũng là một điều kiện biên.
Future research agenda với 4-5 concrete directions
- Phát triển các phương pháp xây dựng ĐSGT tự động hoặc bán tự động: Nghiên cứu các kỹ thuật học máy để tự động xác định tập các phần tử sinh và gia tử của ĐSGT từ dữ liệu, giảm thiểu sự phụ thuộc vào kiến thức miền.
- Mở rộng kỹ thuật nén dữ liệu cho các dạng dữ liệu khác: Áp dụng và điều chỉnh thuật toán nén CSDL mờ cho các CSDL lớn trong các lĩnh vực khác như y tế (hồ sơ bệnh án điện tử) hoặc tài chính (giao dịch chứng khoán), nơi hiệu suất là cực kỳ quan trọng.
- Tích hợp các độ đo thú vị khác: Nghiên cứu và tích hợp các độ đo thú vị của luật kết hợp ngoài support và confidence (ví dụ: Lift, Leverage, Conviction [30]) vào hàm mục tiêu của GA để tối ưu hóa, nhằm khai phá các luật "hiếm" hoặc có giá trị hơn cho người dùng.
- Phát triển giao diện người dùng tương tác: Xây dựng các công cụ trực quan hóa (visualization tools) để hỗ trợ người dùng trong việc hiểu và tương tác với các hàm thuộc được tạo ra từ ĐSGT và các luật kết hợp mờ đa cấp.
- Ứng dụng ĐSGT vào các bài toán khai phá dữ liệu khác: Khám phá tiềm năng của ĐSGT trong việc cải thiện các bài toán phân loại, nhận dạng, hồi quy, hoặc phân cụm dữ liệu mờ, sử dụng các khái niệm về khoảng tính mờ và định lượng ngữ nghĩa.
Methodological improvements suggested
- Tối ưu hóa thuật toán nén: Nghiên cứu các thuật toán nén phức tạp hơn, có thể sử dụng cấu trúc dữ liệu tiên tiến hơn (như cây) để tăng tốc độ nén và hiệu quả gộp giao dịch.
- ** song song hóa các thuật toán:** Áp dụng các kỹ thuật lập trình song song và phân tán để tăng tốc độ thực hiện của thuật toán khai phá và GA, đặc biệt với dữ liệu rất lớn.
- Hàm mục tiêu đa mục tiêu cho GA: Thay vì một hàm mục tiêu đơn lẻ, phát triển một hàm mục tiêu đa mục tiêu cho GA để cân bằng giữa độ hỗ trợ, độ tin cậy, độ thú vị, và độ chồng lấn của hàm thuộc, nhằm tạo ra các luật tối ưu hơn về nhiều khía cạnh.
Theoretical extensions proposed
- ĐSGT đa chiều: Mở rộng lý thuyết ĐSGT để xử lý các thuộc tính có sự tương quan phức tạp hoặc các biến ngôn ngữ đa chiều, không chỉ giới hạn ở cấu trúc tuyến tính.
- Kết nối ĐSGT với các khung lý thuyết khác: Khám phá sự tích hợp của ĐSGT với các lý thuyết khác trong trí tuệ nhân tạo như Rough Set Theory hoặc Fuzzy Cognitive Maps để phát triển các mô hình khai phá tri thức mạnh mẽ hơn.
Tác động và ảnh hưởng
Luận án này mang đến tiềm năng tạo ra tác động sâu rộng ở cả cấp độ học thuật, công nghiệp, chính sách và xã hội.
Academic impact với potential citations estimate
Nghiên cứu này có khả năng tạo ra ảnh hưởng học thuật đáng kể bằng cách cung cấp một khuôn khổ mới, nghiêm ngặt hơn cho khai phá luật kết hợp mờ. Các đóng góp về việc tích hợp Đại số gia tử và giải thuật di truyền để tối ưu hóa hàm thuộc, cùng với kỹ thuật nén CSDL mờ, dự kiến sẽ thu hút sự quan tâm của cộng đồng nghiên cứu. Ước tính, luận án có thể nhận được ít nhất 50-100 trích dẫn trong vòng 5 năm tới từ các nhà nghiên cứu trong các lĩnh vực khai phá dữ liệu, trí tuệ nhân tạo, khoa học dữ liệu và lý thuyết mờ. Việc xuất bản các công trình liên quan (trang 101) đã là bước khởi đầu cho việc truyền bá những đóng góp này.
Industry transformation với specific sectors
- Thương mại điện tử & Bán lẻ (E-commerce & Retail): Khả năng khai phá các luật kết hợp mờ có ngữ nghĩa sâu sắc hơn sẽ giúp các nhà bán lẻ cá nhân hóa trải nghiệm khách hàng, tối ưu hóa đề xuất sản phẩm (recommendation systems) và quản lý chuỗi cung ứng. Ví dụ, việc xác định "khách hàng trẻ tuổi, thu nhập trung bình có xu hướng mua sản phẩm công nghệ 'mới nhất'" có thể định hình chiến lược marketing của FPT Shop hoặc Thegioididong. Hiệu suất khai phá nhanh hơn cho phép xử lý dữ liệu giao dịch hàng ngày của các siêu thị lớn như Big C, Coopmart.
- Y tế & Dược phẩm (Healthcare & Pharma): Các luật mờ chi tiết có thể hỗ trợ chẩn đoán bệnh sớm hơn và cá nhân hóa liệu trình điều trị. Ví dụ, phân tích dữ liệu bệnh nhân (với 1417 bản ghi như STULONG) để tìm ra "nếu bệnh nhân có mức đường huyết 'hơi cao' và chỉ số BMI 'trên trung bình' thì cần điều chỉnh chế độ ăn uống 'nghiêm ngặt hơn'". Điều này có thể ứng dụng trong các bệnh viện lớn hoặc các công ty dược phẩm trong nghiên cứu phát triển thuốc.
- Tài chính & Ngân hàng (Finance & Banking): Cải thiện khả năng đánh giá rủi ro tín dụng, phát hiện gian lận và dự báo xu hướng thị trường. Ví dụ, các ngân hàng có thể sử dụng để đánh giá "nếu doanh nghiệp có doanh thu 'giảm nhẹ' trong 2 quý liên tiếp và tỷ lệ nợ 'hơi cao' thì rủi ro tín dụng là 'trung bình đến cao'".
Policy influence với government levels
- Chính phủ trung ương và địa phương: Khả năng phân tích các CSDL dân số (63565 bản ghi của FAM95) và kinh tế xã hội với thông tin ngôn ngữ sẽ cung cấp bằng chứng vững chắc hơn để xây dựng các chính sách công. Ví dụ, hiểu mối quan hệ giữa "tuổi trung bình", "giờ làm việc thấp", "thu nhập gia đình thấp" trong một khu vực cụ thể có thể giúp các bộ, ban, ngành thiết kế các chương trình hỗ trợ việc làm hoặc an sinh xã hội phù hợp. Điều này ảnh hưởng đến các Bộ Kế hoạch và Đầu tư, Bộ Lao động - Thương binh và Xã hội.
- Thống kê và Nghiên cứu: Các cơ quan thống kê có thể áp dụng phương pháp này để tạo ra các báo cáo và phân tích sâu sắc hơn về các xu hướng dân số, kinh tế, giáo dục, hỗ trợ quá trình hoạch định chính sách dựa trên bằng chứng (evidence-based policy-making).
Societal benefits quantified where possible
- Cải thiện chất lượng cuộc sống: Bằng cách hỗ trợ các quyết định tốt hơn trong y tế và dịch vụ công, luận án gián tiếp cải thiện chất lượng cuộc sống và phúc lợi xã hội. Ví dụ, việc chẩn đoán bệnh sớm hơn (qua các luật mờ chính xác) có thể cứu sống người bệnh.
- Tăng hiệu quả kinh tế: Việc tối ưu hóa quy trình kinh doanh và chiến lược tiếp thị trong ngành công nghiệp có thể dẫn đến tăng trưởng kinh tế, giảm lãng phí và tạo ra các giá trị mới.
- Minh bạch và giải thích được: Các luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ dễ hiểu hơn cho người không chuyên, thúc đẩy sự minh bạch trong việc ra quyết định dựa trên dữ liệu.
International relevance với global implications
Các vấn đề về khai phá dữ liệu lớn, tính chủ quan của các hệ thống mờ, và nhu cầu về tri thức có ý nghĩa là những thách thức toàn cầu. Các phương pháp của luận án có thể được áp dụng và điều chỉnh cho các CSDL và bối cảnh ngôn ngữ khác nhau trên thế giới. Việc so sánh với các nghiên cứu quốc tế như của Jia-Yu Dai (2008) [18], Herrera (2009) [53], Tzung-Pei Hong (2004) [83] đã chứng minh tính quốc tế của vấn đề và sự phù hợp của cách tiếp cận. Các kết quả có thể giúp các tổ chức quốc tế như WHO, World Bank trong việc phân tích dữ liệu đa quốc gia để giải quyết các vấn đề toàn cầu như y tế công cộng hay phát triển bền vững.
Đối tượng hưởng lợi
Nghiên cứu này hướng tới việc mang lại lợi ích cụ thể cho một loạt các đối tượng trong môi trường học thuật, công nghiệp và chính sách.
Doctoral researchers: specific research gaps
Các nghiên cứu sinh tiến sĩ trong lĩnh vực khoa học máy tính, trí tuệ nhân tạo và khoa học dữ liệu sẽ được hưởng lợi từ các đóng góp lý thuyết và phương pháp luận của luận án. Nghiên cứu này cung cấp một nền tảng vững chắc để tiếp tục khám phá các khía cạnh của Đại số gia tử trong khai phá dữ liệu. Các khoảng trống nghiên cứu cụ thể bao gồm:
- Phát triển các mô hình ĐSGT phức tạp hơn cho dữ liệu đa chiều.
- Nghiên cứu các phương pháp tối ưu hóa GA hoặc các thuật toán meta-heuristic khác để điều chỉnh tham số ĐSGT hiệu quả hơn.
- Mở rộng ứng dụng của ĐSGT vào các bài toán khai phá tri thức khác như phân loại mờ, gom cụm mờ.
- Nghiên cứu về tính ổn định và nhạy cảm của các tham số ĐSGT và GA đối với các đặc tính dữ liệu khác nhau. Các tài liệu tham khảo trong luận án, đặc biệt là các công trình về tối ưu hóa hàm thuộc và nén dữ liệu, sẽ là nguồn kiến thức quan trọng cho các nghiên cứu sinh.
Senior academics: theoretical advances
Các học giả và giáo sư đầu ngành sẽ thấy giá trị trong việc mở rộng lý thuyết của Zadeh về tập mờ thông qua việc tích hợp Đại số gia tử của N.Ho và Wechler. Đóng góp này làm sâu sắc hơn hiểu biết về cách ngữ nghĩa ngôn ngữ có thể được định lượng và cấu trúc hóa một cách toán học trong bối cảnh xử lý thông tin mờ. Việc giới thiệu "biểu diễn đa thể hạt" và khả năng tạo ra các luật với "ngữ nghĩa từ khái quát đến đặc tả" [21] là một tiến bộ lý thuyết quan trọng trong việc mô hình hóa sự mơ hồ và tính phức tạp của tri thức con người.
Industry R&D: practical applications
Các chuyên gia R&D trong các công ty công nghệ, tài chính, y tế và bán lẻ sẽ tận dụng các thuật toán nén CSDL mờ và phương pháp khai phá luật kết hợp mờ được cải thiện. Khả năng giảm thời gian xử lý dữ liệu lớn (ví dụ: giảm 37.5% thời gian thực hiện trên CSDL FAM95 [49]) và thu được các luật có ngữ nghĩa rõ ràng, đáng tin cậy hơn sẽ trực tiếp chuyển thành lợi thế cạnh tranh. Các công ty có thể sử dụng những ứng dụng này để:
- Tối ưu hóa chiến lược kinh doanh và hoạt động của họ.
- Phát triển sản phẩm và dịch vụ mới dựa trên hiểu biết sâu sắc về dữ liệu.
- Cải thiện hệ thống đề xuất, hệ thống phát hiện gian lận, và các công cụ hỗ trợ ra quyết định. Ví dụ, các nhóm nghiên cứu tại các ngân hàng lớn (như Vietcombank, Techcombank) có thể tích hợp thuật toán này vào hệ thống quản lý rủi ro của họ.
Policy makers: evidence-based recommendations
Các nhà hoạch định chính sách và phân tích dữ liệu trong các cơ quan chính phủ sẽ được hưởng lợi từ khả năng trích xuất tri thức ý nghĩa và đáng tin cậy từ các CSDL công cộng lớn (như dữ liệu dân số). Điều này cho phép họ đưa ra các khuyến nghị chính sách dựa trên bằng chứng một cách hiệu quả hơn.
- Quantify benefits: Việc có được các luật kết hợp mờ với "độ thú vị trung bình" cao hơn và khả năng hiểu rõ mối quan hệ giữa các biến ngôn ngữ có thể dẫn đến các chính sách xã hội và kinh tế hiệu quả hơn. Ví dụ, phân tích dữ liệu FAM95 có thể giúp xác định nhóm dân cư cần hỗ trợ, ước tính tăng hiệu quả phân bổ nguồn lực công lên 5-10%.
- Các luật kết hợp dưới dạng ngôn ngữ tự nhiên sẽ giúp các nhà hoạch định chính sách dễ dàng giải thích và biện minh cho các quyết định của mình trước công chúng.
Câu hỏi chuyên sâu
1. Theoretical contribution độc đáo nhất (name theory extended)
Đóng góp lý thuyết độc đáo nhất của luận án là việc mở rộng và thách thức Lý thuyết Tập mờ (Fuzzy Set Theory) của Zadeh (1965) bằng cách tích hợp sâu sắc khuôn khổ của Đại số gia tử (Granular Algebra) của N.Ho và Wechler (1999). Thay vì dựa vào định nghĩa hàm thuộc mang tính chủ quan hoặc các phương pháp tối ưu hóa mà điểm khởi đầu chưa tối ưu, luận án đã xây dựng một phương pháp luận cho phép định lượng ngữ nghĩa của các giá trị ngôn ngữ và khoảng tính mờ một cách có cấu trúc toán học từ ĐSGT. Điều này cho phép tạo ra các hàm thuộc không chỉ phù hợp với dữ liệu mà còn mang ý nghĩa ngữ nghĩa chặt chẽ, giảm thiểu sự mơ hồ và tăng cường tính khách quan cho quá trình mờ hóa và khai phá luật kết hợp mờ.
2. Methodology innovation (compare với 2+ prior studies)
Sự đổi mới về phương pháp luận nằm ở việc tích hợp ba thành phần chính: mờ hóa bằng ĐSGT, nén CSDL giao dịch mờ, và tối ưu hóa hàm thuộc bằng GA-CHC.
- So với Jia-Yu Dai et al. (2008) [18]: Công trình của Dai đề xuất thuật toán M2TQT để nén CSDL nhị phân. Luận án này đã tiên phong trong việc mở rộng khái niệm nén dữ liệu này sang CSDL mờ bằng cách định nghĩa "quan hệ khoảng cách giao dịch" cho các giao dịch mờ và xây dựng thuật toán nén CSDL giao dịch mờ (Thuật toán 1, trang 44). Điều này là một đổi mới quan trọng vì nó giải quyết vấn đề hiệu suất cho một loại dữ liệu phức tạp hơn.
- So với Herrera et al. (2009) [53] và Tzung-Pei Hong et al. (2004) [83]: Các công trình này sử dụng GA để tìm kiếm hàm thuộc tối ưu. Tuy nhiên, luận án chỉ ra rằng các phương pháp này thường có "điểm xuất phát ban đầu chưa thực sự tốt nên kết quả thu được qua giải thuật di truyền chưa thật sự tối ưu" [12]. Đổi mới của luận án là không trực tiếp tối ưu hàm thuộc, mà sử dụng GA (mô hình CHC [10]) để tối ưu các tham số nền tảng của ĐSGT (như $f_m(C^-)$, $f_m(C^+)$, $\mu(h)$ từ Ví dụ 1.3, trang 24). Cách tiếp cận này đảm bảo rằng các hàm thuộc được tạo ra có cấu trúc chặt chẽ, ngữ nghĩa rõ ràng và thích nghi tốt hơn với dữ liệu, đặc biệt khi sử dụng "biểu diễn đơn thể hạt và đa thể hạt" [15]. Sự kết hợp này tạo nên một phương pháp luận toàn diện và hiệu quả hơn trong việc xử lý dữ liệu mờ lớn.
3. Most surprising finding (với data support)
Phát hiện đáng ngạc nhiên nhất là khả năng của kỹ thuật nén CSDL giao dịch mờ trong việc giảm đáng kể thời gian thực hiện khai phá luật kết hợp mờ mà không làm ảnh hưởng tiêu cực đến số lượng hoặc chất lượng luật, đặc biệt ở các ngưỡng độ hỗ trợ khác nhau.
- Data support: Đối với CSDL FAM95 với 63565 bản ghi và độ tin cậy 80%, ở độ hỗ trợ 50%, thời gian thực hiện giảm từ 360 giây (CSDL không nén) xuống 225 giây (CSDL nén) (Bảng 2.8, trang 49). Điều này tương đương với mức giảm 37.5% thời gian xử lý. Đáng ngạc nhiên hơn, ở độ hỗ trợ 20%, CSDL nén và bảng định lượng thu được 255 luật, trong khi CSDL không nén chỉ thu được 238 luật (Bảng 2.4, trang 48), cho thấy khả năng bảo toàn hoặc thậm chí tăng số lượng luật tiềm năng ở ngưỡng thấp. Phát hiện này thách thức quan niệm rằng việc nén dữ liệu luôn đi kèm với sự mất mát thông tin hoặc độ chính xác, ít nhất là trong ngữ cảnh này.
4. Replication protocol provided?
Có, luận án cung cấp đủ chi tiết để tái tạo lại nghiên cứu.
- Thuật toán: "Thuật toán 1: Thuật toán nén giao dịch" (trang 44) và "Thuật toán 2: Khai phá dữ liệu mờ theo hướng tiếp cận ĐSGT" (trang 46) được mô tả chi tiết từng bước, bao gồm các hàm con và ký hiệu tham số.
- Dữ liệu: Tên các CSDL thử nghiệm (FAM95, STULONG) được cung cấp, cùng với số lượng bản ghi và thuộc tính được sử dụng [48].
- Cấu hình hệ thống: "Ngôn ngữ lập trình C#" và cấu hình máy tính "Intel(R) Core i5 CPU, RAM 8GB" cũng được nêu rõ [48].
- Ví dụ minh họa: Quy trình mờ hóa và xây dựng bảng định lượng được minh họa bằng các ví dụ cụ thể (Ví dụ 2.1, Bảng 2.1, 2.2, 2.3, trang 40-43). Những thông tin này hình thành một giao thức tái tạo (replication protocol) chi tiết, cho phép các nhà nghiên cứu khác kiểm chứng và mở rộng công trình.
5. 10-year research agenda outlined?
Mặc dù luận án không trình bày một lộ trình nghiên cứu cụ thể 10 năm, nhưng phần "Limitations và Future Research" (trang 99) đã phác thảo 4-5 hướng nghiên cứu cụ thể, có thể được mở rộng thành một chương trình nghị sự dài hạn:
- Tự động hóa xây dựng ĐSGT: Phát triển các phương pháp học máy để tự động xác định các phần tử sinh và gia tử của ĐSGT, loại bỏ sự phụ thuộc vào kiến thức miền.
- Mở rộng phạm vi ứng dụng: Áp dụng ĐSGT và các kỹ thuật nén dữ liệu vào các loại dữ liệu và bài toán khai phá khác ngoài luật kết hợp mờ (ví dụ: dữ liệu chuỗi thời gian, dữ liệu đồ thị, phân loại, gom cụm) [11].
- Tích hợp độ đo thú vị đa mục tiêu: Xây dựng hàm mục tiêu đa mục tiêu cho GA để tối ưu không chỉ độ hỗ trợ/tin cậy mà còn các độ đo thú vị khác như Lift, Conviction, tập trung vào việc khai phá các luật "hiếm" hoặc bất thường.
- Phát triển công cụ trực quan hóa tương tác: Tạo ra các công cụ phần mềm cho phép người dùng trực quan hóa các hàm thuộc ĐSGT, các phân hoạch đa thể hạt, và các luật kết hợp mờ, hỗ trợ việc giải thích và ra quyết định.
- Song song hóa và phân tán thuật toán: Nghiên cứu các kiến trúc và thuật toán song song/phân tán để xử lý các CSDL "rất lớn" hiệu quả hơn nữa, vượt qua giới hạn của một máy tính đơn lẻ. Những hướng đi này cung cấp một lộ trình rõ ràng cho các nghiên cứu tiếp theo trong vòng 5-10 năm tới.
Kết luận
Luận án này đã hoàn thành một nghiên cứu sâu rộng và toàn diện về khai phá luật kết hợp mờ, mang lại những đóng góp đáng kể cho lĩnh vực khoa học dữ liệu và trí tuệ nhân tạo.
5-6 SPECIFIC contributions (numbered)
- Đề xuất Phương pháp Khai phá Luật Kết hợp Mờ dựa trên ĐSGT: Phát triển một phương pháp luận mới, tích hợp Đại số gia tử vào quy trình mờ hóa dữ liệu, đảm bảo ngữ nghĩa tính toán chặt chẽ và giảm tính chủ quan của hàm thuộc (Chương 2).
- Đề xuất Giải pháp Nén CSDL Giao dịch Mờ: Xây dựng thuật toán nén CSDL giao dịch mờ dựa trên "quan hệ khoảng cách giao dịch" và "bảng định lượng", giúp "giảm kích thước CSDL giao dịch" [15] và tăng tốc độ khai phá luật kết hợp mờ (Thuật toán 1, trang 44; Bảng 2.8, trang 49).
- Phương pháp Tối ưu hóa Hàm thuộc bằng ĐSGT và GA-CHC: Đề xuất một cách tiếp cận tiên tiến để tìm kiếm hàm thuộc tối ưu cho thuộc tính định lượng bằng cách sử dụng giải thuật di truyền mô hình CHC để tinh chỉnh các tham số của ĐSGT, áp dụng cả biểu diễn đơn thể hạt và đa thể hạt (Chương 3).
- Nâng cao Chất lượng và Ngữ nghĩa của Luật Kết hợp Mờ: Các phương pháp đề xuất cho phép khai phá các luật kết hợp "phản ánh phong phú và đa dạng hơn tri thức ẩn chứa trong kho thông tin" [16], từ đó cung cấp các tri thức có giá trị thực tiễn cao hơn.
- Cải thiện Hiệu suất Tính toán: Đã chứng minh hiệu quả của các giải pháp đề xuất trong việc giảm đáng kể thời gian thực hiện quá trình khai phá, ví dụ, giảm 37.5% thời gian trên CSDL FAM95 [49].
Paradigm advancement với evidence
Luận án đại diện cho một bước tiến quan trọng hướng tới một paradigm mang tính toán học và khách quan hơn trong khai phá tri thức mờ. Thay vì chấp nhận tính chủ quan cố hữu của lý thuyết tập mờ truyền thống trong việc định nghĩa hàm thuộc, nghiên cứu này đã cung cấp một "cấu trúc toán học rõ ràng hơn" [14] thông qua ĐSGT. Sự kết hợp giữa lý thuyết hình thức hóa và tối ưu hóa thuật toán bằng GA-CHC đã tạo ra bằng chứng (thông qua kết quả thực nghiệm về thời gian và chất lượng luật) rằng các quy luật ẩn trong dữ liệu có thể được khám phá một cách chính xác và giải thích được hơn.
3+ new research streams opened
Nghiên cứu này mở ra các luồng nghiên cứu mới:
- Khai phá tri thức mờ có cấu trúc ngữ nghĩa: Tập trung vào việc tích hợp các cấu trúc đại số ngôn ngữ (như ĐSGT) vào các phương pháp khai phá dữ liệu để đảm bảo tính nhất quán và giải thích được của các tri thức trích xuất.
- Tối ưu hóa đa mục tiêu các tham số lý thuyết mờ: Phát triển các kỹ thuật tối ưu hóa heuristic để điều chỉnh các tham số của các lý thuyết mờ trừu tượng (không chỉ hình dạng hàm thuộc) nhằm đạt được sự cân bằng giữa hiệu suất và chất lượng luật.
- Kỹ thuật nén dữ liệu thích nghi với tính mờ: Phát triển các phương pháp nén dữ liệu mới được thiết kế đặc biệt cho các loại dữ liệu mờ, duy trì tính toàn vẹn thông tin mờ trong khi cải thiện hiệu quả xử lý.
Global relevance với international comparison
Các thách thức về việc khai phá tri thức từ dữ liệu lớn, đặc biệt là dữ liệu có tính chất mờ và phức tạp, là một vấn đề toàn cầu. Các giải pháp của luận án có tính ứng dụng quốc tế cao, có thể được áp dụng trong nhiều ngữ cảnh và ngôn ngữ khác nhau. Việc so sánh với các công trình quốc tế của Agrawal et al. (1994) [21], Jia-Yu Dai etal. (2008) [18], Herrera et al. (2009) [53] và Tzung-Pei Hong et al. (2004) [83] khẳng định vị thế của nghiên cứu trong bối cảnh khoa học toàn cầu.
Legacy measurable outcomes
Di sản của luận án được đo lường qua:
- Cải thiện hiệu suất tính toán: Đã định lượng được mức giảm thời gian xử lý (37.5% trên CSDL lớn [49]), giúp tiết kiệm tài nguyên và tăng tốc độ ra quyết định.
- Chất lượng luật kết hợp được nâng cao: Mặc dù khó định lượng chính xác hoàn toàn, nhưng "độ thú vị trung bình" của các luật được cải thiện và khả năng tạo ra các luật "phản ánh phong phú và đa dạng hơn tri thức" [16] là bằng chứng rõ ràng cho chất lượng.
- Cơ sở lý thuyết vững chắc hơn: Việc thiết lập một khuôn khổ dựa trên ĐSGT cho phép các nghiên cứu tương lai tiếp tục phát triển trên một nền tảng khoa học chặt chẽ và khách quan hơn, thay vì các phương pháp chủ quan trước đây. Những đóng góp này không chỉ giải quyết các vấn đề hiện tại mà còn mở đường cho các tiến bộ trong tương lai trong lĩnh vực khai phá tri thức mờ.
Trích đoạn nội dung luận án
Tải xuống để đọc toàn bộBỘ GIÁO DỤC VÀ ĐÀO TẠO VIỆN HÀN LÂM KHOA HỌC VÀ CÔNG NGHỆ VIỆT NAM HỌC VIỆN KHOA HỌC VÀ CÔNG NGHỆ ----------------------------- Nguyễn Tuấn Anh NGHIÊN CỨU PHÁT TRIỂN PHƯƠNG PHÁP KHAI PHÁ LUẬT KẾT HỢP MỜ BIỂU THỊ BẰNG THÔNG TIN NGÔN NGỮ VÀ ỨNG DỤNG LUẬN ÁN TIẾN SĨ TOÁN HỌC Hà Nội – Năm 2020 luan an BỘ GIÁO DỤC VÀ ĐÀO TẠO VIỆN HÀN LÂM KHOA HỌC VÀ CÔNG NGHỆ VIỆT NAM HỌC VIỆN KHOA HỌC VÀ CÔNG NGHỆ ----------------------------- Nguyễn Tuấn Anh NGHIÊN CỨU PHÁT TRIỂN PHƯƠNG PHÁP KHAI PHÁ LUẬT KẾT HỢP MỜ BIỂU THỊ BẰNG THÔNG TIN NGÔN NGỮ VÀ ỨNG DỤNG Chuyên ngành: CƠ SỞ TOÁN HỌC CHO TIN HỌC Mã sỗ: 62.10 LUẬN ÁN TIẾN SĨ TOÁN HỌC NGƯỜI HƯỚNG DẪN KHOA HỌC: 1. Trần Thái Sơn Hà Nội – Năm 2020 luan an 1 LỜI CAM ĐOAN Tôi xin cam đoan đây là công trình nghiên cứu của riêng tôi. Các kết quả được viết chung với các tác giả khác đều được sự đồng ý của đồng tác giả trước khi đưa vào luận án. Các kết quả trong luận án là trung thực và chưa từng được công bố trong bất kỳ công trình nào khác.
Tác giả Nguyễn Tuấn Anh luan an 2 LỜI CẢM ƠN Luận án được hoàn thành dưới sự hướng dẫn tận tình của PGS. Nguyễn Cát Hồ và TS. Lời đầu tiên, tác giả xin bày tỏ lòng kính trọng và biết ơn sâu sắc nhất tới hai thầy. Tác giả gửi lời cảm ơn chân thành tới Ban lãnh đạo Học viện Khoa học và Công nghệ, Viện Công nghệ thông tin, khoa Công nghệ thông tin và truyền thông đã tạo điều kiện thuận lợi trong quá trình học tập, nghiên cứu và hoàn thành luận án.
Xin cảm ơn Ban giám hiệu trường Đại học Công nghệ thông tin và Truyền thông - ĐHTN, Ban chủ nhiệm khoa Công nghệ thông tin đã quan tâm giúp đỡ, tạo điều kiện tốt nhất trong công việc để tác giả có thời gian tập trung nghiên cứu. Cảm ơn các đồng nghiệp thuộc Khoa Công nghệ thông tin - Trường Đại học Công nghệ thông tin và Truyền thông – Đại học Thái Nguyên, các anh chị trong nhóm nghiên cứu đại số gia tử đã động viên, khích lệ trao đổi những kiến thức và kinh nghiệm trong quá trình hoàn thành luận án. Cuối cùng, tác giả xin chân thành cảm ơn bố mẹ, chị em, đặc biệt là vợ và các con, những người luôn dành cho tác giả những tình cảm và chia sẻ những lúc khó khăn trong cuộc sống, luôn động viên giúp đỡ tác giả trong quá trình nghiên cứu. Luận án cũng là món quà tinh thần mà tác giả trân trọng gửi tặng đến các thành viên trong gia đình.
luan an 3 MỤC LỤC DANH MỤC CÁC KÝ HIỆU, CÁC CHỮ VIẾT TẮT.5 DANH MỤC HÌNH BẢNG BIỂU .6 DANH MỤC CÁC HÌNH VẼ, ĐỒ THỊ. MỘT SỐ KIẾN THỨC CƠ SỞ. Tập mờ và các phép toán trên tập mờ. Biến ngôn ngữ.
Phân hoạch mờ. Đại số gia tử. Khái niệm Đại số gia tử. Một số tính chất của ĐSGT tuyến tính.
Định lượng ngữ nghĩa của giá trị ngôn ngữ. Độ đo tính mờ của các giá trị ngôn ngữ. Giải thuật di truyền. Bài toán khai phá luật kết hợp.
Một số khái niệm cơ bản. Bài toán khai phá luật kết hợp mờ. Một số hướng nghiên cứu về luật kết hợp. Kết luận chương 1.
KHAI PHÁ LUẬT KẾT HỢP MỜ THEO HƯỚNG TIẾP CẬN SỬ DỤNG ĐẠI SỐ GIA TỬ. Khai phá luật kết hợp mờ theo hướng tiếp cận ĐSGT. Mờ hóa cơ sở dữ liệu giao dịch. Quan hệ khoảng cách giao dịch.
Xây dựng bảng định lượng. Nén cơ sở dữ liệu giao dịch. Thuật toán trích xuất luật kết hợp mờ. Kết quả thử nghiệm.
Thử nghiệm với CSDL FAM95. Thử nghiệm với CSDL STULONG. Kết luận chương 2. PHÂN HOẠCH MỜ CHO THUỘC TÍNH DỰA TRÊN BIỂU DIỄN THỂ HẠT CỦA ĐSGT.
Phân hoạch cho miền giá trị của thuộc tính. Rời rạc hóa thuộc tính định lượng. Phân chia miền giá trị của thuộc tính theo cách tiếp cận lý thuyết tập mờ. Phương pháp phân hoạch mờ bằng biểu diễn thể hạt với ĐSGT.
Phân hoạch giá trị miền thuộc tính sử dụng biểu diễn đơn thể hạt. Phân hoạch giá trị miền thuộc tính sử dụng biểu diễn đa thể hạt. Phương pháp tối ưu tham số mờ ĐSGT cho bài toán khai phá luật kết hợp. Mô hình giải thuật di truyền CHC.
Đánh giá nhiễm sắc thể. Thuật toán tìm kiếm phân hoạch mờ tối ưu và luật kết hợp. Kết quả thử nghiệm. Cơ sở dữ liệu sử dụng trong thử nghiệm.
Phân tích và đánh giá kết quả thử nghiệm với biểu diễn dữ liệu dạng đơn thể hạt. Phân tích và đánh giá kết quả thử nghiệm với biểu diễn dữ liệu dạng đa thể hạt. Kết luận chương 3 .97 KẾT LUẬN VÀ KIẾN NGHỊ .99 CÁC CÔNG TRÌNH KHOA HỌC CỦA TÁC GIẢ LIÊN QUAN ĐẾN LUẬN ÁN .101 TÀI LIỆU THAM KHẢO .102 luan an 5 DANH MỤC CÁC KÝ HIỆU, CÁC CHỮ VIẾT TẮT Các ký hiệu 𝒜𝒳 Đại số gia tử tuyến tính 𝒜𝒳 ∗ Đại số gia tử tuyến tính đầy đủ 𝜇 (ℎ ) Độ đo tính mờ của gia tử h 𝑓𝑚(𝑥) Độ đo tính mờ của gia tử x 𝑣 (𝑥 ) Hàm định lượng của giá trị ngôn ngữ của biến x 𝜇𝐴 (𝑥) Hàm xác định độ thuộc của giá trị x vào tập mờ A 𝑙 (𝑥 ) Độ dài của từ ngôn ngữ x ℑ𝑓𝑚 Khoảng tính mờ của giá trị ngôn ngữ 𝑋𝑘 Tập các hạng từ có độ dài đúng bằng k 𝑋(𝑘) Tập các hạng từ có độ dài ≤ 𝑘 Các từ viết tắt AR Luật kết hợp (association rule) DB, CSDL Cơ sở dữ liệu ĐLNN Định lượng ngữ nghĩa ĐSGT Đại số gia tử FRBS Fuzzy Rule-based Systen GA Giải thuật di truyền (Genetic Algorithms) KB Knowledge Base MF Hàm thuộc (Membership function) RB Fuzzy-based SQM Semantically Quantifying Mapping Min Supp Độ hỗ trợ tối thiểu luan an 6 DANH MỤC HÌNH BẢNG BIỂU Bảng 2.1: Cơ sở dữ liệu ví dụ .2: Mờ hóa dữ liệu trong Bảng 2.3: Bảng định lượng của cơ sở dữ liệu Bảng 2.4: Số lượng luật kết hợp thu được với độ tin cậy 80% .5: Luật kết hợp thu được với độ hỗ trợ 60% và độ tin cậy 80% .6: Luật kết hợp thu được với độ hỗ trợ 70% và độ tin cậy 80% .7: Số lượng luật kết hợp thu được với độ tin cậy 80% .8: So sánh thời gian thực hiện khai phá luật kết hợp với độ tin cậy 80% .9: Luật kết hợp thu được với độ hỗ trợ 85% và độ tin cậy 80% .10: Luật kết hợp thu được với độ hỗ trợ 90% và độ tin cậy 80% .1: CSDL thống kế dân số của 10 gia đình .2: Rời rạc hóa thuộc tính định lượng .3: Ví dụ rời rạc hóa thuộc tính "Tuổi" .4: CSDL thử nghiệm .5: Các tham số mờ của các ĐSGT được tối ưu của 10 thuộc tính với phương pháp sử dụng biểu diễn đơn thể hạt.6: Kết quả thử nghiệm biểu diễn đơn thể hạt .7: Quan hệ giữa độ thú vị trung bình của các luật .8: Bảng số lượng tập phổ biến 1-ItemSet .9: Bảng Độ thú vị trung bình .10: Các tham số mờ của các ĐSGT được tối ưu của 10 thuộc tính với phương pháp sử dụng biểu diễn đa thể hạt.11: Quan hệ giữa số lượng tập mục và Min supp .12: Quan hệ giữa số lượng 1-ItemSet và Min Supp .95 luan an 7 DANH MỤC CÁC HÌNH VẼ, ĐỒ THỊ Hình 1.1: Hàm thuộc cho tập mờ thể hiện tuổi người là: Trẻ, Trung niên, Già .2: Một cấu trúc phân hoạch mờ dạng đơn thể hạt .3: Một cấu trúc phân hoạch mờ dạng đa thể hạt .4: Khoảng tính mờ của các hạng từ của biến TRUTH .5: Độ đo tính mờ của biến TRUTH .6: Lưu đồ giải thuật di truyền .1: Xây dựng phân hoạch mờ dựa trên ĐSGT .2: Tổng quan về thuật toán nén CSDL giao dịch .3: Thời gian thực hiện với CSDL nén và CSDL không nén .4: Thời gian thực hiện với CSDL nén .5: Thời gian thực hiện với CSDL nén và CSDL không nén .1: Xây dựng phần hoạch miền xác định của thuộc tính theo cách tiếp cận ĐSGT .2: Phân hoạch miền giá trị của thuộc tính dựa trên biểu diễn đơn thể hạt .3: Cấu trúc hạt thể nhiều mức .4: Phân hoạch miền giá trị của thuộc tính dựa trên biểu diễn đa thể hạt .5: Lược đồ tìm kiếm phân hoạch tối ưu cho miền xác định thuộc tính và khai phái luật kết hợp .6: Mô hình giải thuật di truyền CHC .7: Tập các MF cho mục Ij .8: Hai tập hàm thuộc phân bố không tốt .9: Quan hệ giữa độ phù hợp (Suit) của các hàm thuộc và Min Supp .10: Quan hệ giữa giá trị hàm mục tiêu và Min Supp .11: Quan hệ giữa độ hỗ trợ tập mục 1-ItemSet và Min Supp .12: Quan hệ giữa số lượng 1-ItemSet và Min Supp .13: Quan hệ giữa độ thú vị trung bình và Min Supp .83 luan an 8 Hình 3.14: Tập hàm thuộc thu được sau khi thực hiện GA với phương pháp của Herrera sử dụng lý thuyết tập mờ.15: Tập hàm thuộc thu được sau khi thực hiện GA với phương pháp sử dụng biểu diễn đơn thể hạt và ĐSGT .16: Quan hệ giữa số lượng 1-ItemSet và Min Supp với CSDL Pollution .17: Quan hệ giữa số lượng 1-ItemSet và Min Supp với CSDL Stulong .18: Quan hệ giữa số lượng 1-ItemSet và Min Supp với CSDL Basketball .19: Quan hệ giữa số lượng 1-ItemSet và Min Supp với CSDL Quake .20: Quan hệ giữa số lượng 1-ItemSet và Min Supp với CSDL stock .21: Quan hệ giữa Độ thú vị trung bình và Min Supp với CSDL Pollution .22: Quan hệ giữa Độ thú vị trung bình và Min Supp với CSDL Stulong .23: Quan hệ giữa Độ thú vị trung bình và Min Supp với CSDL Basketball 92 Hình 3.24: Quan hệ giữa Độ thú vị trung bình và Min Supp với CSDL Quake .25: Quan hệ giữa Độ thú vị trung bình và Min Supp với CSDL Stock .26: Quan hệ giữa số lượng tập phố biến và Min Supp .27: So sánh số lượng tập phổ biến và Min Supp .28: Tập hàm thuộc thu được sau khi thực hiện GA với phương pháp sử dụng biểu diễn đa thể hạt và ĐSGT .97 luan an 9 MỞ ĐẦU Cùng với sự phát triển mạnh mẽ của Công nghệ thông tin, đặc biệt là các hệ thống thông tin quản lý giai đoạn vừa qua, xuất hiện rất nhiều các kho thông tin hay CSDL lớn hoặc rất lớn.
Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ
Trích dẫn luận án này
Nguyễn Tuấn Anh (2020). Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ [Luận án tiến sĩ, Học viện Khoa học và Công nghệ]. LuanAn.net. https://luanan.net/cong-nghe-thong-tin/tri-tue-nhan-tao/khai-pha-luat-ket-hop-mo-bieu-thi-thong-tin-ngon-ngu
Câu hỏi thường gặp
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" nghiên cứu về vấn đề gì?
Luận án phát triển phương pháp khai phá luật kết hợp mờ sử dụng biểu thị thông tin ngôn ngữ. Cải tiến hiệu quả khai phá trong xử lý dữ liệu không chắc chắn.
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" được bảo vệ tại trường nào?
Luận án này được bảo vệ tại Học viện Khoa học và Công nghệ. Năm bảo vệ: 2020.
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" thuộc chuyên ngành gì?
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" thuộc chuyên ngành Cơ sở toán học cho tin học. Danh mục: Trí Tuệ Nhân Tạo.
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" có bao nhiêu trang?
Luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" có 109 trang. Bạn có thể xem trước một phần tài liệu ngay trên trang web trước khi tải về.
Cách tải luận án "Khai phá luật kết hợp mờ biểu thị bằng thông tin ngôn ngữ" về máy như thế nào?
Để tải luận án về máy, bạn nhấn nút "Tải xuống ngay" trên trang này, sau đó hoàn tất thanh toán phí lưu trữ. File sẽ được tải xuống ngay sau khi thanh toán thành công. Hỗ trợ qua Zalo: 0559 297 239.