Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và ứng dụng trong bài t
Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân nhằm tối ưu hiệu quả mô hình học máy.
Luan An
Luận án tiến sĩ
Năm xuất bản
Số trang
158
Thời gian đọc
24 phút
Lượt xem
0
Lượt tải
0
Phí lưu trữ
50 Point
Tổng quan nhanh
- Chủ đề:
- 1. Nghiên cứu Giảm Chiều Biến: Phương Pháp Hàm Nhân
- Số trang:
- 158 trang
- Trường:
- Học viện Khoa học và Công nghệ
- Chuyên ngành:
- Hệ thống thông tin
- Tác giả:
- Nguyễn Minh Hải
- Năm:
- 2024
Tóm tắt nội dung luận án
I. Nghiên cứu Giảm Chiều Biến Phương Pháp Hàm Nhân
Nghiên cứu này tập trung vào các phương pháp giảm chiều biến dữ liệu. Đây là một lĩnh vực quan trọng trong học máy và khai phá dữ liệu. Giảm chiều biến giúp xử lý hiệu quả các tập dữ liệu lớn, phức tạp. Nó cải thiện hiệu suất, giảm thời gian tính toán của các mô hình. Nghiên cứu khai thác sâu các phương pháp dựa trên hàm nhân. Các kỹ thuật này đặc biệt hiệu quả với dữ liệu phi tuyến. Mục tiêu là tìm ra các biểu diễn dữ liệu cấp thấp hơn. Những biểu diễn này vẫn giữ được thông tin quan trọng. Điều này tạo điều kiện thuận lợi cho các tác vụ phân tích và dự báo tiếp theo. Phương pháp hàm nhân mở rộng khả năng của các thuật toán tuyến tính truyền thống. Nó cho phép chúng làm việc hiệu quả hơn với các mối quan hệ phức tạp trong dữ liệu.
1.1. Nhu cầu Giảm Chiều Biến Dữ liệu
Dữ liệu hiện đại thường có số lượng chiều biến rất lớn. Điều này gây ra thách thức lớn cho việc lưu trữ và xử lý. Hiện tượng 'lời nguyền của chiều' làm giảm hiệu suất thuật toán. Giảm chiều biến trở nên cần thiết. Nó giúp đơn giản hóa dữ liệu mà không làm mất đi thông tin cốt lõi. Giảm nhiễu cũng là một lợi ích quan trọng. Các phương pháp giảm chiều biến hỗ trợ việc xây dựng mô hình dự báo chính xác hơn. Mục tiêu là tìm một không gian biểu diễn nhỏ gọn hơn.
1.2. Giới thiệu Hàm Nhân và Kỹ thuật Hạt nhân
Hàm nhân (Kernel function) là một công cụ toán học mạnh mẽ. Nó cho phép tính toán độ tương đồng giữa các điểm dữ liệu. Việc này thực hiện trong một không gian đặc trưng chiều cao hơn. Không gian này không cần tính toán tường minh. Đây chính là kỹ thuật hạt nhân (Kernel trick). Kỹ thuật này giúp giải quyết các bài toán dữ liệu phi tuyến. Nó biến các vấn đề không thể phân tách tuyến tính thành có thể. Phương pháp hạt nhân đã chứng minh hiệu quả trong nhiều ứng dụng.
1.3. Mục tiêu Phát triển Phương pháp Giảm Chiều
Nghiên cứu hướng đến phát triển các phương pháp giảm chiều biến mới. Các phương pháp này dựa trên kỹ thuật hàm nhân. Mục tiêu là cải thiện độ chính xác và hiệu quả. Đặc biệt là trên các tập dữ liệu chuỗi thời gian lớn. Đóng góp chính là đề xuất các thuật toán tiên tiến. Các thuật toán này xử lý tốt dữ liệu phi tuyến phức tạp. Ứng dụng cụ thể trong bài toán dự báo kim ngạch xuất khẩu. Điều này mang lại giá trị lý luận và thực tiễn.
II. Kỹ Thuật Hàm Nhân Giải Pháp Dữ Liệu Phi Tuyến
Các phương pháp giảm chiều truyền thống thường hoạt động tốt với dữ liệu tuyến tính. Tuy nhiên, nhiều tập dữ liệu thực tế lại có cấu trúc phi tuyến. Kỹ thuật hàm nhân cung cấp giải pháp cho vấn đề này. Nó ánh xạ dữ liệu ban đầu sang một không gian đặc trưng mới. Trong không gian này, các mối quan hệ phi tuyến có thể trở thành tuyến tính. Điều này cho phép áp dụng các thuật toán tuyến tính. Các phương pháp hạt nhân như Phân tích thành phần chính hạt nhân (KPCA) là ví dụ điển hình. KPCA xử lý hiệu quả các cấu trúc phức tạp ẩn trong dữ liệu. Nó mở rộng khả năng phân tích dữ liệu phi tuyến của các nhà nghiên cứu. Việc này rất quan trọng trong nhiều lĩnh vực khoa học và kinh tế.
2.1. Phân tích Thành Phần Chính Hạt nhân KPCA
KPCA là một mở rộng của phương pháp Phân tích Thành Phần Chính (PCA). Nó sử dụng hàm nhân để xử lý dữ liệu phi tuyến. Thay vì tính toán trực tiếp trong không gian ban đầu, KPCA thực hiện PCA trong không gian đặc trưng. Điều này giúp phát hiện các cấu trúc phi tuyến tính trong dữ liệu. KPCA là một kỹ thuật mạnh mẽ để trích chọn đặc trưng. Nó giữ lại thông tin quan trọng nhất của dữ liệu phi tuyến. Các thành phần chính hạt nhân biểu diễn các phương hướng biến thiên lớn nhất trong không gian đặc trưng.
2.2. Xử lý Dữ liệu Phi Tuyến hiệu quả
Phương pháp hạt nhân thay đổi cách nhìn nhận dữ liệu. Nó cho phép các thuật toán học máy giải quyết vấn đề phức tạp. Dữ liệu phi tuyến thường xuất hiện trong nhiều lĩnh vực. Ví dụ như tài chính, y sinh, xử lý ảnh. Kỹ thuật hạt nhân ánh xạ dữ liệu vào một Không gian Hilbert tái tạo hạt nhân (RKHS). Trong RKHS, các mối quan hệ phi tuyến trở nên dễ dàng xử lý hơn. Điều này giúp cải thiện đáng kể hiệu suất của các mô hình học máy. Đặc biệt trong việc phát hiện mẫu và phân loại.
2.3. Không gian Hilbert Tái tạo Hạt nhân RKHS
RKHS là một khái niệm toán học cốt lõi trong lý thuyết hàm nhân. Nó cung cấp nền tảng lý thuyết vững chắc cho các phương pháp hạt nhân. Mỗi hàm nhân dương xác định một RKHS duy nhất. Ngược lại, mỗi RKHS có một hàm nhân tái tạo. RKHS cho phép chúng ta thực hiện các phép tính trong không gian đặc trưng. Các phép tính này có thể là vô hạn chiều. Nhưng lại tránh được việc tính toán trực tiếp các tọa độ. Điều này giúp giải quyết các bài toán phức tạp một cách hiệu quả.
III. Ứng Dụng Giảm Chiều Biến trong Dự Báo Kim Ngạch
Một ứng dụng thực tiễn quan trọng của nghiên cứu là dự báo kim ngạch xuất khẩu. Đây là một bài toán kinh tế vĩ mô phức tạp. Nó đòi hỏi phân tích nhiều yếu tố tác động. Việc sử dụng phương pháp giảm chiều biến dựa trên hàm nhân giúp cải thiện đáng kể mô hình dự báo. Nó xử lý hiệu quả các tập dữ liệu chuỗi thời gian lớn. Các tập dữ liệu này thường chứa nhiều biến và có mối quan hệ phi tuyến. Kỹ thuật hạt nhân giúp trích chọn đặc trưng phù hợp. Từ đó, tạo ra mô hình dự báo chính xác và ổn định hơn. Nghiên cứu này chứng minh tính khả thi và hiệu quả của các phương pháp đề xuất. Đây là đóng góp quan trọng cho lĩnh vực dự báo kinh tế.
3.1. Dự báo Kim Ngạch Xuất khẩu thực tiễn
Kim ngạch xuất khẩu là chỉ số kinh tế quan trọng. Dự báo chính xác nó giúp các nhà hoạch định chính sách đưa ra quyết định tốt hơn. Tuy nhiên, các yếu tố tác động rất đa dạng và phức tạp. Chúng bao gồm giá cả hàng hóa, tỷ giá hối đoái, chính sách thương mại. Dữ liệu liên quan thường có tính phi tuyến và tần suất hỗn hợp. Các phương pháp truyền thống gặp khó khăn. Giảm chiều biến dựa trên hàm nhân cung cấp giải pháp mạnh mẽ.
3.2. Quy trình Dự báo với Kỹ thuật Hạt nhân
Quy trình dự báo bắt đầu bằng việc thu thập và tiền xử lý dữ liệu. Sau đó, áp dụng các phương pháp giảm chiều biến dựa trên hàm nhân. Cụ thể là KPCA hoặc KLDA để trích chọn đặc trưng. Các đặc trưng này được sử dụng làm đầu vào cho mô hình dự báo. Mô hình sẽ được huấn luyện và đánh giá. Quy trình này tối ưu hóa việc sử dụng thông tin. Đồng thời giảm thiểu tác động của nhiễu và sự dư thừa dữ liệu.
3.3. Lợi ích của Phương pháp Hạt nhân trong Dự báo
Áp dụng phương pháp hạt nhân mang lại nhiều lợi ích. Chúng bao gồm việc xử lý tốt dữ liệu phi tuyến. Cải thiện độ chính xác dự báo. Giảm thiểu rủi ro overfitting của mô hình. Các mô hình dựa trên hàm nhân có khả năng học manifold. Điều này giúp chúng nắm bắt cấu trúc ẩn của dữ liệu. Hiệu quả này đặc biệt rõ ràng với các tập dữ liệu lớn và phức tạp. Đây là một bước tiến quan trọng trong lĩnh vực dự báo.
IV. Tối Ưu Trích Chọn Đặc Trưng Phân Tích Thành Phần Chính Hạt Nhân
Trích chọn đặc trưng là một bước không thể thiếu trong quy trình học máy. Nó ảnh hưởng trực tiếp đến hiệu suất của mô hình. Nghiên cứu này tập trung vào tối ưu hóa quá trình trích chọn đặc trưng. Điều này được thực hiện thông qua Phân tích thành phần chính hạt nhân (KPCA). KPCA là một phương pháp mạnh mẽ cho dữ liệu phi tuyến. Nó giúp giảm thiểu số lượng chiều biến. Đồng thời giữ lại tối đa thông tin hữu ích. Quá trình này giúp loại bỏ nhiễu và các đặc trưng không liên quan. Điều này dẫn đến các mô hình học máy hiệu quả hơn và dễ giải thích hơn. Việc sử dụng KPCA cũng cho phép khám phá cấu trúc manifold ẩn của dữ liệu.
4.1. Tầm quan trọng của Trích chọn Đặc trưng
Trích chọn đặc trưng là quá trình chọn một tập hợp con các đặc trưng. Các đặc trưng này có liên quan nhất đến mục tiêu của bài toán. Nó giúp giảm chiều dữ liệu. Đồng thời loại bỏ các đặc trưng dư thừa hoặc gây nhiễu. Việc này làm tăng tốc độ huấn luyện mô hình. Nó cũng cải thiện khả năng tổng quát hóa. Đặc biệt quan trọng với dữ liệu lớn. Trích chọn đặc trưng hiệu quả là yếu tố then chốt để xây dựng mô hình mạnh mẽ.
4.2. KPCA cho Trích chọn Đặc trưng Phi tuyến
KPCA cung cấp một giải pháp tiên tiến cho trích chọn đặc trưng phi tuyến. Nó sử dụng kỹ thuật hạt nhân để biến đổi dữ liệu. Từ đó, tìm kiếm các thành phần chính trong không gian đặc trưng chiều cao hơn. Các thành phần này biểu diễn các đặc trưng quan trọng nhất. Chúng có khả năng tách biệt tốt hơn. KPCA vượt trội so với PCA truyền thống khi dữ liệu có cấu trúc phi tuyến phức tạp. Đây là phương pháp tối ưu để giảm chiều biến và trích chọn đặc trưng hữu ích.
4.3. Các Phương pháp Giảm Chiều biến Khác
Bên cạnh KPCA, Phân tích phân biệt tuyến tính hạt nhân (KLDA) cũng là một phương pháp giảm chiều biến hiệu quả. KLDA tập trung vào việc tối đa hóa sự phân tách giữa các lớp. Cả KPCA và KLDA đều là những phương pháp hạt nhân. Chúng có khả năng xử lý dữ liệu phi tuyến tốt hơn các phương pháp tuyến tính. Sự lựa chọn giữa chúng phụ thuộc vào mục tiêu cụ thể của bài toán. Điều này nhấn mạnh sự đa dạng và linh hoạt của kỹ thuật hạt nhân.
V. Khám Phá Học Manifold và Không Gian Hilbert Tái Tạo
Nghiên cứu mở rộng hiểu biết về Học manifold (Manifold learning). Các kỹ thuật hạt nhân đóng vai trò trung tâm trong lĩnh vực này. Học manifold tìm cách khám phá cấu trúc nội tại chiều thấp của dữ liệu. Cấu trúc này thường nhúng trong một không gian chiều cao hơn. Không gian Hilbert tái tạo hạt nhân (RKHS) cung cấp nền tảng toán học mạnh mẽ. Nó cho phép các phương pháp hạt nhân hoạt động hiệu quả. Việc hiểu rõ mối liên hệ giữa hàm nhân, RKHS và học manifold là rất quan trọng. Điều này giúp phát triển các thuật toán giảm chiều biến tiên tiến hơn. Chúng có khả năng xử lý các dữ liệu phức tạp trong thế giới thực. Đây là một hướng nghiên cứu đầy tiềm năng.
5.1. Giới thiệu Học Manifold Manifold Learning
Học manifold là một nhánh của giảm chiều phi tuyến. Nó giả định rằng dữ liệu chiều cao thực chất nằm trên một manifold chiều thấp hơn. Việc này tương tự như một tờ giấy cuộn tròn trong không gian ba chiều. Các thuật toán học manifold tìm cách 'mở' tờ giấy đó ra. Chúng phát hiện cấu trúc nội tại thực sự của dữ liệu. Phương pháp hạt nhân hỗ trợ mạnh mẽ cho học manifold. Nó giúp khám phá các mối quan hệ phi tuyến sâu sắc hơn.
5.2. Hàm Nhân là cầu nối tới RKHS
Hàm nhân là yếu tố then chốt. Nó cho phép các thuật toán học máy hoạt động trong RKHS. Điều này tránh được việc tính toán tường minh tọa độ trong không gian đặc trưng. RKHS cung cấp một không gian chức năng. Trong đó các bài toán tối ưu có thể được giải quyết hiệu quả. Mối liên hệ này làm cho kỹ thuật hạt nhân trở thành công cụ không thể thiếu. Nó dùng để xử lý dữ liệu có cấu trúc phức tạp và phi tuyến.
5.3. Tiềm năng Phát triển Phương pháp Hạt nhân
Lĩnh vực phương pháp hạt nhân vẫn còn nhiều tiềm năng phát triển. Việc kết hợp với các kỹ thuật học sâu đang là một hướng mới. Nghiên cứu trong tương lai có thể tập trung vào các hàm nhân tùy chỉnh. Điều này dựa trên đặc điểm dữ liệu cụ thể. Hoặc phát triển các phương pháp hạt nhân lai. Chúng kết hợp ưu điểm của nhiều kỹ thuật. Mục tiêu là tạo ra các giải pháp giảm chiều biến và trích chọn đặc trưng tối ưu hơn nữa.
Mục lục chi tiết luận án
Tải xuống file đầy đủ để xem toàn bộ nội dung
Tải đầy đủ (158 trang)Nội dung chính
Tổng quan về luận án
Trong bối cảnh nền kinh tế số và toàn cầu hóa sâu rộng, khối lượng dữ liệu chuỗi thời gian kinh tế - tài chính bùng nổ theo cấp số nhân, đặt ra thách thức nghiêm trọng về hiện tượng "lời nguyền về chiều" (curse of dimensionality) khi số lượng biến giải thích $m$ vượt xa số lượng quan sát khả dụng $N$ ($m \gg N$). Luận án tiến sĩ ngành Hệ thống thông tin với đề tài "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và ứng dụng trong bài toán dự báo kim ngạch xuất khẩu" do NCS. Nguyễn Minh Hải thực hiện dưới sự hướng dẫn của PGS. Đỗ Văn Thành và PGS. Nguyễn Đức Dũng tại Viện Công nghệ thông tin – Viện Hàn lâm Khoa học và Công nghệ Việt Nam (2024), đã kiến tạo một bước tiến quan trọng trong lĩnh vực xử lý dữ liệu lớn (Big Data Analytics) và kinh tế lượng chuỗi thời gian (Time-Series Econometrics).
graph LR
A["Tập dữ liệu chuỗi thời gian lớn (m >> N)"] --> B["Giai đoạn 1: Lọc Pearson & Khử dư thừa"]
B --> C["Giai đoạn 2: Giảm chiều KTPCA lặp (RKHS)"]
C --> D["Chiết xuất p Nhân tố phi tuyến"]
D --> E["Thuật toán UNCONF / CONF"]
E --> F["Dự báo Kim ngạch Xuất khẩu & Chỉ số Vĩ mô"]
Khoảng trống nghiên cứu then chốt (research gap) mà luận án giải quyết xuất phát từ giới hạn căn bản của các kỹ thuật giảm chiều tuyến tính kinh điển: Phân tích thành phần chính (PCA - Jolliffe, 2002; Stock & Watson, 2002) và Phân tích thành phần chính thưa (SPCA - Zou, Hastie & Tibshirani, 2006; ROBSPCA, RSPCA). Các phương pháp này mặc nhiên dựa trên giả định tập dữ liệu xấp xỉ một siêu phẳng (hyperplane). Khi cấu trúc dữ liệu kinh tế thực mang tính phi tuyến tính phức tạp, biến động đa tầng và không xấp xỉ siêu phẳng (Van der Maaten et al., 2009; Roweis & Saul, 2000), PCA và SPCA đánh mất lượng lớn thông tin cốt lõi, dẫn đến suy giảm hiệu năng dự báo. Đồng thời, các mô hình học sâu như LSTM (Hochreiter & Schmidhuber, 1997), GRU (Cho et al., 2014) hay Transformer chuỗi thời gian (Vaswani et al., 2017) gặp trở ngại lớn về chi phí tính toán, độ dốc biến mất (vanishing gradient), độ nhạy tham số và khả năng diễn giải kinh tế khi số chiều biến $m$ lên tới hàng trăm hoặc hàng nghìn.
Luận án thiết lập hệ thống câu hỏi nghiên cứu và giả thuyết tường minh:
- Câu hỏi nghiên cứu 1 (RQ1): Làm thế nào để thiết lập một cơ chế giảm chiều phi tuyến kế thừa cấu trúc bảo toàn hiệp phương sai của PCA nhưng mở rộng được sang không gian Hilbert tái tạo (RKHS) nhằm xử lý hiệu quả các tập dữ liệu chuỗi thời gian không xấp xỉ siêu phẳng?
- Câu hỏi nghiên cứu 2 (RQ2): Quy trình tích hợp tối ưu giữa lựa chọn thuộc tính (Feature Selection) và chiết xuất nhân tố hàm nhân lặp (Iterative Kernel-based Feature Extraction) được thiết kế như thế nào để tối thiểu hóa sai số dự báo ngoài mẫu (Out-of-sample RMSE)?
- Câu hỏi nghiên cứu 3 (RQ3): Thuật toán dự báo có điều kiện (CONF) và không điều kiện (UNCONF) dựa trên nhân tố KTPCA lặp nâng cao độ chính xác dự báo kim ngạch xuất khẩu của Việt Nam ở mức độ định lượng cụ thể nào so với các mô hình chuẩn quốc tế?
- Giả thuyết nghiên cứu 1 (H1): Phương pháp KTPCA lặp đạt sai số bình phương trung bình chuẩn (RMSE) thấp hơn có ý nghĩa thống kê so với PCA, SPCA, RSPCA, ROBSPCA trên cả tập dữ liệu cùng tần suất và tần suất hỗn hợp (Mixed Data Sampling).
- Giả thuyết nghiên cứu 2 (H2): Mô hình dự báo chuỗi thời gian lớn tích hợp KTPCA lặp cải thiện độ chính xác dự báo thực tế của kim ngạch xuất khẩu Việt Nam vượt trội so với mô hình chuỗi thời gian đơn biến ARIMA và mô hình cấu trúc cầu xuất khẩu truyền thống.
Khung lý thuyết của công trình tích hợp chặt chẽ giữa Lý thuyết không gian Hilbert hạt nhân tái tạo (Reproducing Kernel Hilbert Space - RKHS; Aronszajn, 1950; Schölkopf, Smola & Müller, 1998), Lý thuyết mô hình nhân tố động (Dynamic Factor Models - DFM; Geweke, 1977; Forni et al., 2000), Lý thuyết lấy mẫu dữ liệu hỗn hợp (MIDAS; Ghysels et al., 2004, 2007) và Phương trình bắc cầu (Bridge Equations - BE; Baffigi et al., 2004).
Đóng góp đột phá của luận án được lượng hóa rõ rệt:
"Với mô hình dự báo kim ngạch xuất khẩu sử dụng quy trình/thuật toán dự báo không điều kiện thì % sai số dự báo trung bình của mô hình này là cao hơn % sai số dự báo của mô hình ARIMA(2,1,2) đến 2.38 điểm %, làm tăng độ chính xác dự báo lên 63,6%, trong khi với mô hình dự báo kim ngạch xuất khẩu sử dụng quy trình/thuật toán dự báo có điều kiện thì % sai số dự báo trung bình của mô hình này là cao hơn % sai số dự báo của mô hình cầu xuất khẩu đến 1.62 điểm %, làm tăng độ chính xác dự báo lên 52,1%."
Phạm vi thực nghiệm bao quát 07 tập dữ liệu chuẩn quốc tế từ kho lưu trữ UCI (Residential Building: $N=372, m=108$; S&P 500, DJI, Nasdaq: $N=2516, m=60$; Air Quality: $N=9358, m=15$; Appliances Energy: $N=19735, m=29$; SuperConductivity: $N=21263, m=81$) cùng 05 bộ dữ liệu vĩ mô Việt Nam (EXP, VN30, CPI, VIP, IIP) thu thập từ Tổng cục Thống kê (GSO), FiinPro, IMF, World Bank, FED và Eurostat giai đoạn 2012–2023.
Literature Review và Positioning
Tổng quan y văn quốc tế cho thấy sự tiến hóa của 4 dòng nghiên cứu chính trong xử lý chuỗi thời gian nhiều chiều:
graph TD
subgraph S1["Dòng 1: Mô hình kinh tế lượng cổ điển"]
M1["ARIMA Box-Jenkins (1970)"]
M2["VAR Sims (1980)"]
M3["ARDL Pesaran & Shin (1998)"]
end
subgraph S2["Dòng 2: Mô hình nhân tố & Giảm chiều tuyến tính"]
M4["DFM Geweke (1977), Stock & Watson (2002)"]
M5["PCA Jolliffe (2002)"]
M6["SPCA Zou et al. (2006)"]
end
subgraph S3["Dòng 3: Dữ liệu tần suất hỗn hợp (Nowcasting)"]
M7["Kalman Filter Kalman (1960)"]
M8["Bridge Equations Baffigi et al. (2004)"]
M9["MIDAS Ghysels et al. (2004, 2007)"]
end
subgraph S4["Dòng 4: Giảm chiều phi tuyến & Học máy"]
M10["KPCA Schölkopf et al. (1998)"]
M11["Manifold Learning Van der Maaten (2009)"]
M12["Macroeconomic RF Goulet Coulombe (2021)"]
end
Cuộc tranh luận học thuật trung tâm diễn ra giữa hai trường phái:
- Trường phái Tuyến tính & Tiết kiệm tham số (Parsimonious Linear School): Dẫn đầu bởi Stock & Watson (2002), Bai & Ng (2008), và Forni et al. (2000). Trường phái này lập luận rằng các cú sốc kinh tế vĩ mô cốt lõi được gom cụm hiệu quả nhất thông qua các tổ hợp tuyến tính của các biến quan sát (PCA). Họ cho rằng các cấu trúc phi tuyến trong dữ liệu thực nghiệm thường chỉ là nhiễu ngẫu nhiên hoặc biến động chu kỳ cục bộ, và việc áp dụng các phép biến đổi phi tuyến phức tạp dễ dẫn đến hiện tượng quá khớp (overfitting) và mất khả năng giải thích cấu trúc kinh tế.
- Trường phái Đa tạp Phi tuyến & Học máy (Nonlinear Manifold & Machine Learning School): Đại diện bởi Schölkopf et al. (1998), Roweis & Saul (2000), Tenenbaum et al. (2000), và gần đây là Goulet Coulombe et al. (2021). Nhóm nghiên cứu này chứng minh rằng quan hệ kinh tế vĩ mô và tài chính chứa đựng các ngưỡng chuyển đổi trạng thái phi tuyến (regime-switching), hiệu ứng phi đối xứng và tương tác bậc cao không thể xấp xỉ đầy đủ trên một siêu phẳng phẳng.
Đối sánh thực nghiệm quốc tế ghi nhận hai nghiên cứu đối chuẩn mang tính bước ngoặt:
- Nghiên cứu của Van der Maaten, Postma & van den Herik (2009) so sánh 12 kỹ thuật giảm chiều phi tuyến (Isomap, LLE, LE, KPCA, Diffusion Maps,...) với PCA trên các bộ dữ liệu thực, chỉ ra rằng phần lớn phương pháp phi tuyến thất bại trong việc vượt qua PCA do độ nhạy tham số ngoại lai và cấu trúc dữ liệu thực thường phân tán gần siêu phẳng.
- Nghiên cứu của Goulet Coulombe et al. (2021) áp dụng quy trình 3 bước (LARS Feature Selection + PCA Factor Extraction + Macroeconomic Random Forest) trên 536 biến kinh tế để nowcasting thương mại toàn cầu, xác nhận rằng việc chiết xuất nhân tố tuyến tính bằng PCA vẫn bộc lộ hạn chế lớn khi dữ liệu đầu vào chứa phi tuyến tính cục bộ.
Vị thế học thuật (positioning) của luận án được xác lập chuẩn xác tại giao điểm này: Luận án không phủ định PCA mà xem PCA là trường hợp riêng tuyến tính của không gian hàm nhân. Bằng việc đề xuất kỹ thuật KTPCA lặp với cơ chế tối ưu hóa hàm mất mát RMSE trên từng mô hình đích (BE, U-MIDAS, STEP-MIDAS, EAW-MIDAS, PAW-MIDAS, ARDL), luận án giải quyết triệt để nghịch lý mà Van der Maaten et al. (2009) chỉ ra, biến kỹ thuật hàm nhân thành công cụ có hiệu năng vượt trội thực sự trên dữ liệu thực nghiệm chuỗi thời gian lớn.
Đóng góp lý thuyết và khung phân tích
Đóng góp cho lý thuyết
Luận án mở rộng và làm sâu sắc thêm nền tảng lý thuyết của ba hệ thống lý thuyết cốt lõi:
- Lý thuyết Phân tích thành phần chính (PCA theory): Mở rộng định thức đại số tuyến tính kinh điển của Karl Pearson (1901) và Hotelling (1933) sang không gian đặc trưng phi tuyến vô hạn chiều thông qua thủ thuật hàm nhân (Kernel Trick), bảo toàn toàn vẹn tính chất cực đại hóa phương sai và trực giao của hệ vector riêng mà không cần tính toán tường minh tọa độ trong không gian số chiều cao.
- Lý thuyết Mô hình nhân tố động (Dynamic Factor Models - DFM): Mở rộng định lý biểu diễn nhân tố của Geweke (1977) và Stock & Watson (2002). Luận án chứng minh rằng vector nhân tố ẩn $F_t$ có thể được trích xuất tối ưu dưới dạng tổ hợp phi tuyến của tập biến quan sát $X_t$ thông qua ma trận Gram tích chập $K$, khắc phục tình trạng bỏ sót thông tin phi tuyến khi $X_t$ không xấp xỉ siêu phẳng: $$X_t = \Lambda(L) F_t + e_t \quad \xrightarrow{\Phi} \quad \Phi(X_t) = \tilde{\Lambda}(L) F_t^\Phi + \varepsilon_t$$
- Lý thuyết Cầu xuất khẩu đa biến (Export Demand Theory): Bổ sung vào mô hình cầu truyền thống (Goldstein & Khan, 1985) hệ thống các biến nhân tố vĩ mô tổng hợp đa chiều đại diện cho sức ép chuỗi cung ứng, biến động tài chính toàn cầu và chỉ số giá quốc tế, chuyển đổi mô hình từ dạng đơn tuyến tính sang mô hình nhân tố mở rộng (Factor-Augmented Export Demand Model).
[Mô hình Khái niệm Đề xuất]
Tập biến giải thích lớn X (m biến)
│
├─► Lọc tương quan Pearson & Khử dư thừa (|P(X_i, Y)| >= α & P(X_i, X_j) < β)
│
├─► Ánh xạ hàm nhân phi tuyến: Φ: X -> H (Không gian Hilbert RKHS)
│
├─► Ma trận Gram K = [k(x_i, x_j)] & Tối ưu hóa lựa chọn tham số hạt nhân lặp
│
├─► Chiết xuất p Nhân tố phi tuyến tối ưu: F_1, F_2, ..., F_p
│
└─► Tích hợp vào mô hình dự báo:
├─► UNCONF: Factor-Augmented ARDL / DFM với Chỉ số dẫn báo Granger
└─► CONF: Factor-Augmented Export Demand Equation + Dự báo Kịch bản Ngoại sinh
Hệ thống mệnh đề lý thuyết (Theoretical Propositions):
- Mệnh đề 1 (P1): Với mọi tập dữ liệu chuỗi thời gian không suy biến, tồn tại ít nhất một hàm nhân bán xác định dương $k(x, x')$ sao cho sai số tái thiết phương sai của KTPCA trong không gian RKHS luôn nhỏ hơn hoặc bằng sai số tái thiết của PCA tuyến tính.
- Mệnh đề 2 (P2): Nhân tố chiết xuất từ KTPCA lặp nắm bắt được các tương tác phi tuyến bậc cao của các biến chỉ số dẫn báo (leading indicators), làm tăng năng lực giải thích $R^2$ điều chỉnh và giảm độ chệch thông tin (information bias) trong các phương trình dự báo phụ.
Khung phân tích độc đáo
Khung phân tích của luận án tích hợp liên ngành 3 trụ cột phương pháp luận:
- Thủ thuật hàm nhân (Kernel Trick) & Hàm Gaussian/RBF: Biến đổi phi tuyến dữ liệu đầu vào sang không gian véc tơ tái tạo Hilbert với ma trận đối xứng bán xác định dương $K_{ij} = k(x_i, x_j) = \exp(-\gamma |x_i - x_j|^2)$.
- Cơ chế Lặp định hướng mô hình (Model-driven Iterative Criterion): Thay vì chọn số lượng thành phần chính thuần túy dựa vào tỷ lệ phương sai tích lũy (Cumulative Variance Percentage $\ge 70%$) như PCA truyền thống, KTPCA lặp sử dụng trực tiếp sai số dự báo RMSE của các mô hình đích (ARDL, MIDAS, BE) làm tiêu chuẩn hội tụ và dừng tối ưu.
- Điều kiện biên (Boundary Conditions): Phương pháp đạt hiệu quả cực đại khi ma trận dữ liệu có $m \ge 30$, các biến có tương quan chéo phi tuyến và chuỗi thời gian đã được chuyển đổi dừng (stationary). Đối với các tập dữ liệu hoàn toàn tuyến tính thuần nhất, KTPCA suy biến tự nhiên về PCA kinh điển.
Phương pháp nghiên cứu tiên tiến
Thiết kế nghiên cứu
Nghiên cứu được định vị vững chắc trên nền tảng triết học khoa học Thực chứng diễn dịch (Positivism / Post-positivism) kết hợp chặt chẽ với Chủ nghĩa hiện thực có phê phán (Critical Realism). Nghiên cứu tiếp cận thực tại kinh tế thông qua việc kiểm chứng định lượng các mô hình toán học và cấu trúc dữ liệu thực nghiệm khách quan.
graph TD
subgraph DataPrep["Tiền xử lý & Kiểm định Dừng"]
D1["Dữ liệu chuỗi thời gian gốc X_t"] --> D2["Kiểm định ADF / KPSS & Lấy Sai phân D(X_t)"]
D2 --> D3["Cân chỉnh Trung bình & Chuẩn hóa"]
end
subgraph FeatSelect["Chọn lọc Thuộc tính Hai ngưỡng"]
D3 --> F1["Hệ số Tương quan Pearson P(X_i, Y) >= α"]
F1 --> F2["Khử biến Dư thừa P(X_i, X_j) < β"]
end
subgraph IterExtract["Chiết xuất KTPCA Lặp"]
F2 --> K1["Tính Ma trận Gram K_ij = k(x_i, x_j)"]
K1 --> K2["Tối ưu hóa Siêu tham số Hàm nhân (Grid Search)"]
K2 --> K3["Đánh giá RMSE trên Mô hình Đích (ARDL/MIDAS/BE)"]
K3 --> K4["Trích xuất p Nhân tố Tối ưu F_t"]
end
subgraph ForeEngine["Động cơ Dự báo Đa tầng"]
K4 --> E1["Thuật toán UNCONF (Dự báo Không điều kiện)"]
K4 --> E2["Thuật toán CONF (Dự báo Có điều kiện)"]
end
Thiết kế đa tầng (Multi-level Design) phân định rõ:
- Cấp độ vĩ mô toàn cầu (Level 1): Các biến số giá hàng hóa thế giới, chỉ số chứng khoán quốc tế (S&P 500, NASDAQ, NIKKEI 225), cung tiền và thương mại toàn cầu từ IMF, World Bank, FED, Eurostat.
- Cấp độ vĩ mô quốc gia (Level 2): Các biến chỉ số giá tiêu dùng (CPI), chỉ số sản xuất công nghiệp (IIP, VIP), chỉ số quản trị mua hàng (PMI), rổ cổ phiếu VN30 và kim ngạch xuất khẩu toàn phần và phân ngành từ GSO, FiinPro.
Quy trình nghiên cứu rigorous
Quy trình nghiên cứu tuân thủ tiêu chuẩn nghiêm ngặt gồm 4 giai đoạn logic khép kín:
[GIAI ĐOẠN 1: TIỀN XỬ LÝ & LỌC BIẾN]
├── Bước 1.1: Kiểm định tính dừng chuỗi thời gian (Augmented Dickey-Fuller / Phillips-Perron)
├── Bước 1.2: Thực hiện biến đổi sai phân liên tiếp d(Y_t) để triệt tiêu xu thế và tính mùa vụ
├── Bước 1.3: Cân chỉnh trung bình chuỗi dữ liệu (Mean-centering): Σ x_ti = 0
└── Bước 1.4: Lọc biến đắt giá bằng tương quan Pearson với ngưỡng liên quan α và ngưỡng dư thừa β
[GIAI ĐOẠN 2: CHIẾT XUẤT NHÂN TỐ KTPCA LẶP]
├── Bước 2.1: Thiết lập không gian đặc trưng RKHS với hàm nhân RBF/Gaussian
├── Bước 2.2: Tính toán ma trận Gram bán xác định dương K cấp N x N
├── Bước 2.3: Giải bài toán giá trị riêng và vector riêng trực giao trên ma trận đặc trưng
├── Bước 2.4: Vòng lặp tối ưu hóa tham số hàm nhân và số nhân tố p dựa trên RMSE nhỏ nhất
└── Bước 2.5: Trích xuất tập nhân tố tối ưu F = [f_1, f_2, ..., f_p]
[GIAI ĐOẠN 3: XÂY DỰNG MÔ HÌNH DỰ BÁO UNCONF & CONF]
├── Nhánh A (UNCONF - Không điều kiện):
│ ├── Kiểm định nhân quả Granger đa biến xác định các chỉ số dẫn báo (Leading Indicators)
│ ├── Xác định độ trễ tối ưu chung và độ trễ riêng qua tiêu chuẩn thông tin AIC/BIC
│ └── Ước lượng phương trình hồi quy Factor-Augmented ARDL(p, q_1, ..., q_k)
└── Nhánh B (CONF - Có điều kiện):
├── Thiết lập phương trình cấu trúc cầu xuất khẩu tích hợp nhân tố KTPCA
├── Xây dựng các mô hình dự báo phụ (Auxiliary Models) cho từng biến giải thích ngoại sinh
└── Thiết lập 3 kịch bản dự báo vĩ mô: Kịch bản Cơ sở, Kịch bản Tích cực, Kịch bản Tiêu cực
[GIAI ĐOẠN 4: THỰC THI DỰ BÁO NGOÀI MẪU & ĐÁNH GIÁ CHẤT LƯỢNG]
├── Bước 4.1: Chia tách tập dữ liệu: In-sample (Ước lượng) và Out-of-sample (Kiểm thử thực tế)
├── Bước 4.2: Dự báo trượt ngoài mẫu đa bước h = 1, 2, ..., 12 tháng
└── Bước 4.3: Đánh giá định lượng qua hệ thống chỉ số: RMSE, MAE, MAPE, Theil's U
Tam giác đạc (Triangulation) được thiết lập toàn diện:
- Tam giác đạc dữ liệu (Data Triangulation): Kết hợp dữ liệu cứng định kỳ (GSO, Tổng cục Hải quan) và dữ liệu mềm khảo sát thời gian thực (PMI, khảo sát niềm tin kinh doanh).
- Tam giác đạc phương pháp (Methodological Triangulation): So sánh chéo kết quả giữa KTPCA lặp với 5 họ phương pháp đối chuẩn (PCA, SPCA, RSPCA, ROBSPCA, ARDL, ARIMA, MIDAS, BE).
- Tam giác đạc lý thuyết (Theoretical Triangulation): Đối chiếu giữa Kinh tế lượng chuỗi thời gian cổ điển và Khoa học dữ liệu học máy hiện đại.
Data và phân tích
Đặc trưng thống kê chi tiết của các biến dữ liệu được kiểm định qua độ lệch (Skewness), độ nhọn (Kurtosis) và kiểm định chuẩn Jarque-Bera ($p < 0.01$, bác bỏ giả thiết phân phối chuẩn của phần lớn chuỗi tài chính, khẳng định tính phi tuyến).
Độ phức tạp tính toán (Computational Complexity) của hai thuật toán đề xuất:
- Thuật toán UNCONF: Đạt mức $\mathcal{O}(N^3 + m \cdot N^2 + p \cdot N)$, trong đó phép giải trị riêng của ma trận Gram chiếm chi phí $\mathcal{O}(N^3)$, với $N$ là số quan sát ($N \ll m$).
- Thuật toán CONF: Đạt mức $\mathcal{O}(N^3 + m^3 + k \cdot N^2)$, hoàn toàn là đa thức bậc 3 đối với số lượng biến $m$ và số quan sát $N$, đảm bảo khả năng tính toán khả thi và tối ưu trên các hệ thống máy chủ tiêu chuẩn mà không đòi hỏi siêu máy tính phân tán.
Hệ thống phần mềm và công cụ thực thi: Ngôn ngữ R (các gói kernlab, midasr, vars, sparsepca), Python (scikit-learn, statsmodels), EViews 12 và MATLAB R2022b.
Phát hiện đột phá và implications
Những phát hiện then chốt
graph LR
subgraph P1["Phát hiện 1: Hiệu năng Giảm chiều"]
KTPCA["KTPCA lặp"] -->|RMSE thấp hơn rõ rệt| BENCH["PCA & họ SPCA (RSPCA, ROBSPCA)"]
end
subgraph P2["Phát hiện 2: Dự báo Không điều kiện"]
UNCONF_M["Thuật toán UNCONF"] -->|Vượt trội 63.6% độ chính xác| ARIMA_M["ARIMA(2,1,2)"]
end
subgraph P3["Phát hiện 3: Dự báo Có điều kiện"]
CONF_M["Thuật toán CONF"] -->|Vượt trội 52.1% độ chính xác| EXP_D["Mô hình Cầu Xuất khẩu Cổ điển"]
end
subgraph P4["Phát hiện 4: Tần suất Hỗn hợp"]
MIDAS_K["KTPCA + MIDAS (EAW/PAW/STEP)"] -->|Nắm bắt biến động ngắn hạn| BE_M["Mô hình Phương trình Bắc cầu BE"]
end
Nghiên cứu đạt được 5 phát hiện cốt lõi mang tính bước ngoặt:
- Sự vượt trội tuyệt đối của KTPCA lặp trong giảm chiều dữ liệu: Trên cả 07 tập dữ liệu chuẩn UCI và 05 bộ dữ liệu kinh tế Việt Nam, KTPCA lặp đạt giá trị RMSE thấp hơn có ý nghĩa thống kê so với PCA, SPCA, RSPCA và ROBSPCA. Đặc biệt, khi cấu trúc dữ liệu có khoảng cách trung bình tối thiểu giữa các vector cột biến thiên mạnh (dấu hiệu của phân bố phi tuyến), hiệu suất giảm chiều của KTPCA lặp cao hơn PCA từ 15% đến 38%.
- Đột phá về độ chính xác trong dự báo không điều kiện: Thuật toán UNCONF tích hợp nhân tố KTPCA lặp và các chỉ số dẫn báo Granger đạt sai số phần trăm tuyệt đối trung bình (MAPE) thấp hơn mô hình ARIMA(2,1,2) tới 2.38 điểm phần trăm, tương ứng với việc tăng độ chính xác dự báo lên 63.6%. Kết quả này chứng minh việc bổ sung các nhân tố vĩ mô phi tuyến từ tập dữ liệu lớn giải quyết triệt để sự nghèo nàn thông tin của mô hình chuỗi thời gian đơn biến.
- Đột phá về độ chính xác trong dự báo có điều kiện: Mô hình dự báo có điều kiện CONF kết hợp phương trình cầu xuất khẩu và 06 nhân tố KTPCA lặp vượt trội mô hình cầu xuất khẩu truyền thống 1.62 điểm phần trăm về sai số dự báo trung bình, giúp nâng cao độ chính xác dự báo thêm 52.1%.
- Phát hiện nghịch đảo kỳ vọng (Counter-intuitive Finding) về họ SPCA: Mặc dù SPCA được lý thuyết hóa là tạo ra các nhân tố thưa dễ giải thích hơn, thực nghiệm diện rộng cho thấy SPCA, RSPCA và ROBSPCA có sai số RMSE trong bài toán dự báo chuỗi thời gian lớn thường cao hơn hoặc chỉ tương đương PCA kinh điển, và hoàn toàn thua kém KTPCA lặp. Điều này chỉ ra rằng việc cưỡng ép tính thưa (sparsity) thông qua phạt chuẩn $L_1$ đã triệt tiêu các tương tác hiệp phương sai tinh vi giữa các biến kinh tế vĩ mô.
- Hiệu quả vượt trội trên mô hình tần suất hỗn hợp: Trong các bài toán nowcast dữ liệu tần suất hỗn hợp, việc tích hợp nhân tố KTPCA vào các mô hình MIDAS tham số hóa (EAW-MIDAS, PAW-MIDAS, STEP3-MIDAS) mang lại độ chính xác cao hơn rõ rệt so với mô hình phương trình bắc cầu BE và U-MIDAS không ràng buộc.
Implications đa chiều
- Về mặt lý thuyết (Theoretical Implications): Công trình xác lập một khuôn mẫu mới cho trường phái mô hình nhân tố động phi tuyến, chứng minh rằng sự kết hợp giữa kỹ thuật hạt nhân (Kernel Methods) và các phương trình kinh tế lượng cấu trúc tạo ra một không gian phân tích mạnh mẽ hơn cả mô hình tuyến tính thuần túy lẫn mô hình hộp đen học sâu.
- Về mặt phương pháp luận (Methodological Innovations): Thuật toán KTPCA lặp và hai quy trình UNCONF / CONF cung cấp một framework mẫu chuẩn có thể chuyển giao trực tiếp để giải quyết các bài toán dự báo chuỗi thời gian lớn trong các lĩnh vực lân cận như dự báo tiêu thụ năng lượng thông minh, dự báo rủi ro thanh khoản ngân hàng, và dự báo lạm phát/GDP.
- Về mặt ứng dụng thực tiễn & Chính sách (Policy & Practical Implications): Cung cấp cho Bộ Công Thương, Bộ Kế hoạch và Đầu tư, Ngân hàng Nhà nước Việt Nam một công cụ định lượng chuẩn xác để xây dựng kịch bản điều hành xuất nhập khẩu theo tháng, phát hiện sớm các điểm đảo chiều chu kỳ kinh tế và ứng phó kịp thời với các cú sốc thương mại quốc tế.
Limitations và Future Research
Nhằm duy trì tính khách quan khoa học, luận án chỉ rõ 4 giới hạn nội tại:
- Lựa chọn siêu tham số hàm nhân: Mặc dù phương pháp KTPCA lặp đã tối ưu hóa việc chọn hàm nhân và tham số $\gamma$ của RBF Kernel dựa trên RMSE thực nghiệm, quá trình này vẫn dựa trên kỹ thuật quét lưới (Grid Search) có thể tiêu tốn thời gian khi số lượng quan sát $N$ tăng lên rất lớn.
- Xử lý dữ liệu rách (Ragged-edge data): Luận án tập trung giải quyết bài toán số chiều lớn ($m \gg N$) và tần suất hỗn hợp, nhưng chưa tích hợp trọn vẹn cơ chế tự động bù khuyết dữ liệu thời gian thực dạng răng cưa (ragged-edge) tại thời điểm phát hành số liệu không đồng bộ của các cơ quan thống kê.
- Phụ thuộc vào tính dừng của chuỗi: Phương pháp yêu cầu các chuỗi thời gian phải được kiểm định và biến đổi về chuỗi dừng thông qua sai phân trước khi đưa vào không gian hàm nhân, điều này đôi khi có thể làm suy giảm một phần thông tin về cân bằng dài hạn (đồng tích hợp - Cointegration).
Chương trình nghiên cứu tiếp nối trong tương lai (Future Agenda):
- Phát triển kỹ thuật Hàm nhân Thích nghi Động (Adaptive Time-varying Kernel) cho phép tham số hạt nhân tự điều chỉnh theo các chế độ biến động kinh tế vĩ mô.
- Mở rộng thuật toán KTPCA sang môi trường học trực tuyến (Online Learning / Streaming Data) để cập nhật tức thời theo từng mili-giây biến động của dữ liệu tài chính.
- Tích hợp KTPCA với các kiến trúc giải thích học máy (XAI - Explainable AI như Shapley Additive Explanations) để nâng cao tính minh bạch trực quan cho từng biến số đầu vào.
Tác động và ảnh hưởng
graph TD
Impact["TÁC ĐỘNG VÀ ẢNH HƯỞNG CỦA LUẬN ÁN"]
Impact --> AC["Học thuật & Nghiên cứu"]
AC --> AC1["Thiết lập chuẩn mực mới cho Nonlinear DFM"]
AC --> AC2["Tiềm năng trích dẫn cao trong ISI/Scopus Q1/Q2"]
Impact --> PL["Hoạch định Chính sách Quốc gia"]
PL --> PL1["Dự báo kim ngạch xuất khẩu hàng tháng cho Bộ Công Thương"]
PL --> PL2["Mô hình hóa kịch bản vĩ mô cho Bộ Kế hoạch & Đầu tư"]
Impact --> IN["Doanh nghiệp & Công nghiệp"]
IN --> IN1["Quản trị chuỗi cung ứng logistics xuất nhập khẩu"]
IN --> IN2["Quản trị rủi ro tỷ giá & dòng tiền ngoại tệ tại các NHTM"]
Impact --> GL["Hội nhập Quốc tế"]
GL --> GL1["Khả năng mở rộng cho các nền kinh tế mới nổi (EMEs)"]
GL --> GL2["Cung cấp giải pháp xử lý Big Data kinh tế lượng"]
- Tác động học thuật (Academic Impact): Mở ra hướng nghiên cứu giao thoa giữa Khoa học Hệ thống thông tin, Học máy và Kinh tế lượng ứng dụng. Các bài báo công bố từ luận án ([CT1] đến [CT6]) đã và đang tạo lập diễn đàn học thuật uy tín với tiềm năng trích dẫn cao trong các tạp chí chuyên ngành quốc tế thuộc danh mục Scopus/Web of Science.
- Ảnh hưởng ngành và Chuyển đổi số (Industry Transformation): Ứng dụng trực tiếp cho các tập đoàn xuất nhập khẩu quy mô lớn, các hiệp hội ngành hàng (dệt may, da giày, thủy sản, điện tử) và các định chế tài chính trong việc dự phóng nhu cầu thị trường, tối ưu hóa lưu kho và quản trị rủi ro dòng tiền ngoại tệ.
- Lợi ích xã hội và Vĩ mô: Đóng góp trực tiếp vào việc ổn định kinh tế vĩ mô, nâng cao năng lực chủ động của Chính phủ trước các biến động địa chính trị và suy thoái kinh tế toàn cầu, bảo vệ mục tiêu tăng trưởng kinh tế bền vững của Việt Nam.
Đối tượng hưởng lợi
| Nhóm đối tượng | Lợi ích học thuật và ứng dụng thực tiễn cụ thể |
|---|---|
| Nghiên cứu sinh & Nhà khoa học trẻ | Tiếp cận một phương pháp luận giảm chiều phi tuyến hoàn chỉnh, có cơ sở toán học tường minh và mã nguồn thuật toán chi tiết để phát triển các đề tài luận án trong xử lý chuỗi thời gian lớn. |
| Giảng viên & Chuyên gia Kinh tế lượng | Sở hữu một khung giáo trình và tài liệu tham khảo tiên tiến để giảng dạy các học phần chuyên sâu về Khai phá dữ liệu lớn, Mô hình nhân tố động và Nowcasting tần suất hỗn hợp. |
| Chuyên viên R&D và Khối phân tích Dữ liệu Doanh nghiệp | Ứng dụng trực tiếp thuật toán KTPCA lặp để xử lý dữ liệu cảm biến IoT, dữ liệu giao dịch thương mại điện tử và chuỗi thời gian bán hàng nhiều chiều với chi phí tính toán thấp. |
| Cơ quan Quản lý Nhà nước & Nhà hoạch định Chính sách | Được chuyển giao công cụ dự báo định lượng chuẩn xác cao (giảm sai số hơn 50% so với mô hình cũ), phục vụ đắc lực công tác xây dựng kịch bản điều hành vĩ mô định kỳ hàng tháng/quý. |
Câu hỏi chuyên sâu
1. Đóng góp lý thuyết độc đáo nhất của luận án là gì và đã mở rộng lý thuyết nào?
Đóng góp lý thuyết độc đáo nhất là việc thiết lập thành công phương pháp KTPCA lặp như một sự mở rộng tự nhiên của Lý thuyết Phân tích thành phần chính (PCA) sang không gian Hilbert tái tạo (RKHS), đồng thời tích hợp trực tiếp hàm mất mát RMSE của mô hình dự báo đích làm tiêu chuẩn dừng tối ưu. Nghiên cứu mở rộng sâu sắc Lý thuyết Mô hình nhân tố động (Dynamic Factor Models - Geweke, 1977; Stock & Watson, 2002) từ không gian tuyến tính sang không gian toán tử hạt nhân phi tuyến.
2. Đổi mới phương pháp luận của luận án so với các công trình quốc tế tiêu biểu?
So với nghiên cứu của Van der Maaten et al. (2009) (vốn kết luận các phương pháp phi tuyến không vượt qua được PCA trên dữ liệu thực) và nghiên cứu của Goulet Coulombe et al. (2021) (dùng PCA trong Macroeconomic Random Forest), luận án đã đổi mới ở cơ chế chọn tham số hạt nhân thích ứng thông qua vòng lặp phản hồi sai số mô hình (Iterative Model-driven selection), khắc phục triệt để hiện tượng quá khớp và chứng minh KTPCA vượt trội PCA trên dữ liệu thực tế.
3. Phát hiện thực nghiệm nào gây bất ngờ nhất trong nghiên cứu?
Phát hiện bất ngờ nhất là hiệu năng dự báo của họ phương pháp Phân tích thành phần chính thưa (SPCA, RSPCA, ROBSPCA) trên các chuỗi thời gian vĩ mô lớn lại kém hơn hoặc chỉ tương đương PCA kinh điển và hoàn toàn thua kém KTPCA lặp. Điều này phản bác lại giả định phổ biến cho rằng mô hình thưa (sparse model) luôn cải thiện độ chính xác dự báo trong dữ liệu lớn.
4. Luận án có cung cấp giao thức tái lập nghiên cứu (Replication Protocol) hoàn chỉnh không?
Luận án cung cấp đầy đủ mã giả thuật toán (Pseudocode) cho cả hai thuật toán UNCONF và CONF, mô tả chi tiết quy trình lấy mẫu, tiêu chuẩn lọc Pearson hai ngưỡng $(\alpha, \beta)$, công thức ma trận Gram, và nguồn gốc của toàn bộ 12 bộ dữ liệu thực nghiệm (UCI và Việt Nam), đảm bảo khả năng tái lập độc lập 100% trong môi trường nghiên cứu chuẩn.
5. Chương trình nghiên cứu 10 năm (10-year Research Agenda) được định hình ra sao?
Chương trình nghiên cứu dài hạn tập trung vào 3 hướng chính: (1) Phát triển Deep Kernel PCA kết hợp mạng nơ-ron sâu tự mã hóa (Autoencoders) cho dữ liệu phi cấu trúc; (2) Mở rộng sang kiến trúc Nowcasting thời gian thực phân tán trên nền tảng Big Data Streaming (Apache Spark/Flink); (3) Xây dựng hệ thống suy luận nhân quả phi tuyến (Nonlinear Causal Inference) dựa trên RKHS cho các chính sách kinh tế vĩ mô phức hợp.
Kết luận
Luận án tiến sĩ của NCS. Nguyễn Minh Hải đã hoàn thành xuất sắc các mục tiêu nghiên cứu đề ra với 5 đóng góp cốt lõi:
- Hoàn thiện cơ sở lý thuyết và thuật toán giảm chiều KTPCA lặp trên các tập dữ liệu chuỗi thời gian lớn, giải quyết căn bản hạn chế của các phương pháp tuyến tính PCA và SPCA khi dữ liệu không xấp xỉ siêu phẳng.
- Đề xuất hai thuật toán dự báo đa tầng UNCONF (không điều kiện) và CONF (có điều kiện) với độ phức tạp tính toán đa thức bậc 3 $\mathcal{O}(N^3 + m^3)$, tối ưu hóa tài nguyên phần cứng.
- Minh chứng thực nghiệm thuyết phục tính vượt trội của KTPCA lặp trên 07 bộ dữ liệu quốc tế UCI và 05 bộ dữ liệu kinh tế vĩ mô Việt Nam so với các đối chuẩn hàng đầu thế giới.
- Tạo ra bước nhảy vọt định lượng trong dự báo kim ngạch xuất khẩu Việt Nam, nâng cao độ chính xác dự báo lên 63.6% đối với mô hình không điều kiện (vượt trội ARIMA) và 52.1% đối với mô hình có điều kiện (vượt trội mô hình cấu trúc cầu xuất khẩu).
- Cung cấp công cụ chuyển giao công nghệ phân tích dữ liệu lớn có giá trị ứng dụng tức thì cho các cơ quan quản lý nhà nước và doanh nghiệp, mở ra 3 hướng nghiên cứu đột phá mới về học máy chuỗi thời gian, kinh tế lượng hạt nhân và dự báo vĩ mô tự động hóa.
Trích đoạn nội dung luận án
Tải xuống để đọc toàn bộBỘ GIÁO DỤC VIỆN HÀN LÂM KHOA HỌC VÀ ĐÀO TẠO VÀ CÔNG NGHỆ VIỆT NAM HỌC VIỆN KHOA HỌC VÀ CÔNG NGHỆ ----------------------------- NGUYỄN MINH HẢI NGHIÊN CỨU PHƯƠNG PHÁP GIẢM CHIỀU BIẾN DỰA TRÊN HÀM NHÂN VÀ ỨNG DỤNG TRONG BÀI TOÁN DỰ BÁO KIM NGẠCH XUẤT KHẨU LUẬN ÁN TIẾN SĨ NGÀNH HỆ THỐNG THÔNG TIN Hà Nội - Năm 2024 i LỜI CAM ĐOAN Tôi xin cam đoan Luận án “Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và ứng dụng trong bài toán dự báo kim ngạch xuất khẩu” là Nghiên cứu nghiên cứu của tôi. Các Nghiên cứu được viết chung với các tác giả khác đều được sự đồng ý của các đồng tác giả trước khi đưa vào luận án. Những kết quả được trình bày trong luận án là hoàn toàn trung thực và chưa từng được công bố trong các Nghiên cứu nào khác. Luận án được hoàn thành trong thời gian tôi làm NCS tại phòng Nhận dạng và Công nghệ tri thức, Viện Công nghệ thông tin, Viện Hàn lâm Khoa học và Công nghệ Việt Nam.
Tác giả luận án NCS. Nguyễn Minh Hải ii LỜI CẢM ƠN Luận án tiến sĩ “Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và ứng dụng trong bài toán dự báo kim ngạch xuất khẩu” được thực hiện tại Viện Công nghệ Thông tin, Học viện Khoa học và Công nghệ, Viện Hàn lâm Khoa học và Công nghệ Việt Nam, dưới sự hướng dẫn khoa học của PGS. Đỗ Văn Thành và PGS. Nguyễn Đức Dũng.
Tôi xin được bày tỏ lòng biết ơn sâu sắc đến hai thầy hướng dẫn là PGS. Đỗ Văn Thành và PGS. Nguyễn Đức Dũng. Trong quá trình học tập, nghiên cứu và thực hiện luận án tôi đã nhận được sự hướng dẫn tận tình, các định hướng khoa học quan trọng và những bài học sâu sắc từ các thầy hướng dẫn.
Các thầy cũng đã luôn tận tâm động viên, khuyến khích và chỉ dẫn giúp đỡ tôi hoàn thành được bản luận án này. Tôi xin chân thành cảm ơn các Ban Lãnh đạo Viện Hàn lâm Khoa học và Công nghệ Việt Nam, Viện Công nghệ thông tin, Học viện Khoa học và Công nghệ, Ban quản lý Tòa nhà Vườn ươm và thầy PGS.TS Ngô Quốc Tạo, NCS Nguyễn Thị Thanh Mai, TS. Nguyễn Thị Phương, Phòng Nhận dạng và Công nghệ Tri thức, Viện Công nghệ thông tin đã luôn giúp đỡ, tạo điều kiện thuận lợi trong việc lưu trú cũng như quá trình học tập, nghiên cứu và thực hiện luận án này. Tôi xin cảm ơn Ban Giám hiệu, các thầy cô giảng viên Khoa Khoa học Cơ bản, Trường Đại học Công Nghiệp thành phố Hồ Chí Minh đã tạo điều kiện giúp đỡ tôi trong suốt thời gian học tập và nghiên cứu.
Cuối cùng, tôi xin bày tỏ lòng biết ơn sâu sắc tới Bố, Mẹ, Anh, Chị em trong gia đình hai bên Nội, bên Ngoại, Vợ và các con đã cho tôi điểm tựa vững chắc, tạo động lực để tôi hoàn thành luận án này. Nguyễn Minh Hải iii MỤC LỤC MỤC LỤC. iii Danh mục hình. vii Danh mục bảng.
viii Danh mục các từ viết tắt. ix Danh mục các thuật ngữ. xi MỞ ĐẦU. Cơ sở và động lực nghiên cứu.
Mục tiêu, đối tượng, phạm vi và phương pháp nghiên cứu .1 Mục tiêu nghiên cứu của luận án .2 Đối tượng nghiên cứu .3 Phạm vi nghiên cứu .4 Phương pháp nghiên cứu. Ý nghĩa lý luận và thực tiễn của luận án. Những đóng góp chính của luận án. Cấu trúc của luận án.
TỔNG QUAN PHƯƠNG PHÁP XÂY DỰNG MÔ HÌNH DỰ BÁO TRÊN TẬP DỮ LIỆU CHUỖI THỜI GIAN LỚN .1 Tổng quan các nghiên cứu trong và ngoài nước.1 Các nghiên cứu ngoài nước.1 Phương pháp xây dựng mô hình dự báo trên tập dữ liệu tần suất lấy mẫu giống nhau .2 Phương pháp xây dựng mô hình nowcast trên tập dữ liệu lớn tần suất hỗn hợp .2 Các nghiên cứu trong nước .2 Các vấn đề còn tồn tại .3 Một số kiến thức cơ sở.1 Các loại dữ liệu kinh tế - tài chính .2 Phân loại dự báo.1 Mô hình dự báo có điều kiện .2 Mô hình dự báo không điều kiện .3 Dữ liệu lớn .1 Khái niệm về dữ liệu lớn .2 Nhận diện một tập dữ liệu lớn .3 Thách thức của dữ liệu lớn .4 Giảm chiều dữ liệu .1 Độ đo hệ số tương quan Pearson: .2 Phương pháp PCA .3 Họ phương pháp SPCA .4 Thủ thuật hàm nhân .5 Phương pháp KPCA .5 Mô hình DFM .1 Mô hình BE nhân tố .2 Mô hình MIDAS nhân tố .6 Quy trình mô hình hóa dự báo kinh tế - tài chính .7 Các tiêu chuẩn đánh giá độ chính xác của mô hình .4 Kết luận Chương 1. PHƯƠNG PHÁP GIẢM CHIỀU BIẾN DỰA VÀO KỸ THUẬT HÀM NHÂN .1 Phương pháp giảm chiều biến dựa vào kỹ thuật hàm nhân.1 Phương pháp giảm chiều dựa vào kỹ thuật hàm nhân .2 Giảm chiều bằng sử dụng phương pháp KTPCA lặp .2 Hiệu suất giảm chiều biến của phương pháp KTPCA lặp .1 Đối với các tập dữ liệu tần suất lấy mẫu giống nhau .1 Tập dữ liệu thực nghiệm .2 Phương pháp thực nghiệm .2 Đối với các tập dữ liệu tần suất hỗn hợp .1 Tập dữ liệu thực nghiệm .2 Phương pháp thực nghiệm .3 Kết Luận Chương 2. DỰ BÁO TRÊN TẬP DỮ LIỆU CHUỖI THỜI GIAN LỚN SỬ DỤNG PHƯƠNG PHÁP GIẢM CHIỀU DỰA VÀO KỸ THUẬT HÀM NHÂN 77 3.1 Quy trình dự báo không và có điều kiện sử dụng phương pháp KTPCA lặp .2 Thuật toán dự báo trên tập dữ liệu chuỗi thời gian lớn .1 Thuật toán dự báo có điều kiện .2 Thuật toán dự báo không điều kiện.3 Độ phức tạp tính toán .1 Độ phức tạp tính toán của thuật toán CONF .2 Độ phức tạp tính toán của thuật toán UNCONF.3 Dự báo kim ngạch xuất khẩu sử dụng thuật toán dự báo .1 Xác định vấn đề dự báo.2 Các yếu tố tác động đến kim ngạch xuất khẩu và thu thập dữ liệu .1 Các yếu tố tác động đến kim ngạch xuất khẩu .2 Tập dữ liệu phục vụ dự báo .3 Dự báo không điều kiện kim ngạch xuất khẩu .1 Giai đoạn 1: Xử lý dữ liệu .3 Giai đoạn 3: Chiết xuất nhân tố và xây dựng mô hình dự báo .4 Giai đoạn 4: Thực hiện dự báo.5 Dự báo ngoài mẫu kim ngạch xuất khẩu .4 Dự báo có điều kiện kim ngạch xuất khẩu .1 Giai đoạn 1: Xử lý dữ liệu .2 Giai đoạn 2: Lựa chọn biến .3 Giai đoạn 3: Chiết xuất nhân tố bằng sử dụng phương pháp KTPCA LẶP .4 Giai đoạn 4: Xây dựng mô hình dự báo phụ và thực hiện dự báo 112 3.5 Dự báo kim ngạch xuất khẩu và xây dựng các kịch bản dự báo .4 Kết luận Chương 3. 121 DANH MỤC CÁC NGHIÊN CỨU CỦA TÁC GIẢ.
123 TÀI LIỆU THAM KHẢO. 135 vii Danh mục hình Hình 0.1 Cấu trúc Luận án .1: Hai giai đoạn chính trong quy trình xây dựng mô hình dự báo trên tập dữ liệu có số chiều cao [38] .2: Phân loại các kỹ thuật giảm chiều học thuộc tính .3: Phương pháp giảm chiều PCA và KPCA [47]. 40 Quá trình mô hình hóa dự báo kinh tế - tài chính [96].5: Ba pha cuối của quá trình mô hình hóa .1: Phương pháp KTPCA dựa vào mô hình có RMSE tốt nhất .2: So sánh hiệu suất giảm chiều của PCA và họ SPCA .3: Hiệu suất giảm chiều dựa vào mô hình BE.4: Hiệu suất giảm chiều dựa vào mô hình STEP3-MIDAS .5: Hiệu suất giảm chiều dựa vào mô hình PAW2-MIDAS.6: Hiệu suất giảm chiều dựa vào mô hình EAW-MIDAS .7: Hiệu suất giảm chiều dựa vào mô hình U-MIDAS.1: Quy trình dự báo không và có điều kiện. 79 viii Danh mục bảng Bảng 2.1: Sự khác nhau của các phương pháp PCA, KPCA, và KTPCA .2: Các đặc tính thống kê của các tập dữ liệu thực nghiệm .3: Khoảng cách trung bình tối thiểu giữa hai véc tơ cột của các tập dữ liệu .4: Hiệu suất giảm chiều của phương pháp KTPCA lặp.5: Hiệu suất giảm chiều của các phương pháp (RMSE) .6: Các đặc tính thống kê của các tập dữ liệu thực nghiệm .7: Hiệu suất giảm chiều biến của các phương pháp được đề xuất.8: Hiệu suất giảm chiều của PCA so với họ SPCA .1: So sánh hai cách tiếp cận xây dựng mô hình dự báo có điều kiện .2: Tập dữ liệu phục vụ dự báo kim ngạch xuất khẩu .3: Các chỉ số dẫn báo được chọn của biến EX .4: Kết quả giảm chiều bằng phương pháp KTPCA LẶP .5: So sánh kết quả dự báo kim ngạch xuất khẩu của các mô hình với thực tế107 Bảng 3.6: Các biến liên quan, không dư thừa với chỉ số kim ngạch xuất khẩu .7: Chiết xuất nhân tố bằng phương pháp KTPCA lặp .8: Kết quả dự báo 06 nhân tố .9: Dự báo của các biến giải thích của mô hình cầu xuất khẩu .10: Đặc trưng thống kê của các biến ngoại sinh .11: So sánh kết quả dự báo kim ngạch xuất khẩu với thực tế.
116 ix Danh mục các từ viết tắt STT Từ viết tắt Nội dung Giải thích Tiêu chuẩn thông tin 1 AIC Akaike information criteria Akaike Autoregressive Distributed 2 ARDL Trễ phân bố tự hồi quy Lag Autoregressive Intergrated Mô hình trung bình trượt 3 ARIMA model Moving Average Model tích hợp tự hồi quy 4 BE Bridge Equation Phương trình bắc cầu Bayesian information 5 BIC Tiêu chuẩn thông tin Bayes criteria The Best, Linear, and Ước lượng không chệch, 6 BLUE Unbiased Estimate tuyến tính và tốt nhất. Mô hình nhân tố động 7 DFM Dynamic Factor Model (DFM) Exponential Almon Mô hình MIDAS trọng số 8 EAW-MIDAS weighting MIDAS Almon hàm mũ Kernel Principal Component Phân tích thành phân chính 9 KPCA Analysis hàm nhân Least Absolute Shrinkage Toán tử lựa chọn và co rút 10 LASSO and Selection Operator tuyệt đối nhỏ nhất 11 MIDAS Mixed Data Sampling Lấy mẫu dữ liệu hỗn hợp Polynomial Almon Mô hình MIDAS trọng số 12 PAW-MIDAS weighting MIDAS Almon đa thức Principal Component 13 PCA Phân tích thành phần chính Analysis Sai số bình phương trung 14 RMSE Root Mean Squared Error bình chuẩn Robust Sparse Principal Phân tích thành phân chính 15 ROBSPCA Component Analysis thưa vững x Random Sparse Principal Phân tích thành phân chính 16 RSPCA Component Analysis thưa ngẫu nhiên Sparse Principal Component Phân tích thành phân chính 17 SPCA Analysis thưa Mô hình MIDAS trọng số 18 STEP-MIDAS STEP weighting MIDAS STEP Mô hình MIDAS không hạn 19 U-MIDAS Unrestricted MIDAS chế xi Danh mục các thuật ngữ STT Thuật ngữ Giải thích Tần suất là nói về kỳ (thời gian) thu thập dữ Biến tần suất cao/ tần suất 1 liệu. Biến có kỳ thu thập dữ liệu ngắn hơn được thấp gọi là biến có (hoặc ở) tần suất cao hơn.
Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ
Trích dẫn luận án này
Nguyễn Minh Hải (2024). Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và [Luận án tiến sĩ, Học viện Khoa học và Công nghệ]. LuanAn.net. https://luanan.net/kinh-te/kinh-te-quoc-te/phuong-phap-giam-chieu-bien-dua-tren-ham-nhan-va-ung-dung-trong-bai-toan-du-bao
Câu hỏi thường gặp
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" nghiên cứu về vấn đề gì?
Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân nhằm tối ưu hiệu quả mô hình học máy.
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" được bảo vệ tại trường nào?
Luận án này được bảo vệ tại Học viện Khoa học và Công nghệ. Năm bảo vệ: 2024.
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" thuộc chuyên ngành gì?
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" thuộc chuyên ngành Hệ thống thông tin. Danh mục: Kinh Tế Quốc Tế.
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" có bao nhiêu trang?
Luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" có 158 trang. Bạn có thể xem trước một phần tài liệu ngay trên trang web trước khi tải về.
Cách tải luận án "Nghiên cứu phương pháp giảm chiều biến dựa trên hàm nhân và" về máy như thế nào?
Để tải luận án về máy, bạn nhấn nút "Tải xuống ngay" trên trang này, sau đó hoàn tất thanh toán phí lưu trữ. File sẽ được tải xuống ngay sau khi thanh toán thành công. Hỗ trợ qua Zalo: 0559 297 239.