Luận án của Chu Bá Thành: Định danh tự động một số làn điệu dân ca Việt Nam
Nghiên cứu đề xuất phương pháp định danh tự động làn điệu dân ca Việt Nam bằng machine learning, cải tiến hiệu quả nhận diện chính xác.
Năm xuất bản
Số trang
148
Thời gian đọc
23 phút
Lượt xem
1
Lượt tải
0
Phí lưu trữ
40 Point
Tổng quan nhanh
- Chủ đề:
- 1. Định danh làn điệu dân ca và bảo tồn di sản văn hóa số
- Số trang:
- 148 trang
- Trường:
- Đại học Bách khoa Hà Nội
- Chuyên ngành:
- Kỹ thuật máy tính
- Tác giả:
- Chu Bá Thành
- Năm:
- 2023
Tóm tắt nội dung luận án
I. Định danh làn điệu dân ca và bảo tồn di sản văn hóa số
Âm nhạc dân gian Việt Nam chứa đựng giá trị lịch sử và bản sắc tinh thần phong phú. Việc số hóa âm nhạc cổ truyền đang đối mặt với nhiều rào cản kỹ thuật. Nghiên cứu Music Information Retrieval (MIR) mở ra hướng tiếp cận hiện đại. Công nghệ trí tuệ nhân tạo hỗ trợ nhận diện tự động từng giai điệu đặc trưng. Nhiệm vụ bảo tồn di sản văn hóa phi vật thể số đòi hỏi các giải pháp xử lý dữ liệu chuẩn xác. Hệ thống máy tính phân tích tần số, nhịp điệu và thang âm để phân biệt các làn điệu. Quá trình này giúp lưu trữ kho tàng âm nhạc dân tộc một cách khoa học. Các nhà nghiên cứu và người yêu âm nhạc dễ dàng tra cứu dữ liệu gốc. Đây là bước tiến quan trọng trong công cuộc gìn giữ di sản nghệ thuật truyền thống. Nền tảng số tạo cầu nối giữa tinh hoa dân gian và công nghệ tiên tiến.
1.1. Tầm quan trọng của truy xuất thông tin âm nhạc MIR
Truy xuất thông tin âm nhạc hay Music Information Retrieval (MIR) là lĩnh vực liên ngành then chốt. Ngành này kết hợp khoa học máy tính, xử lý tín hiệu và lý thuyết âm nhạc. Mục tiêu chính là phân tích, trích xuất cấu trúc và phân loại nội dung âm thanh tự động. Đối với âm nhạc truyền thống, MIR giải quyết bài toán phân loại thể loại âm nhạc truyền thống phức tạp. Các thể loại cổ truyền thường sử dụng thang âm ngũ cung đặc thù. Lối hát truyền miệng và biến tấu ngẫu hứng tạo ra nhiều thách thức lớn. Ứng dụng MIR giúp tự động hóa khâu lập chỉ mục và tìm kiếm giai điệu tương đồng. Người dùng có thể tìm kiếm tác phẩm qua trích đoạn giọng hát hoặc tiếng đàn. Hệ thống MIR nâng cao hiệu quả quản trị dữ liệu âm thanh số quy mô lớn.
1.2. Thách thức phân loại dân ca Quan họ Bắc Ninh và Chèo
Dân ca Quan họ Bắc Ninh và nghệ thuật Chèo có bề dày lịch sử lâu đời. Cả hai thể loại đều sở hữu kỹ thuật thanh nhạc và lề lối diễn xướng độc đáo. Nghệ nhân Quan họ thường sử dụng kỹ thuật nảy hạt, ngân rung và luồn hơi điêu luyện. Trong khi đó, hát Chèo đòi hỏi lối hát tự sự, biểu cảm kịch tính và nhả chữ rõ ràng. Sự đa dạng trong biến thể điệu thức khiến việc phân định bằng tai nghe gặp nhiều trở ngại. Nhiều bài hát Quan họ có dị bản theo từng làng quan họ cổ. Các trích đoạn Chèo cũng có sự pha trộn giai điệu theo từng tích trò. Việc phân loại làn điệu tự động cần những mô hình máy tính có độ nhạy cao. Hệ thống phải nhận biết chính xác cấu trúc âm nhạc và âm sắc đặc thù của từng thể loại.
II. Xử lý tín hiệu âm thanh và trích xuất đặc trưng MFCC
Tín hiệu âm thanh thô cần trải qua quá trình tiền xử lý trước khi đưa vào mô hình học máy. Lĩnh vực xử lý tín hiệu âm thanh (Audio Signal Processing) cung cấp các thuật toán chuyển đổi miền thời gian sang miền tần số. Các đặc trưng phổ phản ánh chính xác cấu trúc hài âm của nhạc cụ và giọng hát dân gian. Việc trích xuất thông số chuẩn xác giúp nâng cao độ chính xác của bộ nhận dạng. Tín hiệu số được lọc nhiễu, chuẩn hóa biên độ và cắt thành các khung thời gian ngắn. Từng khung âm thanh mang thông tin về cao độ, cường độ và trường độ. Sự kết hợp giữa các đặc trưng thời gian và đặc trưng phổ tạo nên bức tranh toàn diện về làn điệu. Đây là tiền đề bắt buộc cho mọi tác vụ phân lớp âm thanh thông minh.
2.1. Kỹ thuật xử lý tín hiệu âm thanh Audio Signal Processing
Quy trình xử lý tín hiệu âm thanh (Audio Signal Processing) bắt đầu từ việc thu nhận và số hóa sóng âm. Tín hiệu liên tục được lấy mẫu với tần số phù hợp để bảo toàn chi tiết giọng hát. Phép biến đổi Fourier ngắn hạn (STFT) chia nhỏ tín hiệu thành các đoạn chồng lấp. Phương pháp này chuyển đổi dữ liệu từ miền thời gian sang biểu diễn thời gian - tần số. Bộ lọc thông dải loại bỏ các tạp âm môi trường và tiếng ồn không mong muốn. Năng lượng tín hiệu và tốc độ cắt qua điểm không (Zero Crossing Rate) được tính toán tỉ mỉ. Các thông số thống kê mô tả sự biến thiên biên độ của giọng hát cổ truyền. Giai đoạn tiền xử lý chuẩn xác giúp loại bỏ dữ liệu rác và làm nổi bật tín hiệu hữu ích.
2.2. Trích xuất đặc trưng âm thanh MFCC và phổ Spectrogram
Trích xuất đặc trưng âm thanh MFCC là phương pháp then chốt trong nhận dạng giọng hát và âm nhạc. Hệ số MFCC mô phỏng cách tai người cảm nhận tần số âm thanh qua thang đo Mel. Các hệ số này nắm bắt đặc tính âm sắc và khuôn dạng thanh quản của nghệ nhân. Bên cạnh đó, phổ Spectrogram âm nhạc dân gian biểu diễn trực quan năng lượng âm thanh theo thời gian. Hình ảnh phổ phản ánh rõ các đoạn luyến láy, ngân rung đặc trưng của dân ca. Phổ biến đổi cosine rời rạc giúp nén thông tin và giảm chiều dữ liệu hiệu quả. Sự kết hợp giữa MFCC và Spectrogram cung cấp vector đặc trưng giàu thông tin. Mô hình học máy dựa vào các đặc trưng này để nhận dạng âm thanh dân ca với độ chính xác cao.
2.3. Phương pháp tăng cường dữ liệu âm thanh dân gian
Nguồn dữ liệu âm thanh dân ca truyền thống thường hạn chế về số lượng và chất lượng thu âm. Kỹ thuật tăng cường dữ liệu (Data Augmentation) giải quyết triệt để sự thiếu hụt mẫu huấn luyện. Các phương pháp phổ biến bao gồm chia đôi tệp âm thanh để nhân đôi số lượng đoạn mẫu. Kỹ thuật tạo tiếng vọng (echo) mô phỏng không gian biểu diễn sân khấu thực tế. Thao tác cộng nhiễu trắng ngẫu nhiên giúp mô hình tăng khả năng chống chịu nhiễu môi trường. Thay đổi cao độ (pitch shifting) tạo ra các biến thể giọng hát ở nhiều cung bậc khác nhau. Việc làm giàu tập dữ liệu ngăn ngừa hiện tượng quá khớp (overfitting) trong quá trình huấn luyện. Tập mẫu phong phú giúp các thuật toán nhận dạng hoạt động ổn định và chính xác hơn trên dữ liệu thực tế.
III. Các thuật toán học máy nhận dạng âm thanh dân ca cổ
Các thuật toán học máy truyền thống đóng vai trò quan trọng trong phân lớp dữ liệu âm thanh. Nghiên cứu khai thác nhiều bộ phân loại kinh điển để nhận dạng âm thanh dân ca Việt Nam. Các mô hình thống kê học hỏi ranh giới quyết định dựa trên vector đặc trưng trích xuất. Tốc độ tính toán nhanh và khả năng giải thích rõ ràng là ưu điểm nổi bật của phương pháp này. Việc định danh chính xác các làn điệu giúp phân loại thể loại âm nhạc truyền thống hiệu quả. Nghiên cứu thiết lập nhiều kịch bản thử nghiệm đa dạng trên các tập dữ liệu thực tế. Kết quả đánh giá cung cấp cái nhìn sâu sắc về năng lực phân loại của từng thuật toán. Đây là bước đệm thiết yếu trước khi triển khai các kiến trúc học sâu phức tạp hơn.
3.1. Phân loại âm nhạc truyền thống bằng GMM và SVM
Mô hình hỗn hợp Gauss (GMM) và máy véc-tơ hỗ trợ (SVM) là hai công cụ phân loại mạnh mẽ. GMM ước lượng hàm mật độ xác suất của các đặc trưng âm thanh theo từng thể loại. Mô hình này rất phù hợp để nắm bắt phân bố âm sắc của giọng hát Quan họ và Chèo. Trong khi đó, thuật toán SVM tìm kiếm siêu phẳng tối ưu để phân tách các lớp dữ liệu. SVM thể hiện độ chính xác vượt trội khi xử lý các không gian đặc trưng nhiều chiều. Các thử nghiệm trên bộ công cụ WEKA chứng minh tính ổn định của thuật toán k-NN và cây quyết định. Hiệu năng phân loại giữa Chèo và Quan họ đạt tỷ lệ nhận dạng khả quan. Các mô hình truyền thống vẫn duy trì giá trị ứng dụng cao với tập dữ liệu quy mô vừa.
3.2. Định danh làn điệu âm nhạc với mô hình i vector
Kỹ thuật biểu diễn không gian tổng thể i-vector xuất phát từ bài toán nhận dạng người nói. Phương pháp này nén thông tin âm thanh thành một vector có độ dài cố định. Toàn bộ đặc trưng âm vực và phong cách hát được gói gọn trong không gian thứ nguyên thấp. Kỹ thuật bù trừ không gian biến thiên giúp loại bỏ yếu tố khác biệt về thiết bị thu âm. Việc ứng dụng i-vector cho phép phân lớp và định danh nhiều làn điệu dân ca cùng lúc. Mô hình phân biệt rõ ràng sự khác nhau giữa giai điệu Chèo và làn điệu Quan họ. Độ chính xác nhận dạng duy trì ở mức cao trên nhiều điều kiện thử nghiệm khác nhau. Đây là giải pháp học máy hiệu quả cho các bài toán nhận dạng âm thanh dân gian phức tạp.
IV. Mô hình học sâu nhận diện giai điệu âm nhạc Việt Nam
Sự phát triển của trí tuệ nhân tạo mang lại bước đột phá cho xử lý âm thanh. Mô hình học sâu nhận diện giai điệu tự động học các biểu diễn đặc trưng phức tạp từ dữ liệu thô. Thay vì dựa hoàn toàn vào đặc trưng thủ công, mạng nơ-ron sâu tự khám phá các mẫu hình trừu tượng. Hình ảnh phổ Spectrogram âm nhạc dân gian trở thành đầu vào trực quan cho các mạng thị giác máy tính. Khả năng khái quát hóa cao giúp mô hình thích ứng tốt với các bản ghi âm có tạp âm. Hệ thống phân loại chính xác các làn điệu khó với độ tin cậy vượt bậc. Đây là chìa khóa then chốt để xây dựng hệ thống nhận dạng âm thanh dân ca tự động quy mô lớn. Ứng dụng mở ra tiềm năng thương mại và nghiên cứu học thuật sâu rộng.
4.1. Kiến trúc mạng nơ ron sâu CNN và CRNN nhận diện điệu thức
Mạng nơ-ron tích chập (CNN) và mạng tích chập hồi quy (CRNN) là hai kiến trúc học sâu tiêu biểu. Mạng CNN quét qua phổ Spectrogram để phát hiện các mẫu hình thời gian - tần số cục bộ. Các lớp tích chập sâu (DCNN) trích xuất đặc trưng âm nhạc từ mức cơ bản đến trừu tượng cao. Trong khi đó, mạng CRNN kết hợp CNN với các tầng hồi quy để nắm bắt chuỗi diễn biến thời gian. Sự kết hợp này mô hình hóa hoàn hảo giai điệu và cấu trúc trường độ của từng làn điệu. Các hàm kích hoạt phi tuyến như ReLU và ELU tối ưu hóa quá trình lan truyền ngược. Kết quả thử nghiệm cho thấy CRNN đạt hiệu suất nhận diện điệu thức vượt trội so với các thuật toán cổ điển.
4.2. Mạng Residual Attention Network trong phân lớp nhạc Việt
Mạng chú ý phần dư (Residual Attention Network - RAN) tạo nên bước đột phá trong phân loại nhạc Việt. Cơ chế chú ý (Attention Mechanism) tự động tập trung vào các đoạn âm thanh mang tính quyết định. Các đoạn luyến láy đặc thù hay câu ngân dài được mô hình gán trọng số cao hơn. Kết nối phần dư (Residual Connections) ngăn chặn hiện tượng tiêu biến gradient khi tăng chiều sâu mạng nơ-ron. RAN phân tích đồng thời thông tin không gian và kênh trên phổ âm thanh. Độ chính xác phân loại các thể loại âm nhạc truyền thống Việt Nam tăng lên đáng kể. Mô hình phân biệt rõ nét các cấu trúc âm nhạc phức tạp giữa nhiều làn điệu dân gian. Đây là công cụ đắc lực cho các hệ sinh thái phân tích âm nhạc tự động.
V. Phân loại thể loại âm nhạc truyền thống và mở rộng
Nghiên cứu mở rộng thử nghiệm trên nhiều bộ dữ liệu tiêu chuẩn quốc tế và trong nước. Các chỉ số Accuracy, Precision, Recall và F1-score được sử dụng để đánh giá hiệu năng toàn diện. Việc kiểm chứng chéo khẳng định tính ổn định của các kiến trúc học sâu đề xuất. Kết quả nghiên cứu không chỉ áp dụng cho dân ca Quan họ Bắc Ninh mà còn mở rộng sang hát Chèo và Ca trù. Giải pháp công nghệ thúc đẩy mạnh mẽ công tác bảo tồn di sản văn hóa phi vật thể số. Hệ thống tự động hóa quá trình phân loại kho tư liệu âm nhạc quốc gia. Đây là nền tảng vững chắc để phát triển các ứng dụng di động nhận diện âm nhạc dân tộc cho cộng đồng.
5.1. Thử nghiệm trên các bộ dữ liệu GTZAN và FMA_SMALL
Đánh giá mô hình trên các bộ dữ liệu chuẩn quốc tế là bước kiểm chứng năng lực thuật toán. Bộ dữ liệu GTZAN bao gồm hàng nghìn đoạn âm thanh thuộc nhiều thể loại âm nhạc thế giới. Tập dữ liệu FMA_SMALL cung cấp cấu trúc đa dạng với nhiều bản ghi âm phức tạp. Mô hình Residual Attention Network đạt độ chính xác cao trên cả hai tập kiểm thử. Các chỉ số F1-score và đường cong ROC chứng minh khả năng phân lớp đồng đều giữa các nhóm thể loại. Việc so sánh với các nghiên cứu tiền nhiệm khẳng định tính ưu việt của kiến trúc đề xuất. Năng lực xử lý mạnh mẽ trên dữ liệu chuẩn quốc tế bảo đảm tính ứng dụng cao cho âm nhạc truyền thống Việt Nam.
5.2. Hướng phát triển định danh hát Chèo và Ca trù tương lai
Hướng phát triển tương lai tập trung mở rộng quy mô dữ liệu cho hát Chèo và Ca trù. Ca trù sở hữu hệ thống điệu hát, thể cách và phách nhịp hết sức tinh tế. Việc nhận dạng nhịp phách, tiếng trống chầu và tiếng đàn đáy đòi hỏi các mô hình chuyên biệt. Các nhà nghiên cứu hướng tới xây dựng tập dữ liệu lớn kết hợp nhãn đa cấp độ. Công nghệ học chuyển giao (Transfer Learning) sẽ được khai thác để giải quyết bài toán ít dữ liệu. Ứng dụng di động nhận diện làn điệu dân ca theo thời gian thực đang được tích cực thử nghiệm. Dự án góp phần phổ biến âm nhạc dân gian đến thế hệ trẻ một cách trực quan và hiện đại.
Mục lục chi tiết luận án
Tải xuống file đầy đủ để xem toàn bộ nội dung
Tải đầy đủ (148 trang)Nội dung chính
Tổng quan về luận án
Luận án "Định danh tự động một số làn điệu dân ca Việt Nam" của tác giả Chu Bá Thành là một công trình nghiên cứu tiên phong, giải quyết thách thức ngày càng lớn trong việc quản lý và phân loại các cơ sở dữ liệu nhạc số khổng lồ, đặc biệt là đối với di sản âm nhạc dân ca Việt Nam. Trong bối cảnh sự bùng nổ của Internet và số hóa âm nhạc, nhu cầu về các phương pháp tự động hóa để khám phá, giới thiệu và bảo tồn văn hóa âm nhạc trở nên cấp thiết hơn bao giờ hết. Luận án nổi bật bởi cách tiếp cận đa chiều, tích hợp các thành tựu mới nhất trong xử lý tín hiệu âm thanh, học máy (Machine Learning) và học sâu (Deep Learning) để định danh tự động các làn điệu dân ca.
Research gap cụ thể mà luận án giải quyết xuất phát từ tính phức tạp và chưa rõ ràng của ranh giới thể loại âm nhạc nói chung, đặc biệt là đối với dân ca. Heittola [1] năm 2003 đã chỉ ra rằng việc phân loại thể loại âm nhạc là phương pháp hữu dụng nhất để quản lý cơ sở dữ liệu nhạc số, nhưng "việc xác định một thể loại âm nhạc cụ thể vẫn còn là một vấn đề rất khó, vì ranh giới giữa các thể loại âm nhạc thường không rõ ràng" (Trang 12). Đối với dân ca Việt Nam, thách thức này còn lớn hơn do tính đa dạng, phong phú về âm điệu, phong cách và sắc thái văn hóa đặc thù của từng vùng miền, khiến việc phân loại thủ công trở nên chủ quan và tốn thời gian. Luận án này lấp đầy khoảng trống đó bằng cách cung cấp các mô hình định danh tự động hiệu quả, tập trung vào hai loại hình dân ca phổ biến là Chèo và Quan họ, vốn chưa được khai thác sâu bằng các phương pháp tính toán tiên tiến.
Các câu hỏi nghiên cứu chính và giả thuyết của luận án được định hình để kiểm tra tính hiệu quả của các mô hình đề xuất:
- Làm thế nào để xây dựng một bộ dữ liệu dân ca Việt Nam chất lượng cao, có thể sử dụng cho nghiên cứu định danh tự động các làn điệu Chèo và Quan họ?
- Những đặc trưng tín hiệu âm nhạc nào là hiệu quả nhất để phân biệt và định danh các làn điệu dân ca Việt Nam?
- Các mô hình học máy truyền thống (ví dụ: SVM, GMM) và học sâu (ví dụ: CNN, LSTM, CRNN) có thể đạt được độ chính xác như thế nào trong việc định danh tự động các làn điệu dân ca Chèo và Quan họ?
- Các phương pháp tăng cường dữ liệu ảnh hưởng như thế nào đến hiệu suất của các mô hình học sâu trong phân lớp thể loại âm nhạc, cả trên bộ dữ liệu dân ca Việt Nam và các bộ dữ liệu quốc tế (GTZAN, FMA_SMALL)?
- Mô hình học sâu nào thể hiện khả năng tổng quát hóa tốt nhất cho nhiệm vụ phân lớp thể loại âm nhạc trên các bộ dữ liệu đa dạng?
Khung lý thuyết của luận án được xây dựng dựa trên sự tích hợp các lý thuyết về Xử lý tín hiệu số (Digital Signal Processing), Lý thuyết học máy và học sâu. Các lý thuyết cốt lõi bao gồm Lý thuyết entropy và thông tin để trích xuất đặc trưng âm thanh, Lý thuyết phân loại thống kê (Statistical Classification Theory) làm nền tảng cho SVM (Vapnik, Cortes) và GMM, và Lý thuyết mạng nơ-ron nhân tạo (Rosenblatt, Rumelhart & McClelland) làm cơ sở cho các kiến trúc học sâu như CNN (LeCun et al.), LSTM (Hochreiter & Schmidhuber), CRNN, RAN, CSN và DenseNet.
Luận án mang đến đóng góp đột phá bằng việc "Đề xuất các phương pháp tăng cường dữ liệu và mô hình học sâu thích hợp cho phân lớp thể loại âm nhạc nói chung" (Trang 15), được kiểm chứng trên cả dữ liệu dân ca Việt Nam (Chèo và Quan họ) và các bộ dữ liệu quốc tế GTZAN và FMA_SMALL. Tác động của nghiên cứu được lượng hóa qua việc nâng cao hiệu suất định danh, với các kết quả định danh đúng đạt được trên các mô hình cụ thể (ví dụ: "Ma trận nhầm lẫn với M = 16 trên 2 bộ tham số" trong Bảng 2.7, "Tổng hợp kết quả phân lớp Chèo và Quan họ với 2 bộ tham số" trong Bảng 2.18, và "Kết quả nghiên cứu phân lớp và định danh" trong Chương 2) cho thấy cải thiện đáng kể so với các phương pháp trước đó.
Phạm vi nghiên cứu tập trung vào định danh tự động các làn điệu dân ca phổ biến của Chèo và Quan họ. Bộ dữ liệu được xây dựng bao gồm các file âm nhạc dân ca Việt Nam, được bổ sung bằng các bộ dữ liệu quốc tế như GTZAN (1.000 files, 10 thể loại) và FMA_SMALL (8.000 files, 8 thể loại) theo Bảng 1.2. Sự kết hợp này không chỉ đảm bảo tính cụ thể của nghiên cứu mà còn khẳng định khả năng tổng quát hóa của các mô hình đề xuất. Ý nghĩa của luận án không chỉ nằm ở việc bảo tồn di sản văn hóa thông qua công nghệ mà còn mở ra hướng nghiên cứu mới trong lĩnh vực Truy xuất thông tin âm nhạc (MIR - Music Information Retrieval) cho các thể loại âm nhạc đặc thù.
Literature Review và Positioning
Nghiên cứu về phân lớp thể loại âm nhạc (MGC - Music Genre Classification) đã và đang là một lĩnh vực năng động trong Truy xuất thông tin âm nhạc (MIR). Các luồng nghiên cứu chính có thể được tổng hợp thành hai hướng: các phương pháp dựa trên học máy truyền thống và các phương pháp dựa trên học sâu. Các nghiên cứu ban đầu thường tập trung vào trích xuất các đặc trưng thủ công từ tín hiệu âm thanh, bao gồm đặc trưng trong miền thời gian (như ZCR, năng lượng, RMS) và đặc trưng phổ (như MFCC, Spectral Centroid, Spectral Contrast, Spectral Rolloff, Spectral Bandwidth, Spectral Flux), sau đó sử dụng các bộ phân lớp như SVM (Support Vector Machine) của Cortes và Vapnik [37] hay GMM (Gaussian Mixture Model) của Reynolds và Rose [38, 39]. Ví dụ, trong [30], một sơ đồ chung cho hệ thống phân lớp thể loại âm nhạc đã được đề xuất, bao gồm các bước từ xây dựng bộ dữ liệu, trích rút đặc trưng, huấn luyện mô hình đến đánh giá và nhận dạng.
Tuy nhiên, lĩnh vực này không ngừng phát triển. Tình hình nghiên cứu ngoài nước đã chứng kiến sự chuyển dịch mạnh mẽ sang các mô hình học sâu (Deep Learning) từ những năm 2010, với các kiến trúc như CNN (Convolutional Neural Networks) của LeCun et al. [43], LSTM (Long Short-Term Memory) và các biến thể của chúng [46-51]. Các nghiên cứu này thường đạt được độ chính xác cao hơn, đặc biệt khi xử lý các bộ dữ liệu lớn và phức tạp. Ví dụ, trên bộ dữ liệu GTZAN [32] và FMA_SMALL [36], nhiều mô hình học sâu đã được thử nghiệm và so sánh, như bảng 1.5 và 1.6 tóm tắt một số kết quả nghiên cứu nổi bật về MGC trên GTZAN và FMA_SMALL.
Tình hình nghiên cứu trong nước về MGC còn hạn chế hơn, đặc biệt đối với các thể loại âm nhạc truyền thống Việt Nam. Các nghiên cứu hiện có thường tập trung vào các thể loại nhạc hiện đại hoặc sử dụng các bộ dữ liệu nhỏ, chưa khai thác sâu tiềm năng của học sâu và tăng cường dữ liệu cho các thể loại âm nhạc đặc thù. Việc phân lớp âm nhạc theo thể loại nếu thực hiện thủ công sẽ vô cùng khó khăn do khối lượng công việc lớn và bị chi phối bởi các yếu tố mang tính chủ quan, phụ thuộc nhiều vào kiến thức và kinh nghiệm của người thực hiện phân loại.
Luận án này định vị mình bằng cách giải quyết trực tiếp một khoảng trống cụ thể: sự thiếu vắng các mô hình hiệu quả cho việc định danh tự động các làn điệu dân ca Việt Nam. Trong khi các nghiên cứu quốc tế tập trung vào các thể loại phổ biến toàn cầu (Pop, Rock, Jazz, Classical...), luận án này đào sâu vào bản sắc âm nhạc Việt Nam, đặc biệt là Chèo và Quan họ, vốn mang những đặc trưng riêng biệt về cao độ, trường độ, cường độ, âm sắc, kỹ thuật hát "vang, rền, nền, nảy" (đối với Quan họ) hay "nảy hạt, rung giọng, hát liền hơi, ngắt, nhấn hơi" (đối với Chèo), cùng với các tiếng đệm, luyến láy phức tạp không tìm thấy ở các thể loại khác. Các đặc điểm này đòi hỏi một cách tiếp cận và tối ưu hóa mô hình đặc thù.
Nghiên cứu này tiến xa hơn bằng cách không chỉ áp dụng mà còn "Đề xuất các phương pháp tăng cường dữ liệu và mô hình học sâu thích hợp cho phân lớp thể loại âm nhạc nói chung" (Trang 15). Điều này không chỉ giới hạn ở việc áp dụng kỹ thuật hiện có mà còn tùy chỉnh và phát triển chúng để phù hợp với đặc thù của dân ca Việt Nam, sau đó kiểm tra khả năng tổng quát hóa trên các bộ dữ liệu quốc tế GTZAN và FMA_SMALL. Điều này giúp khẳng định giá trị của các phương pháp đề xuất vượt ra ngoài phạm vi văn hóa cụ thể, góp phần vào tiến bộ chung của lĩnh vực MIR. Ví dụ, so sánh với các nghiên cứu như đó của Lidy & Rauber (2005) hoặc Schedl et al. (2014) trên GTZAN và FMA_SMALL [36], luận án không chỉ tái kiểm chứng mà còn đưa ra các phương pháp tăng cường dữ liệu mới (chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ) và đánh giá ảnh hưởng của chúng, một khía cạnh thường chưa được khám phá đầy đủ trong các nghiên cứu quốc tế.
Đóng góp lý thuyết và khung phân tích
Đóng góp cho lý thuyết
Luận án này đóng góp đáng kể vào lý thuyết MGC bằng cách mở rộng và thử thách các lý thuyết hiện có trong bối cảnh âm nhạc dân ca Việt Nam. Thay vì tạo ra một lý thuyết hoàn toàn mới, nghiên cứu tập trung vào việc tinh chỉnh và tối ưu hóa các mô hình học sâu để giải quyết một bài toán phức tạp và mang tính đặc thù văn hóa. Cụ thể, luận án mở rộng ứng dụng của các mô hình học sâu như CNN (LeCun, 1998), LSTM (Hochreiter & Schmidhuber, 1997), CRNN, RAN, CSN và DenseNet, vốn đã được chứng minh hiệu quả trong các lĩnh vực xử lý ảnh và âm thanh chung, vào một miền dữ liệu âm nhạc có cấu trúc và biểu cảm độc đáo.
Nghiên cứu này không trực tiếp thách thức các lý thuyết cơ bản của học sâu mà thay vào đó, nó mở rộng ranh giới ứng dụng của chúng, chứng minh khả năng thích ứng và hiệu quả của các kiến trúc này trong việc nắm bắt các đặc trưng tinh vi của dân ca, nơi mà các mô hình truyền thống thường gặp khó khăn. Các đề xuất về phương pháp tăng cường dữ liệu như "chia đôi các file dữ liệu âm nhạc, tạo tiếng vọng, cộng nhiễu trắng và thay đổi cao độ" (Chương 2) cũng là một đóng góp lý thuyết quan trọng, làm phong phú thêm lý thuyết về tiền xử lý dữ liệu cho các nhiệm vụ MGC, đặc biệt khi dữ liệu huấn luyện còn hạn chế hoặc có tính đặc thù cao. Điều này mở rộng lý thuyết về cách tăng cường khả năng tổng quát hóa và chống quá khớp cho các mô hình học sâu trong bối cảnh xử lý âm thanh.
Khung phân tích khái niệm của luận án tích hợp các thành phần chính:
- Trích xuất đặc trưng âm thanh đa dạng: Sử dụng một tập hợp phong phú các đặc trưng từ tín hiệu âm nhạc, bao gồm các hệ số MFCC, năng lượng, tần số cơ bản F0 và các biến thể, phổ Mel, pitch, tonnetz, spectral và chroma (Chương 2). Mỗi loại đặc trưng này nắm bắt một khía cạnh khác nhau của âm thanh (ví dụ: MFCC cho âm sắc, Spectral Centroid cho phân bố năng lượng tần số).
- Phương pháp tăng cường dữ liệu: Ứng dụng các kỹ thuật như chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, và thay đổi cao độ để mở rộng bộ dữ liệu huấn luyện và cải thiện tính vững chắc của mô hình.
- Kiến trúc học máy và học sâu: Triển khai và so sánh hiệu suất của nhiều mô hình, từ học máy truyền thống (SVM, GMM, MultiLayer Perceptron) đến học sâu tiên tiến (CNN, LSTM, CRNN, RAN, CSN, DenseNet).
Mô hình lý thuyết bao gồm các mệnh đề/giả thuyết được đánh số như sau:
- Giả thuyết 1: Việc kết hợp các đặc trưng âm thanh đa dạng (MFCC, phổ Mel, năng lượng, v.v.) sẽ cung cấp thông tin toàn diện hơn và cải thiện hiệu suất định danh so với việc chỉ sử dụng một loại đặc trưng.
- Giả thuyết 2: Các kỹ thuật tăng cường dữ liệu (chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ) sẽ làm tăng độ chính xác và khả năng tổng quát hóa của các mô hình học sâu trên bộ dữ liệu dân ca Việt Nam và các bộ dữ liệu quốc tế.
- Giả thuyết 3: Các kiến trúc học sâu (CNN, LSTM, CRNN, RAN, CSN, DenseNet) sẽ vượt trội hơn các mô hình học máy truyền thống (SVM, GMM) trong nhiệm vụ định danh tự động các làn điệu dân ca Việt Nam do khả năng học các biểu diễn đặc trưng phức tạp.
- Giả thuyết 4: Một số kiến trúc học sâu cụ thể (ví dụ: RAN, DenseNet) sẽ thể hiện hiệu suất vượt trội hơn các kiến trúc học sâu khác trên các bộ dữ liệu MGC do khả năng xử lý các mối quan hệ phức tạp trong dữ liệu phổ âm thanh.
Luận án này không tuyên bố một sự thay đổi mô hình (paradigm shift) ở cấp độ lý thuyết cơ bản về AI hay học sâu. Thay vào đó, nó minh chứng một "paradigm advancement" trong lĩnh vực MIR bằng cách thiết lập một phương pháp luận mạnh mẽ, tích hợp các kỹ thuật hiện đại để giải quyết các bài toán định danh âm nhạc có tính đặc thù văn hóa cao. Bằng chứng từ các kết quả thực nghiệm trên các bộ dữ liệu khác nhau (dân ca Việt Nam, GTZAN, FMA) sẽ củng cố luận điểm rằng các phương pháp được đề xuất là một bước tiến đáng kể trong khả năng tự động hóa việc phân loại âm nhạc phức tạp.
Khung phân tích độc đáo
Khung phân tích của luận án thể hiện sự độc đáo thông qua việc tích hợp sâu sắc các lý thuyết và phương pháp từ ba lĩnh vực chính: Xử lý tín hiệu số, Học máy, và Học sâu. Cụ thể, nghiên cứu tích hợp:
- Lý thuyết Cepstrum và Thang tần số Mel (để tính MFCC), vốn là nền tảng của xử lý tín hiệu giọng nói và âm nhạc, kết hợp với các đặc trưng phổ khác như Spectral Centroid, Spectral Contrast.
- Lý thuyết không gian hỗ trợ (Support Vector Theory) của Vladimir Vapnik, được triển khai qua mô hình SVM, cung cấp một cách tiếp cận dựa trên ranh giới phân tách tối ưu.
- Lý thuyết mô hình hỗn hợp xác suất (Probabilistic Mixture Models) của GMM (do Reynolds và Rose phát triển), cho phép mô hình hóa phân bố phức tạp của các đặc trưng âm thanh.
- Lý thuyết mạng nơ-ron sâu với các kiến trúc tiên tiến như CNN (Fukushima, LeCun), LSTM (Hochreiter & Schmidhuber), CRNN (cho phép xử lý cả đặc trưng cục bộ và chuỗi thời gian), RAN, CSN và DenseNet, vốn đại diện cho đỉnh cao của khả năng học biểu diễn tự động.
Cách tiếp cận phân tích mới lạ nằm ở việc không chỉ áp dụng đơn lẻ từng mô hình mà còn thực hiện đánh giá so sánh toàn diện, đồng thời giới thiệu các phương pháp tăng cường dữ liệu được thiết kế đặc biệt cho dữ liệu âm nhạc. Điều này tạo ra một quy trình định danh mạnh mẽ hơn, ít phụ thuộc vào số lượng dữ liệu ban đầu và có khả năng tổng quát hóa cao.
Các đóng góp khái niệm bao gồm:
- "Làn điệu dân ca" được định nghĩa lại trong ngữ cảnh tính toán như một tập hợp các đặc trưng âm thanh có thể định lượng, cho phép phân biệt các phong cách hát và cấu trúc âm nhạc cụ thể. Theo cách gọi truyền thống của người Việt, làn điệu dùng để chỉ những bài bản có tên và lời ca khác nhau nhưng giai điệu có những nét tương đồng giống nhau.
- "Tính thích hợp của mô hình học sâu" được định nghĩa không chỉ qua độ chính xác mà còn qua khả năng thích ứng với các đặc trưng văn hóa tinh tế của âm nhạc dân ca và khả năng tổng quát hóa trên các bộ dữ liệu đa dạng.
Các điều kiện biên (boundary conditions) được nêu rõ:
- Nghiên cứu chủ yếu tập trung vào "định danh tự động các làn điệu dân ca phổ biến của Chèo và Quan họ" (Trang 14), giới hạn ở hai loại hình dân ca Bắc Bộ, mặc dù các kết quả cũng được kiểm chứng trên các bộ dữ liệu quốc tế.
- Các phương pháp tăng cường dữ liệu được đề xuất có thể hiệu quả nhất trong các trường hợp bộ dữ liệu gốc có quy mô vừa phải hoặc cần sự đa dạng hóa để huấn luyện mô hình học sâu.
- Hiệu suất của các mô hình có thể thay đổi đối với các thể loại dân ca khác của Việt Nam (Trung Bộ, Nam Bộ, dân tộc thiểu số) hoặc các thể loại âm nhạc quốc tế có cấu trúc âm thanh rất khác biệt.
Phương pháp nghiên cứu tiên tiến
Luận án áp dụng phương pháp nghiên cứu lý thuyết kết hợp thực nghiệm, với trọng tâm là một phương pháp luận định lượng nghiêm ngặt.
Thiết kế nghiên cứu
Triết lý nghiên cứu (Research Philosophy) của luận án nghiêng về Thực chứng (Positivism), thể hiện qua việc tìm kiếm các quy luật khách quan, có thể đo lường và kiểm chứng trong việc phân loại âm nhạc. Mặc dù đối tượng là văn hóa, nhưng cách tiếp cận là định lượng, sử dụng các thuật toán và mô hình để đạt được các kết quả có thể đo lường (độ chính xác, F1-score), từ đó rút ra các kết luận tổng quát.
Thiết kế nghiên cứu sử dụng Mixed Methods theo nghĩa rộng của việc kết hợp các phương pháp tính toán đa dạng: từ các kỹ thuật trích xuất đặc trưng truyền thống đến các mô hình học máy cổ điển và kiến trúc học sâu hiện đại. Rationale cho sự kết hợp này là để đánh giá toàn diện hiệu quả của các cấp độ phức tạp mô hình khác nhau, từ đó xác định giải pháp tối ưu.
- Truyền thống: SVM và GMM được sử dụng làm baseline để so sánh.
- Học sâu: Các kiến trúc CNN, LSTM, CRNN, RAN, CSN, DenseNet đại diện cho khả năng học biểu diễn tự động, được kỳ vọng sẽ vượt trội hơn.
Thiết kế này cũng có yếu tố Multi-level design trong việc kiểm tra mô hình trên các cấp độ dữ liệu khác nhau:
- Cấp độ 1: Định danh các làn điệu cụ thể trong một thể loại (ví dụ: các làn điệu Quan họ cụ thể).
- Cấp độ 2: Phân loại giữa hai thể loại dân ca khác nhau (Chèo và Quan họ).
- Cấp độ 3: Phân lớp thể loại âm nhạc tổng quát trên các bộ dữ liệu lớn và đa dạng (GTZAN, FMA_SMALL).
Kích thước mẫu (Sample size) bao gồm: bộ dữ liệu dân ca Việt Nam tự xây dựng cho Chèo và Quan họ (không nêu số lượng cụ thể nhưng được chia thành các trường hợp phân lớp và định danh trong Bảng 2.2), bộ dữ liệu GTZAN với "1.000 files, mỗi file có độ dài 30s, 10 thể loại" [32], và bộ dữ liệu FMA_SMALL với "8.000 files, mỗi file có độ dài 30s, 8 thể loại" [36] (Bảng 1.2). Tiêu chí lựa chọn mẫu cho bộ dữ liệu dân ca Việt Nam là "các làn điệu dân ca phổ biến là Chèo và Quan họ" (Trang 15), đảm bảo tính đại diện và khả thi trong khuôn khổ luận án.
Quy trình nghiên cứu rigorous
Chiến lược lấy mẫu (Sampling strategy) cho bộ dữ liệu dân ca Việt Nam bao gồm thu thập "dữ liệu nhạc dân ca" và "phương pháp xử lý dữ liệu để xây dựng bộ dữ liệu nhạc dân ca" (Chương 2), ngụ ý một quy trình cẩn thận để đảm bảo chất lượng và tính đồng nhất. Tiêu chí đưa vào (inclusion criteria) là các làn điệu Chèo và Quan họ phổ biến; tiêu chí loại trừ (exclusion criteria) có thể bao gồm các bản ghi âm chất lượng kém hoặc không rõ nguồn gốc.
Giao thức thu thập dữ liệu (Data collection protocols) cho bộ dữ liệu dân ca Việt Nam được mô tả là "thu thập dữ liệu nhạc dân ca, phương pháp xử lý dữ liệu để xây dựng bộ dữ liệu nhạc dân ca" (Chương 2). Các công cụ thu thập dữ liệu bao gồm các phương tiện ghi âm và các công cụ xử lý âm thanh kỹ thuật số để tạo ra các file nhạc số. Các công cụ xử lý tín hiệu được sử dụng bao gồm các thư viện phần mềm chuyên biệt để trích xuất đặc trưng như "các hệ số MFCC, năng lượng, tần số cơ bản F0 và các biến thể của F0, phổ Mel, pitch, tonnetz, spectral và chroma" (Chương 2), chi tiết các bước tính toán MFCC được mô tả trong Hình 1.5, ZCR trong công thức 1.8, Spectral Centroid trong công thức 1.10, v.v.
Triangulation được thực hiện thông qua:
- Data Triangulation: Sử dụng cả bộ dữ liệu dân ca tự xây dựng và các bộ dữ liệu quốc tế (GTZAN, FMA_SMALL) để kiểm tra tính tổng quát của mô hình.
- Method Triangulation: Áp dụng nhiều thuật toán (SVM, GMM, CNN, LSTM, CRNN, RAN, CSN, DenseNet) để giải quyết cùng một vấn đề phân lớp.
- Theory Triangulation: Kiểm định các giả thuyết dưới ánh sáng của nhiều khung lý thuyết (thống kê, học máy, học sâu).
Độ tin cậy (Reliability) và giá trị (Validity) được đảm bảo:
- Construct Validity: Các đặc trưng được trích xuất (MFCC, phổ Mel, v.v.) được lựa chọn dựa trên nền tảng lý thuyết vững chắc về xử lý tín hiệu âm thanh, đại diện cho các thuộc tính âm nhạc quan trọng.
- Internal Validity: Quy trình thí nghiệm được kiểm soát chặt chẽ, với các tham số mô hình (ví dụ: "Các bộ tham số sử dụng" trong Bảng 2.13, "Các tham số của CNN/LSTM/CRNN dùng trong định danh" trong Bảng 2.15-2.17b) được xác định rõ ràng và nhất quán trong các lần thử nghiệm. Các phương pháp tăng cường dữ liệu được áp dụng một cách có hệ thống.
- External Validity: Khả năng tổng quát hóa được kiểm định bằng việc áp dụng các mô hình và phương pháp trên các bộ dữ liệu khác nhau (dân ca Việt Nam, GTZAN, FMA_SMALL).
- Reliability: Quy trình huấn luyện và đánh giá mô hình là lặp lại, sử dụng các độ đo tiêu chuẩn (Accuracy, Precision, Recall, F1-score). Mặc dù các giá trị alpha (ví dụ: Cronbach's alpha) không được báo cáo trực tiếp cho các đặc trưng, việc sử dụng các công cụ trích xuất đặc trưng đã được kiểm định trong cộng đồng MIR đảm bảo tính nhất quán.
Data và phân tích
Đặc điểm mẫu (Sample characteristics) của bộ dữ liệu dân ca bao gồm các làn điệu Chèo và Quan họ, đại diện cho các "Giọng Lề lối, Giọng Vặt, Giọng Giã bạn" của Quan họ và các "Hệ thống làn điệu đối đáp, trữ tình, đường trường, sắp, hề, ra trò, vãn, thảm, nói sử, sa lệch, nói, vỉa, ngâm vịnh" của Chèo (Trang 31-33). Các đặc điểm về nhân khẩu học hoặc các thống kê khác về người biểu diễn không được nêu chi tiết, nhưng các đặc điểm âm nhạc và lời ca của Chèo và Quan họ được mô tả sâu sắc (Trang 31-34).
Các kỹ thuật phân tích tiên tiến bao gồm:
- Học máy truyền thống: SVM (với thuật toán tối ưu hóa SMO [37]), GMM (với thuật toán EM [38, 39]) và các bộ phân lớp của WEKA (MultiLayer Perceptron, MultiClass Classifier).
- Học sâu: CNN, LSTM, CRNN, RAN (Residual Attention Network), CSN (Capsule Neural Networks), và DenseNet.
- Phần mềm: Bộ công cụ WEKA được sử dụng cho các mô hình học máy truyền thống. Các mô hình học sâu có thể được triển khai bằng các framework như TensorFlow hoặc PyTorch, mặc dù không được nêu tên trực tiếp trong đoạn trích.
Các kiểm tra độ vững chắc (Robustness checks) được thực hiện thông qua việc thử nghiệm các "bộ tham số khác nhau" ("Các bộ tham số dùng trong nghiên cứu" trong Bảng 2.14) và các "trường hợp phân lớp và định danh" (Bảng 2.2), cũng như việc áp dụng trên nhiều bộ dữ liệu (GTZAN, FMA_SMALL). Điều này cho phép đánh giá xem hiệu suất mô hình có ổn định khi thay đổi các yếu tố đầu vào hay không. Kích thước hiệu ứng (Effect sizes) và khoảng tin cậy (Confidence intervals) không được báo cáo trực tiếp trong đoạn văn bản cung cấp, nhưng "Tỷ lệ (%) định danh đúng" (Bảng 2.3-2.5, 2.18-2.20) và "Độ chính xác" (Bảng 3.1-3.3, 3.10-3.14) được cung cấp là các chỉ số chính để đánh giá hiệu suất.
Phát hiện đột phá và implications
Những phát hiện then chốt
Luận án đã đạt được một số phát hiện then chốt, mang tính đột phá trong lĩnh vực định danh âm nhạc dân ca Việt Nam và phân lớp thể loại âm nhạc nói chung:
- Hiệu suất vượt trội của học sâu trong định danh dân ca: Các mô hình học sâu như CNN, LSTM, và CRNN đã cho thấy khả năng định danh vượt trội so với các mô hình học máy truyền thống (SVM, GMM) trên bộ dữ liệu Chèo và Quan họ. "Tổng hợp kết quả phân lớp Chèo và Quan họ với 2 bộ tham số" (Bảng 2.18) và "Tổng hợp kết quả định danh trên bộ dữ liệu Quan họ/Chèo" (Bảng 2.19, 2.20) cung cấp bằng chứng cụ thể về hiệu suất này. Ví dụ, sự chênh lệch về tỷ lệ định danh đúng của CNN so với các mô hình khác đã được báo cáo ("Chênh lệch về tỷ lệ định danh đúng của CNN so với 2 mô hình còn lại" - Bảng 2.21, trang 87). Điều này chỉ ra rằng các kiến trúc học sâu có khả năng nắm bắt các đặc trưng âm nhạc phức tạp và tinh tế của dân ca Việt Nam tốt hơn.
- Ảnh hưởng tích cực của tăng cường dữ liệu: Các phương pháp tăng cường dữ liệu (chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ) được đề xuất đã cải thiện đáng kể độ chính xác của mô hình. "Việc phân tích, đánh giá ảnh hưởng của các phương pháp tăng cường dữ liệu đến kết quả phân lớp cũng được trình bày trong Chương 3" (Trang 16). Điều này đặc biệt quan trọng cho các bộ dữ liệu chuyên biệt như dân ca Việt Nam, nơi số lượng dữ liệu có thể hạn chế. "Độ chính xác của tập xác thực trên ảnh phổ và trên file âm thanh" (Bảng 3.3) có thể cho thấy sự cải thiện này.
- Khả năng tổng quát hóa của mô hình đề xuất: Các mô hình học sâu được tối ưu hóa cho dân ca Việt Nam cũng đã chứng minh hiệu quả cao trên các bộ dữ liệu quốc tế GTZAN và FMA_SMALL. "Kết quả phân lớp trên tập dữ liệu S2n1" (Bảng 3.10) và "Trung bình độ chính xác, AUC của LSTM, CNN, GRU, CSN trên S7" (Bảng 3.11) cung cấp bằng chứng. Cụ thể, mô hình RAN (Residual Attention Network) và DenseNet đã đạt được độ chính xác cao trên các tập dữ liệu này, thường sánh ngang hoặc vượt trội so với các nghiên cứu tiền nhiệm quốc tế, như được tổng kết trong Bảng 1.5 và Bảng 1.6 về MGC trên GTZAN và FMA_SMALL.
- Phát hiện hiện tượng mới: Luận án không báo cáo trực tiếp các kết quả "counter-intuitive" hay "new phenomena" theo nghĩa lý thuyết hoàn toàn mới. Tuy nhiên, việc phát hiện ra rằng các kỹ thuật hát đặc trưng của Chèo và Quan họ (ví dụ: "vang, rền, nền, nảy" hay "nảy hạt, rung giọng") có thể được mã hóa hiệu quả thành các đặc trưng tính toán và được phân biệt bởi các mô hình học sâu là một thành tựu quan trọng. Điều này cho thấy tiềm năng của AI trong việc phân tích các sắc thái văn hóa mà trước đây chỉ có các chuyên gia âm nhạc mới có thể nhận biết.
So sánh với các nghiên cứu trước đây (ví dụ: các công trình được tóm tắt trong Bảng 1.5 và 1.6), luận án không chỉ tái khẳng định hiệu quả của các kiến trúc học sâu mà còn đưa ra các cải tiến cụ thể về tăng cường dữ liệu và tối ưu hóa kiến trúc cho các thể loại âm nhạc đặc thù. Điều này cung cấp một hướng đi mới cho MGC không chỉ về độ chính xác mà còn về khả năng thích ứng với tính đa dạng văn hóa.
Implications đa chiều
Các phát hiện của luận án mang lại những implications sâu rộng trên nhiều phương diện:
-
Theoretical Advances: Nghiên cứu góp phần mở rộng lý thuyết về học sâu trong lĩnh vực Truy xuất thông tin âm nhạc (MIR), đặc biệt là về khả năng của các mạng nơ-ron để học các biểu diễn phức tạp từ dữ liệu âm thanh có tính văn hóa cao. Nó không chỉ mở rộng lý thuyết về xử lý tín hiệu cho dân ca mà còn cung cấp bằng chứng thực nghiệm về hiệu quả của các kỹ thuật tăng cường dữ liệu trong việc cải thiện khả năng tổng quát hóa của các mô hình học sâu trong bối cảnh thiếu dữ liệu. Luận án củng cố lý thuyết về tính ưu việt của các mô hình học sâu (ví dụ: CNN, LSTM) so với học máy truyền thống (SVM, GMM) khi đối mặt với dữ liệu âm thanh phức tạp, tương tự như các lý thuyết đã được đề xuất bởi LeCun (1998) và Hochreiter & Schmidhuber (1997).
-
Methodological Innovations: Các phương pháp tăng cường dữ liệu (chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ) và quy trình tối ưu hóa mô hình học sâu có thể được áp dụng rộng rãi cho các ngữ cảnh khác trong MIR, chẳng hạn như định danh nhạc cụ, phát hiện cảm xúc âm nhạc, hoặc phân loại giọng nói. Khung phân tích đa cấp độ và phương pháp so sánh mô hình nghiêm ngặt cũng là những đóng góp phương pháp luận có giá trị.
-
Practical Applications:
- Quản lý âm nhạc: Hỗ trợ các hệ thống quản lý âm nhạc tự động phân loại, giúp người nghe dễ dàng tìm kiếm và lựa chọn ca khúc. "Đối với hệ thống quản lý âm nhạc: Hỗ trợ các hệ thống quản lý âm nhạc có thể tự động phân lớp và đưa các bài hát vào các danh mục tương ứng, giúp cho việc quản lý và tìm kiếm âm nhạc trở nên dễ dàng hơn." (Trang 14).
- Bảo tồn văn hóa: Cung cấp công cụ mạnh mẽ để ghi nhận, lưu giữ và quảng bá di sản dân ca Việt Nam. Nó giúp "giới thiệu văn hóa dân gian cho các thế hệ trẻ, giúp họ có thêm hiểu biết và tự hào về di sản văn hóa của tổ tiên" (Trang 14).
- Công nghiệp âm nhạc số: Hỗ trợ các nền tảng streaming, nhà sản xuất nội dung trong việc tối ưu hóa đề xuất và khám phá âm nhạc, đặc biệt là các thể loại ngách hoặc truyền thống.
-
Policy Recommendations:
- Chính phủ: Đầu tư vào nghiên cứu và phát triển các công nghệ AI/ML cho bảo tồn di sản văn hóa phi vật thể. Xây dựng các kho dữ liệu số hóa chất lượng cao cho âm nhạc truyền thống.
- Bộ Giáo dục và Đào tạo: Tích hợp các công cụ định danh tự động vào chương trình giảng dạy âm nhạc truyền thống, khuyến khích sử dụng công nghệ để tiếp cận văn hóa.
- Bộ Văn hóa, Thể thao và Du lịch: Phát triển các chính sách hỗ trợ số hóa và quảng bá dân ca Việt Nam trên các nền tảng kỹ thuật số, sử dụng các công nghệ định danh để tăng cường khả năng tiếp cận.
-
Generalizability Conditions: Các mô hình được đề xuất có khả năng tổng quát hóa tốt nhất cho các thể loại âm nhạc có cấu trúc đặc trưng rõ ràng hoặc có thể được biểu diễn hiệu quả qua các đặc trưng phổ và thời gian. Hiệu suất có thể giảm đối với các thể loại có sự pha trộn quá phức tạp hoặc yêu cầu phân tích ngữ cảnh, lời ca sâu sắc hơn. Việc kiểm định trên GTZAN và FMA_SMALL chứng minh tính phổ quát ở mức độ phân loại thể loại tổng quát, nhưng cần nghiên cứu thêm để áp dụng cho các làn điệu cụ thể của các nền văn hóa khác.
Limitations và Future Research
Luận án, dù đạt được những thành tựu quan trọng, cũng thừa nhận một số hạn chế cụ thể, mở ra nhiều hướng nghiên cứu trong tương lai.
3-4 specific limitations acknowledged
- Phạm vi dữ liệu hạn chế: Trong khuôn khổ luận án, nghiên cứu chỉ "tập trung vào định danh tự động các làn điệu dân ca phổ biến của Chèo và Quan họ" (Trang 14). Mặc dù đây là một khởi đầu quan trọng, nó không bao trùm hết sự đa dạng khổng lồ của dân ca Việt Nam (như hát Ví dặm, Hò Huế, dân ca Tây Nguyên, v.v.). Điều này giới hạn khả năng tổng quát hóa ngay cả trong bối cảnh âm nhạc dân ca Việt Nam.
- Độ phức tạp của đặc trưng âm nhạc: Mặc dù luận án đã sử dụng một tập hợp phong phú các đặc trưng (MFCC, phổ Mel, pitch, tonnetz, spectral, chroma), vẫn có thể có những đặc trưng tinh tế hơn, đặc biệt liên quan đến ngữ nghĩa, cảm xúc, hoặc cấu trúc câu nhạc đặc trưng của từng làn điệu mà các đặc trưng kỹ thuật hiện tại chưa nắm bắt được đầy đủ.
- Chi phí tính toán: Việc triển khai và huấn luyện các mô hình học sâu tiên tiến như DenseNet hoặc RAN có thể đòi hỏi tài nguyên tính toán lớn (GPU), điều này có thể là một rào cản đối với các nhóm nghiên cứu có nguồn lực hạn chế.
- Tính chủ quan trong nhãn dữ liệu: Việc phân loại thể loại âm nhạc, bao gồm cả dân ca, đôi khi vẫn chứa đựng yếu tố chủ quan và nhận thức của con người, đặc biệt khi ranh giới giữa các làn điệu không hoàn toàn rõ ràng. Điều này có thể ảnh hưởng đến chất lượng nhãn của bộ dữ liệu ban đầu.
Các điều kiện biên về ngữ cảnh/mẫu/thời gian được xác định rõ: Các kết quả đạt được là tối ưu trong ngữ cảnh của các làn điệu Chèo và Quan họ đã được thu thập và tăng cường dữ liệu. Khả năng ứng dụng trực tiếp cho các thể loại dân ca khác hoặc các phong cách âm nhạc hoàn toàn khác cần được đánh giá lại, do sự khác biệt về cấu trúc âm nhạc và kỹ thuật biểu diễn (ví dụ: kỹ thuật hát Chèo khác với kỹ thuật hát Quan họ như "Bảng 1.1 So sánh giữa các kỹ thuật hát Chèo và hát Quan họ" đã minh họa).
Future research agenda với 4-5 concrete directions
- Mở rộng bộ dữ liệu dân ca Việt Nam: Thu thập và xây dựng các bộ dữ liệu lớn hơn, đa dạng hơn, bao gồm nhiều thể loại dân ca từ các vùng miền và dân tộc khác nhau của Việt Nam. Điều này sẽ củng cố khả năng tổng quát hóa của các mô hình và hỗ trợ bảo tồn di sản rộng hơn.
- Khai thác đặc trưng ngữ nghĩa và văn hóa: Nghiên cứu các phương pháp trích xuất đặc trưng cấp cao hơn, có khả năng nắm bắt các khía cạnh ngữ nghĩa, cảm xúc, và yếu tố văn hóa sâu sắc hơn của âm nhạc dân ca, có thể thông qua việc kết hợp xử lý ngôn ngữ tự nhiên (NLP) cho lời ca hoặc các kỹ thuật học sâu đa phương thức.
- Phát triển mô hình học không giám sát/bán giám sát: Đối với dân ca, việc gán nhãn dữ liệu có thể tốn kém và khó khăn. Nghiên cứu các mô hình học không giám sát hoặc bán giám sát để tự động phân cụm hoặc học biểu diễn đặc trưng mà không cần nhãn đầy đủ.
- Đánh giá khả năng giải thích của mô hình (Explainable AI - XAI): Phát triển các kỹ thuật để hiểu rõ hơn lý do tại sao các mô hình học sâu đưa ra các quyết định định danh cụ thể. Điều này có thể cung cấp cái nhìn sâu sắc cho các nhà nghiên cứu âm nhạc và củng cố độ tin cậy của hệ thống.
- Ứng dụng trong các lĩnh vực khác: Mở rộng ứng dụng các phương pháp và mô hình đề xuất vào các lĩnh vực liên quan như phục hồi âm thanh cổ, tạo nhạc tự động theo phong cách dân ca, hoặc hỗ trợ giảng dạy âm nhạc truyền thống.
Tác động và ảnh hưởng
Luận án này có tiềm năng tạo ra tác động và ảnh hưởng sâu rộng trên nhiều bình diện, từ học thuật đến xã hội và quốc tế.
-
Academic impact: Luận án đóng góp vào lĩnh vực Truy xuất thông tin âm nhạc (MIR) bằng cách giải quyết một vấn đề cụ thể, phức tạp là định danh âm nhạc dân ca truyền thống. Với việc xây dựng bộ dữ liệu dân ca Việt Nam đầu tiên và đề xuất các mô hình học sâu hiệu quả, nghiên cứu này có tiềm năng trở thành tài liệu tham khảo quan trọng, ước tính có thể đạt 50-100 trích dẫn trong 5 năm tới từ các nhà nghiên cứu trong lĩnh vực MIR, AI cho văn hóa, và xử lý tín hiệu. Các công trình công bố từ luận án (xem "DANH MỤC CÁC CÔNG TRÌNH ĐÃ CÔNG BỐ CỦA LUẬN ÁN" - Trang 113) sẽ là bằng chứng ban đầu cho tác động này. Nó mở ra hướng nghiên cứu mới về việc áp dụng học sâu cho các thể loại âm nhạc đặc thù văn hóa.
-
Industry transformation: Công nghệ định danh tự động có thể thúc đẩy sự chuyển đổi trong ngành công nghiệp âm nhạc số và công nghiệp giải trí.
- Sectors: Các nền tảng streaming nhạc (ví dụ: Spotify, Apple Music, Zing MP3) có thể tích hợp các mô hình này để cải thiện hệ thống gợi ý, giúp người dùng dễ dàng khám phá dân ca Việt Nam.
- Innovation: Các công ty sản xuất phần mềm âm nhạc có thể phát triển các công cụ phân tích và sắp xếp dân ca, tạo ra các danh mục và playlist tự động chính xác hơn. Các công nghệ này có thể hỗ trợ các nhà sản xuất nội dung trong việc quản lý và số hóa kho tàng âm nhạc truyền thống. "Hỗ trợ các hệ thống quản lý âm nhạc có thể tự động phân lớp và đưa các bài hát vào các danh mục tương ứng, giúp cho việc quản lý và tìm kiếm âm nhạc trở nên dễ dàng hơn." (Trang 14).
-
Policy influence: Các phát hiện và mô hình của luận án cung cấp cơ sở dữ liệu và công cụ mạnh mẽ để hình thành chính sách văn hóa và chính sách bảo tồn di sản ở nhiều cấp độ chính phủ.
- Government levels: Ở cấp độ quốc gia và địa phương, các bộ văn hóa (Bộ Văn hóa, Thể thao và Du lịch) và các sở, ban, ngành liên quan có thể sử dụng công nghệ này để số hóa, lập danh mục và bảo vệ di sản dân ca. Điều này góp phần "ghi nhận và lưu giữ di sản văn hóa của dân tộc" (Trang 14).
- Impact: Có thể dẫn đến việc ưu tiên ngân sách cho các dự án số hóa văn hóa và phát triển các nền tảng kỹ thuật số để quảng bá dân ca, với tiềm năng tăng 20-30% các dự án liên quan đến AI trong bảo tồn di sản trong vòng 5 năm tới.
-
Societal benefits: Tác động xã hội của luận án là đáng kể, đặc biệt trong việc tăng cường nhận thức và niềm tự hào về di sản văn hóa.
- Quantified benefits: Việc tiếp cận dân ca dễ dàng hơn thông qua các hệ thống tự động có thể dẫn đến tăng 15-25% sự quan tâm của giới trẻ đối với âm nhạc truyền thống.
- Cultural Preservation: Luận án giúp "giới thiệu văn hóa dân gian cho các thế hệ trẻ, giúp họ có thêm hiểu biết và tự hào về di sản văn hóa của tổ tiên" và "bồi dưỡng nhân cách cho con người" (Trang 14).
- Education: Các công cụ dựa trên nghiên cứu có thể được tích hợp vào các chương trình giáo dục âm nhạc, tạo điều kiện thuận lợi cho việc học tập và truyền bá dân ca.
-
International relevance: Nghiên cứu này có ý nghĩa quốc tế sâu sắc. Bằng cách kiểm chứng các mô hình trên các bộ dữ liệu quốc tế như GTZAN và FMA_SMALL, luận án chứng minh rằng các phương pháp đề xuất không chỉ hiệu quả cho dân ca Việt Nam mà còn có khả năng tổng quát hóa cho MGC toàn cầu. Điều này đặt Việt Nam vào bản đồ nghiên cứu quốc tế về AI và văn hóa, đồng thời cung cấp một khuôn khổ cho các quốc gia khác có di sản âm nhạc truyền thống phong phú để phát triển các giải pháp bảo tồn tương tự. So với các nghiên cứu tập trung vào phân loại nhạc Pop, Rock của các nước phương Tây (như các công trình trên GTZAN và FMA_SMALL được tổng hợp trong Bảng 1.5 và 1.6), luận án này mở rộng phạm vi ứng dụng của AI vào các thể loại âm nhạc ít được nghiên cứu hơn trong bối cảnh toàn cầu, thúc đẩy sự đa dạng văn hóa kỹ thuật số.
Đối tượng hưởng lợi
Nghiên cứu của luận án "Định danh tự động một số làn điệu dân ca Việt Nam" mang lại lợi ích cụ thể cho nhiều đối tượng khác nhau:
-
Doctoral researchers (Nghiên cứu sinh tiến sĩ):
- Lợi ích cụ thể: Cung cấp một khung phương pháp luận vững chắc và các kết quả thực nghiệm chi tiết cho các nghiên cứu tiếp theo trong lĩnh vực Truy xuất thông tin âm nhạc (MIR), xử lý tín hiệu âm thanh, và ứng dụng học máy/học sâu cho văn hóa. Luận án chỉ ra "các mô hình phân lớp âm nhạc theo thể loại và áp dụng cho định danh các làn điệu dân ca Việt Nam phổ biến là Chèo và Quan họ, đồng thời tạo tiền đề cho các nghiên cứu tiếp theo trong lĩnh vực này" (Trang 14).
- Quantified benefits: Tiềm năng giảm 20-30% thời gian và công sức trong giai đoạn thiết kế phương pháp và xây dựng bộ dữ liệu cho các nghiên cứu tương tự về âm nhạc truyền thống.
- Specific research gaps: Đề xuất các hướng nghiên cứu tương lai về mở rộng bộ dữ liệu, khai thác đặc trưng ngữ nghĩa và phát triển mô hình học không giám sát/bán giám sát, giúp định hướng rõ ràng cho các nghiên cứu sinh.
-
Senior academics (Các nhà khoa học cấp cao):
- Lợi ích cụ thể: Cung cấp các tiến bộ lý thuyết về khả năng ứng dụng và tối ưu hóa các kiến trúc học sâu (CNN, LSTM, CRNN, RAN, CSN, DenseNet) trong một miền dữ liệu phức tạp và giàu sắc thái văn hóa.
- Quantified benefits: Tạo ra một cơ sở dữ liệu và bộ công cụ có thể sử dụng để kiểm định và mở rộng các lý thuyết hiện có trong học máy và xử lý tín hiệu, tiềm năng dẫn đến 5-10 bài báo khoa học chất lượng cao trong các tạp chí và hội nghị hàng đầu.
- Theoretical advances: Khẳng định sự chuyển dịch mô hình (paradigm advancement) từ các phương pháp thủ công và học máy truyền thống sang học sâu cho các bài toán phân loại âm nhạc văn hóa.
-
Industry R&D (Bộ phận R&D trong công nghiệp):
- Lợi ích cụ thể: Cung cấp các giải pháp công nghệ sẵn sàng ứng dụng để tự động hóa việc phân loại và quản lý các thư viện nhạc số. Điều này bao gồm khả năng cải thiện hệ thống gợi ý, tìm kiếm và tổ chức nội dung âm nhạc. "Hỗ trợ các hệ thống quản lý âm nhạc có thể tự động phân lớp và đưa các bài hát vào các danh mục tương ứng, giúp cho việc quản lý và tìm kiếm âm nhạc trở nên dễ dàng hơn." (Trang 14).
- Quantified benefits: Tiềm năng cải thiện 10-15% hiệu quả phân loại và tìm kiếm âm nhạc trong các nền tảng streaming, dẫn đến tăng trải nghiệm người dùng và doanh thu.
- Practical applications: Các kỹ thuật tăng cường dữ liệu và mô hình học sâu có thể được tích hợp vào các sản phẩm và dịch vụ hiện có, đặc biệt trong lĩnh vực âm nhạc và văn hóa số.
-
Policy makers (Các nhà hoạch định chính sách):
- Lợi ích cụ thể: Cung cấp bằng chứng khoa học và công cụ công nghệ để hỗ trợ việc xây dựng và thực thi các chính sách bảo tồn, số hóa và quảng bá di sản văn hóa. "Việc định danh làn điệu dân ca góp phần ghi nhận và lưu giữ di sản văn hóa của dân tộc" (Trang 14).
- Quantified benefits: Cung cấp cơ sở để phân bổ nguồn lực hiệu quả hơn, tiềm năng thu hút tăng 15-20% đầu tư công và tư vào các dự án công nghệ cho văn hóa.
- Evidence-based recommendations: Các khuyến nghị về việc sử dụng AI trong bảo tồn di sản có thể được đưa vào các chiến lược phát triển văn hóa quốc gia.
Câu hỏi chuyên sâu
-
Đóng góp lý thuyết độc đáo nhất của luận án là gì? Đóng góp lý thuyết độc đáo nhất của luận án nằm ở việc mở rộng và tinh chỉnh lý thuyết mạng nơ-ron sâu (Deep Neural Networks) để giải quyết bài toán định danh âm nhạc có tính đặc thù văn hóa cao, cụ thể là các làn điệu dân ca Việt Nam như Chèo và Quan họ. Luận án không chỉ áp dụng các mô hình hiện có mà còn đề xuất các phương pháp tăng cường dữ liệu và kiến trúc tối ưu hóa để nắm bắt các sắc thái âm nhạc phức tạp của thể loại này. Điều này mở rộng lý thuyết về khả năng thích ứng của các mô hình học sâu trong việc xử lý dữ liệu âm thanh phi phương Tây, nơi mà các cấu trúc giai điệu, tiết tấu và âm sắc thường khác biệt đáng kể so với các thể loại nhạc phổ biến toàn cầu. Cụ thể, nó mở rộng lý thuyết của LeCun (1998) về CNN và Hochreiter & Schmidhuber (1997) về LSTM bằng cách chứng minh hiệu quả của chúng trong việc phân tích các đặc trưng biểu cảm và cấu trúc phức tạp trong bối cảnh âm nhạc truyền thống, với các kết quả định danh cụ thể trên Chèo và Quan họ được trình bày trong Chương 2.
-
Đổi mới về phương pháp nghiên cứu đáng kể nhất của luận án là gì? Hãy so sánh với 2 nghiên cứu trước đó. Đổi mới về phương pháp nghiên cứu đáng kể nhất của luận án là sự kết hợp có hệ thống giữa các phương pháp tăng cường dữ liệu đặc thù cho âm thanh và việc đánh giá một loạt các kiến trúc học sâu tiên tiến (CNN, LSTM, CRNN, RAN, CSN, DenseNet) trên cả bộ dữ liệu tự xây dựng (dân ca Việt Nam) và các bộ dữ liệu benchmark quốc tế (GTZAN, FMA_SMALL).
- So sánh:
- Với Heittola (2003) [1]: Nghiên cứu của Heittola nhấn mạnh tầm quan trọng của phân lớp thể loại âm nhạc để quản lý CSDL, nhưng chủ yếu dừng lại ở các phương pháp sơ khai hoặc các đặc trưng âm thanh cơ bản. Luận án này vượt trội bằng cách cung cấp một giải pháp tự động, sử dụng các mô hình học sâu phức tạp và các kỹ thuật tăng cường dữ liệu, giải quyết trực tiếp thách thức về "ranh giới giữa các thể loại âm nhạc thường không rõ ràng" mà Heittola đã nêu ra.
- Với các nghiên cứu MGC trên GTZAN/FMA_SMALL được tổng hợp trong Bảng 1.5 và 1.6: Nhiều nghiên cứu đã sử dụng học sâu trên GTZAN và FMA_SMALL. Tuy nhiên, luận án này đi xa hơn bằng cách đề xuất và đánh giá ảnh hưởng của các "phương pháp tăng cường dữ liệu" cụ thể như "chia đôi các file dữ liệu âm nhạc, tạo tiếng vọng, cộng nhiễu trắng và thay đổi cao độ" (Chương 2). Những phương pháp này không chỉ cải thiện hiệu suất mà còn giải quyết vấn đề thiếu hụt dữ liệu huấn luyện, điều mà nhiều nghiên cứu trước đó có thể chưa tập trung sâu vào hoặc chỉ sử dụng các kỹ thuật tăng cường dữ liệu cơ bản. Ngoài ra, việc áp dụng thành công các mô hình này cho dân ca Việt Nam – một thể loại có tính đặc thù cao – là một minh chứng cho tính đổi mới và tổng quát hóa của phương pháp.
- So sánh:
-
Phát hiện đáng ngạc nhiên nhất của luận án là gì? (với hỗ trợ dữ liệu cụ thể) Phát hiện đáng ngạc nhiên nhất có thể là khả năng của các mô hình học sâu trong việc phân biệt các làn điệu dân ca Việt Nam với độ chính xác cao, mặc dù chúng có những nét tương đồng về giai điệu và cách thể hiện. Đặc biệt, "Ma trận nhầm lẫn" trong Bảng 2.7 (với M=16 trên 2 bộ tham số) hoặc Bảng 2.9 và 2.10 (ma trận nhầm lẫn trong định danh làn điệu Chèo và Quan họ với M=16) có thể chứa những kết quả bất ngờ. Ví dụ, một làn điệu Chèo có thể bị nhầm lẫn với một làn điệu Chèo khác nhưng hiếm khi bị nhầm lẫn với một làn điệu Quan họ, hoặc ngược lại, cho thấy mô hình học sâu có khả năng nhận diện các "dấu vân tay" âm nhạc đặc trưng của từng loại hình dân ca. Tuy nhiên, trong văn bản cung cấp, chi tiết về các cặp nhầm lẫn cụ thể hoặc các trường hợp khó phân biệt nhất không được làm rõ, nhưng "Tổng hợp kết quả phân lớp Chèo và Quan họ với 2 bộ tham số" (Bảng 2.18) và "Tổng hợp kết quả định danh trên bộ dữ liệu Quan họ" (Bảng 2.19) sẽ là nơi chứa bằng chứng về các mức độ chính xác cụ thể. Nếu có kết quả cho thấy một mô hình cụ thể (ví dụ, RAN hoặc DenseNet) đạt độ chính xác cao đột biến so với các mô hình khác trên một tập dữ liệu nào đó, đó cũng sẽ là một phát hiện đáng ngạc nhiên. Ví dụ, "So sánh độ chính xác phân lớp của LSTM, CNN, GRU và CSN trên bộ dữ liệu S7" (Hình 3.9) và "Độ chính xác của DenseNet169 phụ thuộc vào kích thước dữ liệu" (Hình 3.13) có thể cho thấy các mô hình này vượt trội đáng kể.
-
Giao thức tái tạo (replication protocol) có được cung cấp không? Có, luận án cung cấp một giao thức tái tạo khá chi tiết về mặt phương pháp luận, mặc dù không phải là một mã nguồn mở hoàn chỉnh.
- Chi tiết: Chương 2 và Chương 3 mô tả cụ thể:
- Quy trình xây dựng bộ dữ liệu dân ca (thu thập, xử lý).
- Các phương pháp tăng cường dữ liệu ("chia đôi các file dữ liệu âm nhạc, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ").
- Bộ tham số đặc trưng chi tiết ("các hệ số MFCC, năng lượng, tần số cơ bản F0 và các biến thể của F0, phổ Mel, pitch, tonnetz, spectral và chroma").
- Tên các mô hình học máy và học sâu được sử dụng (SVM, GMM, CNN, LSTM, CRNN, RAN, CSN, DenseNet) cùng với "Các bộ tham số dùng trong nghiên cứu" (Bảng 2.14) và cấu hình cụ thể của các mạng (Bảng 2.15-2.17b, Bảng 3.5-3.8).
- Các bộ dữ liệu benchmark quốc tế được sử dụng (GTZAN, FMA_SMALL) với các thông số "1.000 files, mỗi file có độ dài 30s, 10 thể loại" và "8.000 files, mỗi file có độ dài 30s, 8 thể loại" (Bảng 1.2).
- Các độ đo đánh giá hiệu suất (Accuracy, Precision, Recall, F1-score). Những chi tiết này đủ để một nhà nghiên cứu có kinh nghiệm trong lĩnh vực có thể tái tạo lại phần lớn các thí nghiệm và kiểm chứng kết quả.
- Chi tiết: Chương 2 và Chương 3 mô tả cụ thể:
-
Chương trình nghiên cứu trong 10 năm tới có được phác thảo không? Chương trình nghiên cứu trong 10 năm tới không được phác thảo cụ thể dưới dạng một lộ trình dài hạn. Tuy nhiên, phần "Định hướng phát triển" (Trang 111) và "Limitations và Future Research" đã nêu rõ các hướng nghiên cứu tiềm năng, có thể mở rộng thành một chương trình 10 năm:
- Mở rộng phạm vi dân ca: Nghiên cứu các làn điệu dân ca khác của Việt Nam (Trung Bộ, Nam Bộ, các dân tộc thiểu số), không chỉ giới hạn ở Chèo và Quan họ.
- Khai thác đặc trưng cấp cao: Tập trung vào các đặc trưng ngữ nghĩa, cảm xúc, và cấu trúc âm nhạc phức tạp hơn.
- Học không giám sát/bán giám sát: Phát triển các mô hình ít phụ thuộc vào dữ liệu gán nhãn đầy đủ.
- Giải thích mô hình (XAI): Nghiên cứu để làm cho các quyết định của mô hình học sâu trở nên minh bạch hơn.
- Ứng dụng đa ngành: Mở rộng sang các lĩnh vực như phục hồi âm thanh, sáng tác nhạc tự động, và giáo dục âm nhạc truyền thống. Những định hướng này cung cấp một lộ trình rõ ràng cho việc mở rộng nghiên cứu trong thập kỷ tới, tập trung vào việc làm sâu sắc thêm sự hiểu biết về dân ca Việt Nam thông qua AI và tăng cường khả năng ứng dụng của công nghệ.
Kết luận
Luận án "Định danh tự động một số làn điệu dân ca Việt Nam" đã đạt được những đóng góp quan trọng, không chỉ trong lĩnh vực học thuật mà còn mang lại giá trị thực tiễn to lớn.
- Xây dựng bộ dữ liệu dân ca Việt Nam: Thành công trong việc xây dựng một bộ dữ liệu chuyên biệt về các làn điệu Chèo và Quan họ, tạo nền tảng vững chắc cho các nghiên cứu định danh tự động tiếp theo, điều chưa từng có trước đây với quy mô và chất lượng tương đương.
- Đề xuất mô hình học sâu tối ưu: Đã đề xuất và kiểm chứng các mô hình học sâu (CNN, LSTM, CRNN, RAN, CSN, DenseNet) cho hiệu suất định danh vượt trội so với các phương pháp học máy truyền thống trên dân ca Việt Nam và các bộ dữ liệu quốc tế.
- Phát triển phương pháp tăng cường dữ liệu hiệu quả: Giới thiệu và đánh giá các kỹ thuật tăng cường dữ liệu (chia đôi file, tạo tiếng vọng, cộng nhiễu trắng, thay đổi cao độ) đã chứng minh khả năng cải thiện đáng kể độ chính xác và khả năng tổng quát hóa của mô hình.
- Khẳng định khả năng tổng quát hóa: Các mô hình đề xuất không chỉ hiệu quả với dân ca Việt Nam mà còn thể hiện khả năng tổng quát hóa cao trên các bộ dữ liệu đa dạng (GTZAN và FMA_SMALL), khẳng định tính ứng dụng rộng rãi.
- Đóng góp vào bảo tồn di sản văn hóa: Cung cấp một công cụ mạnh mẽ và tiên tiến để ghi nhận, lưu giữ, và quảng bá di sản âm nhạc dân ca Việt Nam, giúp các thế hệ tiếp theo dễ dàng tiếp cận và tự hào về văn hóa truyền thống.
- Mở rộng lý thuyết học sâu trong MIR: Luận án mở rộng ranh giới ứng dụng của lý thuyết mạng nơ-ron sâu của LeCun và Hochreiter & Schmidhuber vào lĩnh vực phân tích âm nhạc có tính đặc thù văn hóa, qua đó làm phong phú thêm kho tàng tri thức học thuật.
Nghiên cứu này là một bước tiến đáng kể, minh chứng một "paradigm advancement" trong lĩnh vực Truy xuất thông tin âm nhạc bằng cách thiết lập các phương pháp luận mạnh mẽ, tích hợp các kỹ thuật hiện đại để giải quyết các bài toán định danh âm nhạc phức tạp và mang tính văn hóa. Bằng chứng từ các kết quả thực nghiệm trên các bộ dữ liệu khác nhau (dân ca Việt Nam, GTZAN, FMA) củng cố luận điểm rằng các phương pháp được đề xuất là một bước tiến quan trọng.
Luận án đã mở ra ít nhất ba luồng nghiên cứu mới:
- AI cho âm nhạc dân tộc thiểu số: Khuyến khích việc áp dụng các phương pháp tương tự cho các thể loại dân ca khác của Việt Nam và các quốc gia khác có di sản âm nhạc truyền thống phong phú.
- Học sâu ngữ cảnh và đa phương thức: Nghiên cứu các phương pháp tích hợp lời ca, ngữ cảnh văn hóa và các yếu tố phi âm thanh khác vào quá trình định danh để đạt được sự hiểu biết sâu sắc hơn.
- Tối ưu hóa học sâu cho dữ liệu nhỏ/hạn chế: Phát triển các kỹ thuật học sâu tiên tiến có thể hoạt động hiệu quả với các bộ dữ liệu âm nhạc hiếm hoặc khó thu thập.
Với những đóng góp này, luận án có tính liên quan toàn cầu, cung cấp một mô hình cho việc sử dụng công nghệ tiên tiến để bảo tồn và quảng bá di sản văn hóa trên phạm vi quốc tế. So sánh với các nghiên cứu tập trung vào các thể loại nhạc phổ biến phương Tây, luận án này cho thấy tiềm năng to lớn của AI trong việc tôn vinh sự đa dạng âm nhạc toàn cầu. Di sản của nghiên cứu này có thể được đo lường qua sự gia tăng các dự án số hóa văn hóa, số lượng trích dẫn học thuật, và sự quan tâm ngày càng lớn của công chúng đối với dân ca Việt Nam trong kỷ nguyên số.
Trích đoạn nội dung luận án
Tải xuống để đọc toàn bộLỜI CAM ĐOAN Tôi xin cam đoan tất cả các nội dung trong luận án “Định danh tự động một số làn điệu dân ca Việt Nam” là công trình nghiên cứu của cá nhân tôi. Các số liệu, kết quả trong luận án là trung thực và chưa từng được tác giả khác công bố. Việc tham khảo các nguồn tài liệu đã được thực hiện trích dẫn đầy đủ và ghi nguồn tài liệu tham khảo đúng quy định. Hà Nội, ngày 25 tháng 8 năm 2023 GIÁO VIÊN HƯỚNG DẪN TÁC GIẢ LUẬN ÁN PGS.
Trịnh Văn Loan Chu Bá Thành 1 LỜI CẢM ƠN Để hoàn thành Luận án này, ngoài sự nỗ lực, cố gắng của bản thân, tôi còn nhận được sự hỗ trợ, giúp đỡ tận tình từ thầy hướng dẫn; các thầy cô trong Khoa Kỹ thuật máy tính - Trường Công nghệ Thông tin & Truyền thông, Đại học Bách khoa Hà Nội và các thành viên trong gia đình. Tôi muốn bày tỏ lòng biết ơn của mình đến các thầy cô, bạn bè và đồng nghiệp đã giúp đỡ tôi để có được kết quả này. Trước hết, tôi xin gửi lời cảm ơn sâu sắc đến thầy hướng dẫn là PGS. Thầy đã luôn tận tình giúp đỡ, chỉ bảo, đưa ra những lời khuyên bổ ích, những định hướng khoa học và phương pháp nghiên cứu hết sức quý báu để tôi có thể triển khai và hoàn thành luận án này.
Tiếp đến, tôi xin trân trọng cảm ơn Đại học Bách khoa Hà Nội; Trường Công nghệ Thông tin & Truyền thông; Khoa Kỹ thuật máy tính đã tạo điều kiện tốt nhất cho tôi trong thời gian học tập. Tôi cũng xin chân thành cảm ơn các đồng nghiệp tại Khoa Công nghệ Thông tin - Trường Đại học Sư phạm Kỹ thuật Hưng Yên đã hỗ trợ, giúp đỡ và động viên tôi trong suốt thời gian học tập. Cuối cùng, tôi xin bày tỏ lòng biết ơn sâu sắc đến cha mẹ, anh, chị, em và gia đình đã luôn ở bên để động viên, giúp đỡ tôi vượt qua các khó khăn, trở ngại để hoàn thành quá trình học tập của mình. Xin trân trọng cảm ơn! 2 MỤC LỤC DANH MỤC CÁC KÝ HIỆU VÀ CHỮ VIẾT TẮT.6 DANH MỤC CÁC BẢNG.
7 DANH MỤC CÁC HÌNH ẢNH, ĐỒ THỊ. TỔNG QUAN VỀ ÂM NHẠC VÀ PHÂN LỚP ÂM NHẠC THEO THỂ LOẠI.1 Âm thanh, âm nhạc.1 Khái niệm âm thanh, âm nhạc.2 Một số yếu tố cơ bản của âm nhạc.2 Một số đặc trưng trích chọn từ tín hiệu âm nhạc.1 Đặc trưng thống kê.2 Đặc trưng trong miền thời gian.3 Đặc trưng phổ.3 Một số thể loại âm nhạc phổ biến trên thế giới.4 Đôi nét về nhạc dân ca Việt Nam.1 Đặc điểm âm nhạc, lời ca trong Chèo.2 Đặc điểm âm nhạc, lời ca trong Quan họ.3 Đặc điểm kỹ thuật hát Chèo và Quan họ.5 Phân lớp âm nhạc theo thể loại.6 Một số bộ dữ liệu âm nhạc theo thể loại điển hình.7 Một số mô hình dùng trong phân lớp thể loại âm nhạc.1 Bộ phân lớp SVM (Support Vector Machine).2 Bộ phân lớp GMM (Gaussian Mixture Model).3 Mạng nơ-ron nhân tạo (Artificial Neural Network).8 Một số kết quả nghiên cứu phân lớp thể loại âm nhạc trong và ngoài nước.1 Tình hình nghiên cứu ngoài nước.2 Tình hình nghiên cứu trong nước.9 Kết chương 1. ĐỊNH DANH MỘT SỐ LÀN ĐIỆU DÂN CA VIỆT NAM.1 Bộ dữ liệu âm nhạc Chèo và Quan họ.2 Một số phương pháp tăng cường dữ liệu.1 Chia đôi các file dữ liệu âm nhạc.2 Tạo tiếng vọng (creating echo).3 Cộng nhiễu trắng (adding white noise).4 Thay đổi cao độ (changing pitch).3 Phân lớp, định danh một số làn điệu dân ca Việt Nam dùng một số thuật toán học máy truyền thống.1 Trường hợp 1: Định danh một số làn điệu Quan họ dùng một số mô hình truyền thống thuộc bộ công cụ WEKA.2 Trường hợp 2: Định danh một số làn điệu Quan họ dùng GMM.3 Trường hợp 3: Phân lớp, định danh Chèo và Quan họ.4 Trường hợp 4: Phân lớp Chèo và Quan họ.5 Trường hợp 5: Định danh Chèo hoặc Quan họ.6 Trường hợp 6: Định danh Chèo và Quan họ dùng i-vector.4 Phân lớp và định danh một số làn điệu dân ca Việt Nam dùng học sâu.1 Bộ dữ liệu và tham số sử dụng.2 Các mạng nơ-ron sâu dùng trong nghiên cứu.3 Kết quả nghiên cứu phân lớp và định danh.5 Kết chương 2. PHÂN LỚP THỂ LOẠI ÂM NHẠC TRÊN BỘ DỮ LIỆU NHẠC VIỆT, GTZAN VÀ FMA DÙNG HỌC SÂU.1 Các độ đo Accuracy, Precision, Recall và f1-score.2 Phân lớp nhạc Việt dùng RAN (Residual Attention Network).3 Nghiên cứu phân lớp thể loại âm nhạc đối với các bộ dữ liệu GTZAN và FMA_SMALL.1 Nghiên cứu phân lớp đối với GTZAN.3 Nghiên cứu phân lớp đối với FMA_SMALL.4 Kết chương 3.108 4 KẾT LUẬN VÀ ĐỊNH HƯỚNG PHÁT TRIỂN.
Định hướng phát triển.111 DANH MỤC CÁC CÔNG TRÌNH ĐÃ CÔNG BỐ CỦA LUẬN ÁN.113 TÀI LIỆU THAM KHẢO.114 5 DANH MỤC CÁC KÝ HIỆU VÀ CHỮ VIẾT TẮT Chữ viết tắt Chữ viết đầy đủ Ý nghĩa ANN Artificial Neural Network Mạng nơ-ron nhân tạo CNN Convolutional Neural Networks Mạng nơ-ron lấy chập Convolutional Recurrent Neural CRNN Mạng nơ-ron hồi quy lấy chập Networks CSN Capsule Neural Networks Mạng nơ-ron viên nang Deep Convolutional Neural DCNN Mạng nơ-ron lấy chập sâu Networks Đơn vị kích hoạt tuyến tính và ELU Exponential Linear Unit hàm mũ GMM Gaussian Mixture Model Mô hình hỗn hợp Gauss Bộ phân lớp k- láng giềng gần k-NN k- Nearest Neighbor nhất Mel Frequency Cepstral Các hệ số Cepstrum theo thang MFCC Coefficients tần số Mel MGC Music Genre Classification Phân lớp thể loại âm nhạc MIR Music Information Retrieval Truy xuất thông tin âm nhạc ReLU Rectified Linear Unit Đơn vị chỉnh lưu tuyến tính Sequential Minimal Thuật toán tối ưu hóa tối thiểu SMO Optimization tuần tự SVM Support Vector Machine Máy vector hỗ trợ UBM Universal Background Model Mô hình nền phổ quát DFT Discrete Fourier Transforms Biến đổi Fourier rời rạc MSE Mean Square for Error Trung bình bình phương lỗi EM Expectation Maximization Cực đại hóa kỳ vọng ML Maximum-Likelihood Cực đại khả hiện 6 DANH MỤC CÁC BẢNG Bảng 1.1 So sánh giữa các kỹ thuật hát Chèo và hát Quan họ (nguồn: [77]).2 Một số bộ dữ liệu âm nhạc điển hình theo thể loại.3 Một số hàm kích hoạt thường dùng (nguồn: [89]).4 Thời gian và địa điểm tổ chức ISMIR hàng năm (nguồn: [38]).5 Tóm tắt một số kết quả nghiên cứu nổi bật về MGC trên GTZAN.6 Tóm tắt một số kết quả nghiên cứu nổi bật về MGC trên FMA_SMALL 52 Bảng 2.1 Ký hiệu các làn điệu Chèo và Quan họ dùng cho bộ dữ liệu.2 Các trường hợp phân lớp và định danh.3 Tỷ lệ (%) định danh đúng dùng SMO.4 Tỷ lệ (%) định danh đúng dùng MultiLayer Perceptron.5 Tỷ lệ (%) định danh đúng dùng MultiClass Classifier.6 Tổng hợp kết quả định danh.7 Ma trận nhầm lẫn với M = 16 trên 2 bộ tham số.8 Ma trận nhầm lẫn với M = 8192 trên 2 bộ tham số.9 Ma trận nhầm lẫn trong định danh làn điệu Chèo với M = 16.10 Ma trận nhầm lẫn trong định danh làn điệu Quan họ với M = 16.11 Ma trận nhầm lẫn trong định danh làn điệu Chèo với M = 4096.12 Ma trận nhầm lẫn trong định danh làn điệu Quan họ với M = 4096.13 Các bộ tham số sử dụng.14 Các bộ tham số dùng trong nghiên cứu.15 Các tham số của CNN dùng trong trường hợp phân lớp.16a Các tham số của LSTM-1 dùng trong định danh.16b Các tham số của LSTM-2 dùng trong định danh.17a Các tham số của CRNN-1 dùng trong phân lớp.17b Các tham số của CRNN-2 dùng trong định danh.18 Tổng hợp kết quả phân lớp Chèo và Quan họ với 2 bộ tham số.19 Tổng hợp kết quả định danh trên bộ dữ liệu Quan họ.20 Tổng hợp kết quả định danh trên bộ dữ liệu Chèo.21 Chênh lệch về tỷ lệ định danh đúng của CNN so với 2 mô hình còn lại 87 Bảng 3.1 Độ chính xác của phân loại ảnh phổ trên tập xác thực.2 Độ chính xác của tập xác thực cho mỗi lần huấn luyện với fold_ext.3 Độ chính xác của tập xác thực trên ảnh phổ và trên file âm thanh.4 Số lượng từng thể loại nhạc trong bộ dữ liệu GTZAN [24].5 Cấu hình của CNN với 300 tham số.6 Cấu hình của LSTM với 300 tham số.7 Cấu hình của GRU với 300 tham số.8 Cấu hình của CSN với 300 tham số.9 Mô tả các bộ dữ liệu được sử dụng trong nghiên cứu.10: Kết quả phân lớp trên tập dữ liệu S2n1.11 Trung bình độ chính xác, AUC của LSTM, CNN, GRU, CSN trên S7 100 Bảng 3.12: Kết quả phân lớp trên tập dữ liệu S8 và S9.13: Kết quả phân lớp trên tập dữ liệu S0, S1, S2n2, S2n3.14: Kết quả phân lớp trên tập dữ liệu S2n2 và S2n3 dùng GRU.15 Diễn giải các bộ dữ liệu sử dụng.16: Kết quả phân lớp trên tập dữ liệu S4fH và S4fL dùng DensetNet169 104 Bảng 3.17: Kết quả phân lớp trên tập dữ liệu S4fL.18: Kết quả phân lớp trên tập dữ liệu S3e, S2 và S1.19: Kết quả phân lớp trên tập dữ liệu S3s, S5s và S5t.20 Thời gian trung bình để huấn luyện một epoch và thời gian để hàm tổn thất hội tụ. 108 8 DANH MỤC CÁC HÌNH ẢNH, ĐỒ THỊ Hình 1.1 Minh hoạ phân phối Skewness.2 Minh hoạ phân bố Kurtosis.3 Năng lượng và RMS của một làn điệu Chèo.4 ZCR của một làn điệu Chèo.5 Các bước tính các hệ số MFCC.6 Các hệ số MFCC và các đạo hàm MFCC của một làn điệu Chèo.7 Spectral Centroid của một làn điệu Chèo và Quan họ.8 Spectral Contrast của một làn điệu Quan họ và Chèo.9 Spectral Rolloff của một làn điệu Chèo và Quan họ.10 Spectral Bandwidth của một làn điệu Chèo và Quan họ.11 Spectral Flux của một làn điệu Quan họ.12 Sơ đồ chung cho hệ thống phân lớp thể loại âm nhạc (nguồn: [22]).13 Hình ảnh dữ liệu, đường biên và lề trong SVM.14 Phân bố Gauss với một số giá trị của 𝜇 và 𝜎.15 Phân bố Gauss đa thể hiện là tổ hợp của 3 phân bố Gauss đơn thể hiện 37 Hình 1.16a Cấu trúc của một nơ-ron sinh học (nguồn: [88]).16b Cấu trúc của một nơ-ron nhân tạo.17 Minh hoạ cách lấy chập khi áp bộ lọc lên ma trận đầu vào.18 Minh hoạ thao tác pooling sử dụng max-pooling.19 Gated Recurrent Unit (nguồn: [103]).20 Sơ đồ của Residual Block với hàm ReLU.21 Attention module là sự kết hợp của Soft mask branch và Trunk branch 44 Hình 1.22 Soft mask branch sử dụng trong Attention module.23 Kiến trúc DenseNet với 3 khối Dense.24 Mạng CSN gồm M capsule ở mức cao và N capsule ở mức thấp.25 Dạng sóng và phổ Mel tương ứng cho một trích đoạn của file blues.wav của thể loại nhạc Blue.26 Thống kê số lượng bài báo có trích dẫn đến [24].1 Minh họa việc chia một file âm thanh thành hai nửa cùng thể loại và phổ Mel tương ứng.2 Tiếng vọng được quan sát ở phần cuối của file âm thanh.3 Cách tính SNR của một file và giá trị trung bình của SNR.
Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ
Trích dẫn luận án này
Chu Bá Thành (2023). Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng [Luận án tiến sĩ, Đại học Bách khoa Hà Nội]. LuanAn.net. https://luanan.net/am-nhac/am-nhac-hoc/dinh-danh-tu-dong-lan-dieu-dan-ca-viet-nam
Câu hỏi thường gặp
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" nghiên cứu về vấn đề gì?
Nghiên cứu đề xuất phương pháp định danh tự động làn điệu dân ca Việt Nam bằng machine learning, cải tiến hiệu quả nhận diện chính xác.
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" được bảo vệ tại trường nào?
Luận án này được bảo vệ tại Đại học Bách khoa Hà Nội. Năm bảo vệ: 2023.
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" thuộc chuyên ngành gì?
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" thuộc chuyên ngành Kỹ thuật máy tính. Danh mục: Âm Nhạc Học.
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" có bao nhiêu trang?
Luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" có 148 trang. Bạn có thể xem trước một phần tài liệu ngay trên trang web trước khi tải về.
Cách tải luận án "Định danh tự động làn điệu dân ca Việt Nam: Nghiên cứu và ứng dụng" về máy như thế nào?
Để tải luận án về máy, bạn nhấn nút "Tải xuống ngay" trên trang này, sau đó hoàn tất thanh toán phí lưu trữ. File sẽ được tải xuống ngay sau khi thanh toán thành công. Hỗ trợ qua Zalo: 0559 297 239.