Tổng quan về luận án

Công trình nghiên cứu "Nghiên cứu đổi mới đánh giá kết quả học tập ngoại ngữ chuyên ngành của sinh viên các trường Cao đẳng du lịch ở Việt Nam" (Mã số: 62 14 01 20) do Nghiên cứu sinh Hoàng Văn Thái thực hiện tại Viện Đảm bảo chất lượng giáo dục – Đại học Quốc gia Hà Nội (2017), dưới sự hướng dẫn khoa học của PGS.TS. Ngô Doãn Đãi và TS. Nguyễn Thị Thu Hương, là luận án tiến sĩ tiên phong tiếp cận liên ngành giữa Đo lường & Đánh giá trong giáo dục và Phương pháp giảng dạy tiếng Anh chuyên ngành (ESP/LSP).

Bối cảnh khoa học của luận án bắt nguồn từ yêu cầu cấp thiết của Nghị quyết số 29-NQ/TW (Hội nghị Trung ương 8 khóa XI) về đổi mới căn bản, toàn diện giáo dục và đào tạo: "Đổi mới căn bản hình thức và phương pháp thi, kiểm tra và đánh giá kết quả giáo dục, bảo đảm trung thực, khách quan... Phối hợp sử dụng kết quả đánh giá trong quá trình học với đánh giá cuối kỳ, cuối năm học; đánh giá của người dạy với tự đánh giá của người học", cùng Chiến lược phát triển ngoại ngữ theo Đề án Ngoại ngữ Quốc gia (Quyết định 1400/QĐ-TTg) trong bối cảnh Cộng đồng Kinh tế ASEAN (AEC) chính thức vận hành từ ngày 31/12/2015 đòi hỏi nhân lực du lịch phải giao tiếp nghề nghiệp thành thạo.

Research gap then chốt mà luận án nhận diện là: Mặc dù Khung năng lực ngoại ngữ 6 bậc dùng cho Việt Nam (KNLNNVN - Thông tư 01/2014/TT-BGDĐT) và Tiêu chuẩn Kỹ năng nghề Du lịch Việt Nam (VTOS 2013) đã ban hành, việc đánh giá kết quả học tập (KQHT) ngoại ngữ chuyên ngành (NNCN) tại các trường đào tạo nghề du lịch vẫn nặng tính truyền thống (truyền thụ kiến thức ngôn ngữ rời rạc, trắc nghiệm ngữ pháp thuần túy), thiếu vắng khung chuẩn đầu ra (CĐR) năng lực tích hợp và bộ công cụ đo lường chuẩn hóa phản ánh đúng các tình huống giao tiếp nghề nghiệp xác thực.

Hệ thống câu hỏi nghiên cứu và giả thuyết khoa học được xác lập:

  • Câu hỏi nghiên cứu 1 (RQ1): Cơ sở khoa học nào cho việc đổi mới đánh giá KQHT ngoại ngữ chuyên ngành của sinh viên các trường cao đẳng du lịch (CĐDL) theo tiếp cận năng lực?
  • Câu hỏi nghiên cứu 2 (RQ2): Thực trạng đánh giá KQHT ngoại ngữ chuyên ngành tại các trường CĐDL ở Việt Nam hiện nay đang bộc lộ những hạn chế và bất cập gì?
  • Câu hỏi nghiên cứu 3 (RQ3): Cần thực thi hệ thống giải pháp sư phạm và kỹ thuật đo lường nào để đổi mới đánh giá KQHT ngoại ngữ chuyên ngành đáp ứng chuẩn đầu ra năng lực nghề nghiệp?
  • Giả thuyết khoa học (H1): Hiện nay, việc đánh giá KQHT ngoại ngữ chuyên ngành tại các trường CĐDL còn bộc lộ nhiều điểm yếu về nội dung, phương pháp, công cụ và quy trình triển khai. Nếu xây dựng và thực thi đồng bộ hệ thống giải pháp đổi mới đánh giá theo tiếp cận năng lực—tích hợp giữa năng lực ngôn ngữ giao tiếp, năng lực chiến lược và năng lực chuyên môn nghề nghiệp—thì sẽ nâng cao vượt bậc chất lượng đánh giá, từ đó thúc đẩy toàn diện hiệu quả đào tạo nhân lực du lịch.

Phạm vi nghiên cứu bao quát khảo sát thực trạng diện rộng tại 8 trường Cao đẳng Du lịch thuộc Bộ Văn hóa, Thể thao và Du lịch trên toàn quốc (CĐDL Hà Nội, Cao đẳng nghề Dịch vụ & Du lịch Hải Phòng, Cao đẳng nghề Du lịch Huế, Đà Nẵng, Nha Trang, Đà Lạt, Vũng Tàu và Cần Thơ), tập trung thực nghiệm sâu vào môn tiếng Anh chuyên ngành Quản trị khách sạn (QTKS) tại Trường Cao đẳng Du lịch Hà Nội với 5 bài thi gốc được chuẩn hóa bằng mô hình đo lường hiện đại Rasch.

Literature Review và Positioning

Luận án đã tổng quan toàn diện và phân tích đối sánh 3 dòng lý thuyết và trường phái đo lường đánh giá giáo dục cốt lõi:

  1. Trường phái Đánh giá xác thực (Authentic Assessment) và Đánh giá thực hiện (Performance Assessment): Các nghiên cứu nền tảng của McMillan (2001), Nitko (2001), O’Malley & Valdez Pierce (1996), Brown (2004) khẳng định các bài kiểm tra chuẩn hóa truyền thống chỉ đo lường tri thức bậc thấp (nhận biết, ghi nhớ), trong khi đánh giá thực hiện yêu cầu người học huy động tư duy bậc cao, giải quyết nhiệm vụ phức hợp gắn với bối cảnh đời sống thực.
  2. Trường phái Đánh giá vì sự tiến bộ của người học (Assessment for Learning - AfL) và Đánh giá là hoạt động học tập (Assessment as Learning - AaL): Phân tích từ Black & Wiliam (1998), Earl (2003), Genesee & Upshur (1996), Hutchinson & Waters (1987) chỉ ra ĐG không chỉ để tổng kết (Assessment of Learning - AoL) phân loại xếp hạng, mà phải đóng vai trò cung cấp thông tin phản hồi liên tục (formative feedback), giúp sinh viên tự đánh giá (self-assessment) và đánh giá đồng đẳng (peer-assessment).
  3. Lý thuyết Năng lực ngôn ngữ giao tiếp (Communicative Language Ability - CLA) và Kiểm tra ngoại ngữ chuyên biệt (LSP Testing): Dựa trên khung lý thuyết kinh điển của Bachman & Palmer (1996, 2010) và Douglas (2000), năng lực ngoại ngữ chuyên ngành là sự tương tác phức hợp giữa tri thức ngôn ngữ, năng lực chiến lược và tri thức chuyên ngành trong một tình huống giao tiếp xác thực (specific purpose language use situation).

Về mặt học thuật, luận án giải quyết mâu thuẫn sâu sắc giữa hai quan điểm đối nghịch: Một bên duy trì quan điểm đánh giá tâm trắc học truyền thống (Psychometric approach) ưu tiên tuyệt đối độ tin cậy thông qua trắc nghiệm khách quan đa lựa chọn (MCQ) đo tri thức ngôn ngữ giải ngữ cảnh; bên kia là quan điểm đánh giá năng lực thực hiện theo bối cảnh (Contextualized performance-based assessment) tập trung vào tính giá trị xác thực nhưng thường bị chỉ trích vì tính chủ quan khi chấm điểm. Luận án đã định vị giải pháp dung hòa khoa học: Kết hợp trắc nghiệm khách quan chuẩn hóa bằng Mô hình Rasch (đo lường năng lực tiếp nhận/tri thức ngôn ngữ chuyên ngành) với Đánh giá dựa trên nhiệm vụ (Task-Based Language Assessment - TBLA) và Đánh giá qua dự án (Project-Based Assessment) có sử dụng Rubrics phân tích đa tiêu chí (Analytic Rubrics).

So sánh với các nghiên cứu và khung chuẩn quốc tế, luận án đã đối chiếu với:

  • Hệ thống đánh giá tiếng Anh cho nhân viên khách sạn, nhà hàng của telc GmbH (Cộng hòa Liên bang Đức, 2014) dựa trên CEFR.
  • Chuẩn đánh giá tiếng Anh nghề nghiệp cho nhân viên du lịch - khách sạn của Accueil (Thụy Sĩ, 2012).
  • Thang chuẩn TOEIC cho 6 nghề du lịch của Viện Khảo thí Giáo dục Hoa Kỳ (ETS) hợp tác với Dự án EU (Bảng 1: Lễ tân khách sạn 3-5 sao yêu cầu TOEIC 475 - 700; Hướng dẫn viên du lịch yêu cầu TOEIC 625 - 700).
  • Bộ tiêu chuẩn nghề du lịch ASEAN (ACCSTP) với 11 đơn vị năng lực tiếng Anh. Luận án chỉ rõ điểm hạn chế của VTOS và ACCSTP là mới dừng lại ở mô tả năng lực thực hiện nghề nghiệp chung chung mà chưa cụ thể hóa thành hệ thống chuẩn đầu ra ngôn ngữ sư phạm tích hợp với các cấp độ tư duy đo lường được.

Đóng góp lý thuyết và khung phân tích

Đóng góp cho lý thuyết

Luận án mở rộng và làm sâu sắc thêm mô hình Năng lực ngôn ngữ giao tiếp của Bachman & Palmer (1996, 2010) và Douglas (2000) khi vận dụng vào bậc đào tạo cao đẳng nghề tại Việt Nam thông qua việc thiết lập cấu trúc Năng lực ngoại ngữ chuyên ngành đa chiều gồm 6 thành tố tương hỗ:

  1. Năng lực ngôn ngữ ngoại ngữ (Language competence): Bao gồm Năng lực ngữ pháp (Grammatical competence - từ vựng, cú pháp chuyên ngành lễ tân, buồng, nhà hàng); Năng lực ngôn bản (Textual competence - cấu trúc hội thoại nghiệp vụ, email thương mại); Năng lực hành ngôn (Functional competence - kỹ năng giải quyết khiếu nại, tư vấn dịch vụ); Năng lực ngôn ngữ xã hội (Sociolinguistic competence - quy tắc lịch thiệp, văn hóa giao tiếp đa quốc gia).
  2. Năng lực chiến lược (Strategic competence): Cơ chế kiểm soát, lập kế hoạch, bù đắp khó khăn ngôn ngữ, sử dụng ngôn ngữ cơ thể và kỹ thuật diễn đạt lại (paraphrasing) trong môi trường phục vụ khách hàng.
  3. Năng lực chuyên môn nghề nghiệp (Professional competency): Tri thức và kỹ năng thao tác chuẩn nghề du lịch (xử lý đặt buồng, check-in/check-out, vận hành két an toàn).
  4. Năng lực tiếp nhận (Receptive competence): Kỹ năng nghe hiểu khẩu lệnh, yêu cầu và đọc tài liệu nghiệp vụ.
  5. Năng lực tương tác (Interactive competence): Đàm thoại trực tiếp và qua điện thoại với khách hàng quốc tế.
  6. Năng lực sản sinh (Productive competence): Thuyết trình dịch vụ, lập báo cáo ca làm việc bằng văn bản.

Luận án khẳng định sự dịch chuyển mô hình (paradigm shift) từ đánh giá nặng về tái hiện kiến thức ngôn ngữ tách rời sang đánh giá năng lực tích hợp theo mô hình Dạy học tích hợp chuyên ngành và ngôn ngữ (Content and Language Integrated Learning - CLIL) của Coyle (2007) và Marsh (2002). Đánh giá KQHT ngoại ngữ chuyên ngành được định nghĩa là: "quá trình tập hợp và phân tích thông tin dựa trên cơ sở lý thuyết nhất định nhằm đưa ra những nhận định về khả năng sử dụng phối hợp kiến thức, kĩ năng, thái độ nghề nghiệp, động cơ, năng lực... của sinh viên trong quá trình học tập môn NNCN để thực hiện hiệu quả một nhiệm vụ phức hợp của môn học trong bối cảnh nghề nghiệp thực tế hoặc giả định bằng ngoại ngữ đang được học".

Khung phân tích độc đáo

Khung phân tích của luận án tích hợp đa tầng 4 khung lý thuyết chủ đạo:

  • Lý thuyết Kiến tạo (Constructivism): Tri thức và năng lực được hình thành qua trải nghiệm thực hành; đánh giá phải là môi trường học tập.
  • Tiếp cận Năng lực theo ngôn ngữ giao tiếp chức năng (Functional-Communicative Approach): Gắn chuẩn KNLNNVN Bậc 3 (tương đương B1 CEFR) với ngữ cảnh nghề nghiệp cụ thể.
  • Mô hình Dạy học tích hợp chuyên ngành và ngôn ngữ (CLIL): Đánh giá song hành cả mục tiêu ngôn ngữ (Language) và mục tiêu chuyên môn (Content).
  • Chu trình quản lý chất lượng liên tục PDCA (Plan - Do - Check - Act) và Mô hình ADDIE (Analysis - Design - Development - Implementation - Evaluation): Đảm bảo chuẩn hóa mọi khâu từ xác định CĐR đến xây dựng công cụ và thử nghiệm thực chứng.

Boundary conditions (điều kiện biên) của mô hình được xác lập rõ: Áp dụng cho các chương trình đào tạo cao đẳng nghề du lịch có định hướng ứng dụng thực hành cao, nơi chuẩn đầu ra ngoại ngữ gắn liền với các vị trí việc làm xác định (như Lễ tân, Nhà hàng, Buồng, Lữ hành).

                  ┌──────────────────────────────────────────────┐
                  │ Khung Năng Lực Ngoại Ngữ Chuyên Ngành Du Lịch │
                  └──────────────────────┬───────────────────────┘
                                         │
       ┌─────────────────────────────────┼─────────────────────────────────┐
       ▼                                 ▼                                 ▼
┌──────────────┐                 ┌──────────────┐                  ┌──────────────┐
│  NĂNG LỰC    │                 │  NĂNG LỰC    │                  │  NĂNG LỰC    │
│  NGÔN NGỮ    │                 │ CHIẾN LƯỢC   │                  │ CHUYÊN NGHỀ  │
│  (Ngữ pháp,  │◄───────────────►│  (Xử lý tình │◄────────────────►│ (Thao tác    │
│  Ngôn bản,   │                 │   huống, bù  │                  │  nghiệp vụ,  │
│  Hành ngôn,  │                 │   đắp giao   │                  │  tiêu chuẩn  │
│  Xã hội)     │                 │   tiếp)      │                  │  VTOS/AEC)   │
└──────┬───────┘                 └──────┬───────┘                  └──────┬───────┘
       └─────────────────────────────────┼─────────────────────────────────┘
                                         │
                                         ▼
                     ┌───────────────────────────────────────┐
                     │   HỆ THỐNG ĐÁNH GIÁ TÍCH HỢP (CLIL)   │
                     ├───────────────────────────────────────┤
                     │ - Assessment of Learning (AoL - Rasch)│
                     │ - Assessment for Learning (AfL)       │
                     │ - Assessment as Learning (AaL-Rubrics)│
                     └───────────────────────────────────────┘

Phương pháp nghiên cứu tiên tiến

Thiết kế nghiên cứu

Luận án áp dụng triết lý nghiên cứu thực dụng (Pragmatism) kết hợp phương pháp hỗn hợp (Mixed-Methods Design), lồng ghép chặt chẽ giữa nghiên cứu định tính (Qualitative: phân tích tài liệu, phỏng vấn sâu chuyên gia, quan sát lớp học) và nghiên cứu định lượng (Quantitative: khảo sát bảng hỏi quy mô lớn, phân tích tâm trắc học bài thi bằng phần mềm chuyên dụng).

Thiết kế đa tầng được triển khai:

  • Cấp độ vĩ mô: Nghiên cứu đối sánh hệ thống văn bản pháp quy, chuẩn quốc gia KNLNNVN, chuẩn nghề VTOS, ACCSTP và khung năng lực quốc tế.
  • Cấp độ trung gian: Khảo sát thực trạng tại 8 trường CĐDL trực thuộc Bộ VHTTDL trên khắp 3 miền Bắc - Trung - Nam.
  • Cấp độ vi mô: Thiết kế và thử nghiệm thực chứng quy trình đánh giá, bộ CĐR và bộ công cụ đo lường tại Khoa Khách sạn - Du lịch, Trường CĐDL Hà Nội.

Quy trình nghiên cứu rigorous

Quy trình nghiên cứu chuẩn hóa 5 bước nghiêm ngặt:

  1. Nghiên cứu cơ sở lý luận: Hệ thống hóa các lý thuyết đánh giá năng lực, đánh giá thực tế, CLIL và đo lường tâm trắc học.
  2. Khảo sát thực trạng diện rộng: Xây dựng phiếu điều tra xã hội học bằng thang đo Likert 5 mức độ, thu thập dữ liệu từ giảng viên giảng dạy NNCN, cán bộ quản lý đào tạo, sinh viên ngành Quản trị khách sạn và các chuyên gia/nhà tuyển dụng thuộc các khách sạn 3-5 sao.
  3. Thiết kế giải pháp và bộ chuẩn đầu ra: Xây dựng CĐR chi tiết cho môn Tiếng Anh chuyên ngành Quản trị khách sạn theo 4 kỹ năng và các miền năng lực thành phần.
  4. Phát triển ngân hàng công cụ đánh giá: Thiết kế 5 bài thi gốc (gồm phần thi trắc nghiệm khách quan đo lường ngôn ngữ - chuyên ngành, phần thi vấn đáp tương tác/độc thoại, phần thi viết chuyên môn và rubric đánh giá dự án).
  5. Thực nghiệm đo lường và hiệu chỉnh công cụ: Tổ chức thi thử nghiệm, số hóa dữ liệu và xử lý dữ liệu đo lường bằng Mô hình Rasch (Item Response Theory) trên phần mềm Quest.

Độ giá trị cấu trúc (Construct validity), giá trị nội dung (Content validity) được thẩm định qua hội đồng chuyên gia giáo dục và chuyên gia khách sạn. Độ tin cậy (Reliability) được kiểm chứng qua hệ số Cronbach’s Alpha và chỉ số phân tách của mô hình Rasch.

Data và phân tích

Mẫu khảo sát thực trạng bao gồm hàng trăm cán bộ, giảng viên và sinh viên tại 8 trường CĐDL, cùng các giám đốc nhân sự, trưởng bộ phận lễ tân tại các khách sạn quốc tế.

Kỹ thuật phân tích trắc lượng tâm lý hiện đại: Luận án áp dụng Mô hình Rasch đơn tham số (Rasch Measurement Model) thông qua phần mềm Quest để thẩm định 5 bài thi thực nghiệm.

  • Chỉ số tương thích Infit Mean Square (Infit MNSQ): Phân tích mức độ phù hợp của từng item trắc nghiệm. Các câu hỏi đạt chuẩn phải nằm trong dải giá trị cho phép $0.77 \le \text{Infit MNSQ} \le 1.30$. Các câu hỏi ngoài khoảng này (quá dị biệt hoặc gây nhiễu) bị loại bỏ hoặc hiệu chỉnh nội dung.
  • Bản đồ tương quan Năng lực thí sinh - Độ khó câu hỏi (Variable Map / Wright Map): Đánh giá mức độ tương thích giữa phân bố năng lực của sinh viên (Person Ability $\theta$) và phân bố độ khó của các items ($\beta$). Kết quả phân tích file lancon.ita chứng minh các câu hỏi phủ đều các dải năng lực từ thấp đến cao, không bị hiện tượng trần (ceiling effect) hay sàn (floor effect).
  • Độ tin cậy nhất quán nội tại: Hệ số Cronbach’s Alpha cho toàn bộ các kỹ năng và thành tố năng lực chuyên môn đều đạt ngưỡng cao ($\alpha \ge 0.82$), chứng minh công cụ có độ tin cậy khoa học xuất sắc.

Phát hiện đột phá và implications

Những phát hiện then chốt

  1. Sự đứt gãy giữa mục tiêu đào tạo và thực tiễn đánh giá (Assessment-Curriculum Mismatch): Khảo sát tại 8 trường CĐDL chỉ ra rằng mặc dù 100% các trường đều công bố đổi mới phương pháp dạy học theo hướng thực hành, nhưng trên 75% đề thi kết thúc môn vẫn là trắc nghiệm ngữ pháp lý thuyết hoặc dịch văn bản truyền thống. Hoàn toàn thiếu vắng các bài kiểm tra thực hiện (performance tasks) mô phỏng tình huống quầy lễ tân hay nhà hàng.
  2. Sự thiếu hụt bộ đặc tả Chuẩn đầu ra chi tiết ở cấp độ môn học: Mặc dù KNLNNVN đã ban hành, có đến hơn 80% giảng viên phản ánh gặp lúng túng nghiêm trọng khi chuyển hóa các tiêu chí bậc 3 tổng quát thành các tiêu chí đánh giá kỹ năng chuyên ngành du lịch có thể đo lường được.
  3. Mô hình hóa thành công cấu trúc CĐR tiếng Anh chuyên ngành Quản trị khách sạn: Luận án đã lượng hóa và thiết lập ma trận CĐR gồm 4 kỹ năng (Nghe, Nói, Đọc, Write) gắn chặt với 14 tình huống nghiệp vụ cốt lõi của khách sạn (như: Check-in VIP guest, Handling customer complaints, Room service taking, Giving directions, Telephone reservations).
  4. Hiệu chuẩn thành công 5 bài thi gốc bằng mô hình Rasch: Phân tích dữ liệu thực nghiệm qua phần mềm Quest cho thấy các bài thi trắc nghiệm kết hợp thực hành giao tiếp có độ phân biệt xuất sắc, chỉ số Infit MNSQ của đa số các câu hỏi hội tụ trong khoảng chuẩn $0.85 - 1.18$, phản ánh chính xác năng lực thực tế của sinh viên tương thích với yêu cầu của nhà tuyển dụng.
  5. Đổi mới phương thức đánh giá tích hợp trong tiến trình (AfL/AaL): Việc áp dụng Analytic Rubrics (bảng kiểm phân tích 4 mức độ: Xuất sắc, Khá, Đạt, Chưa đạt) và Portfolio (Hồ sơ học tập) giúp sinh viên tự nhận diện khiếm khuyết ngôn ngữ và giảm 40% lỗi sai thường gặp trong giao tiếp chuyên môn.

Implications đa chiều

  • Về mặt lý luận: Luận án cung cấp một khung lý thuyết hoàn chỉnh về đánh giá tích hợp năng lực chuyên môn và năng lực ngoại ngữ (CLIL Assessment Framework), giải quyết bài toán giao thoa giữa đo lường giáo dục và ngôn ngữ học ứng dụng tại các trường đại học/cao đẳng nghề.
  • Về mặt phương pháp luận: Thiết lập quy trình 5 bước chuẩn hóa công cụ đánh giá có ứng dụng Item Response Theory (Mô hình Rasch), mở ra hướng tiếp cận đo lường hiện đại cho các môn học chuyên ngành khác ngoài ngoại ngữ.
  • Về mặt thực tiễn ứng dụng: Cung cấp ngay cho các trường CĐDL bộ CĐR chi tiết môn Tiếng Anh QTKS, ngân hàng câu hỏi chuẩn hóa, bộ đề thi thực nghiệm kèm thang Rubrics chi tiết, có thể áp dụng trực tiếp vào kỳ thi kết thúc học phần và đánh giá quá trình.
  • Về mặt chính sách: Cung cấp luận cứ khoa học để Bộ VHTTDL và Tổng cục Giáo dục nghề nghiệp (Bộ LĐTBXH) ban hành quy định thống nhất về chuẩn đầu ra và quy trình kiểm định chất lượng ngoại ngữ chuyên ngành du lịch.

Limitations và Future Research

Luận án thừa nhận khách quan 3 hạn chế chính:

  1. Giới hạn mẫu thực nghiệm: Mặc dù khảo sát thực trạng thực hiện trên 8 trường toàn quốc, phần thực nghiệm đo lường công cụ và chuẩn hóa Rasch mới chỉ triển khai chuyên sâu tại Trường CĐDL Hà Nội trên đối tượng sinh viên ngành Quản trị khách sạn.
  2. Phạm vi ngôn ngữ: Nghiên cứu chỉ tập trung vào tiếng Anh chuyên ngành, chưa mở rộng sang các ngoại ngữ phổ biến khác trong ngành du lịch Việt Nam như tiếng Pháp, tiếng Trung Quốc, tiếng Nhật Bản, tiếng Hàn Quốc.
  3. Thời gian theo dõi tác động dọc (Longitudinal impact): Chưa có điều kiện đo lường khả năng duy trì năng lực ngoại ngữ và mức độ thích ứng công việc của sinh viên sau khi tốt nghiệp làm việc tại các khách sạn 1-2 năm.

Chương trình nghiên cứu tương lai (Future Research Agenda):

  • Mở rộng chuẩn hóa CĐR và ngân hàng công cụ đánh giá sang 5 nghề du lịch trọng điểm còn lại: Hướng dẫn du lịch, Quản trị Lữ hành, Kỹ thuật chế biến món ăn, Nghiệp vụ Lễ tân, Quản trị Nhà hàng.
  • Ứng dụng công nghệ thông tin và trí tuệ nhân tạo (AI/Computerized Adaptive Testing - CAT) trong việc xây dựng bài thi thích ứng trên máy tính dựa trên tham số câu hỏi Rasch.
  • Nghiên cứu mô hình đánh giá tích hợp giữa nhà trường và doanh nghiệp (Work-Integrated Assessment).

Tác động và ảnh hưởng

  • Ảnh hưởng học thuật: Luận án là tài liệu tham khảo mẫu mực về ứng dụng Mô hình Rasch và phần mềm Quest trong đo lường giáo dục tại Việt Nam, mở ra trào lưu nghiên cứu ứng dụng tâm trắc học hiện đại vào giáo dục nghề nghiệp.
  • Chuyển đổi giáo dục nghề nghiệp: Hệ thống các trường Cao đẳng Du lịch thuộc Bộ VHTTDL có được công cụ và quy trình chuẩn hóa để tái cấu trúc chương trình đào tạo theo định hướng năng lực đầu ra (Outcome-Based Education).
  • Tác động kinh tế - xã hội: Góp phần nâng cao năng lực cạnh tranh của lao động du lịch Việt Nam trong thị trường lao động chung ASEAN (AEC), giảm thiểu chi phí và thời gian đào tạo lại ngoại ngữ cho các doanh nghiệp khách sạn, resort quốc tế.

Đối tượng hưởng lợi

  • Nghiên cứu sinh & Giảng viên Đo lường - Đánh giá: Tiếp cận khung phương pháp luận kết hợp giữa ngôn ngữ học giao tiếp, CLIL và mô hình đo lường Rasch hiện đại.
  • Giảng viên Ngoại ngữ chuyên ngành: Sử dụng trực tiếp quy trình thiết kế ma trận CĐR, ngân hàng câu hỏi và bảng Rubrics phân tích để đổi mới hoạt động kiểm tra đánh giá trên lớp học.
  • Các nhà quản lý đào tạo & Trưởng khoa: Có cơ sở khoa học để xây dựng chuẩn đầu ra môn học, chuẩn kiểm định chất lượng đào tạo đáp ứng chuẩn KNLNNVN và tiêu chuẩn VTOS.
  • Sinh viên Cao đẳng Du lịch: Được hưởng thụ môi trường học tập và đánh giá minh bạch, bám sát thực tiễn nghề nghiệp, phát triển năng lực tự đánh giá và nâng cao cơ hội việc làm sau tốt nghiệp.

Câu hỏi chuyên sâu

  1. Đóng góp lý thuyết độc đáo nhất của luận án là gì?
    Trả lời: Luận án đã mở rộng mô hình Năng lực ngôn ngữ giao tiếp của Bachman & Palmer (1996) và lý thuyết LSP Testing của Douglas (2000) bằng cách tích hợp mô hình Dạy học tích hợp chuyên ngành và ngôn ngữ (CLIL), xác lập khung năng lực ngoại ngữ chuyên ngành du lịch gồm 6 thành tố tương hỗ, gắn kết chuẩn ngôn ngữ KNLNNVN Bậc 3 với chuẩn kỹ năng nghề VTOS/ASEAN.

  2. Đột phá về phương pháp luận nghiên cứu so với các công trình trước đây là gì?
    Trả lời: Khác với các nghiên cứu trước đây tại Việt Nam chủ yếu dùng thống kê mô tả cổ điển (Classical Test Theory - CTT), luận án là công trình tiên phong sử dụng Lý thuyết Ứng đáp Câu hỏi (Item Response Theory) với Mô hình Rasch thông qua phần mềm Quest để hiệu chuẩn bài thi ngoại ngữ chuyên ngành, kiểm soát chỉ số Infit MNSQ ($0.77 \le \text{MNSQ} \le 1.30$) và xây dựng bản đồ Wright Map tương quan giữa năng lực sinh viên và độ khó câu hỏi.

  3. Phát hiện thực nghiệm gây bất ngờ nhất là gì?
    Trả lời: Dữ liệu khảo sát thực trạng cho thấy hơn 75% các kỳ thi tại 8 trường CĐDL vẫn sử dụng phương pháp trắc nghiệm ngữ pháp truyền thống tách rời bối cảnh nghề nghiệp, dù 100% cán bộ giảng viên đều nhận thức rất rõ tầm quan trọng của việc đánh giá năng lực thực hành. Nguyên nhân cốt lõi là do thiếu quy trình kỹ thuật xây dựng CĐR chi tiết và bảng tiêu chí chấm điểm (Rubrics) chuẩn hóa.

  4. Luận án có cung cấp quy trình nhân bản (Replication protocol) không?
    Trả lời: Hoàn toàn có. Luận án cung cấp chi tiết quy trình 5 bước xây dựng CĐR môn học, quy trình thiết kế câu hỏi trắc nghiệm MCQ chuyên ngành, quy trình xây dựng nhiệm vụ giao tiếp (Communication tasks), quy trình đánh giá dự án (Project assessment) và bộ 5 bài thi thực nghiệm mẫu kèm mã nguồn lệnh phân tích trên phần mềm Quest.

  5. Chương trình nghiên cứu 10 năm tới được phác thảo như thế nào?
    Trả lời: Mở rộng mô hình sang toàn bộ 6 nghề du lịch quốc gia; phát triển hệ thống kiểm tra thích ứng trên máy tính (CAT); số hóa ngân hàng đề thi tích hợp trên nền tảng e-learning; và xây dựng cơ chế kiểm định độc lập liên kết giữa Hiệp hội Khách sạn Việt Nam và các cơ sở giáo dục nghề nghiệp.

Kết luận

Luận án tiến sĩ của NCS. Hoàng Văn Thái đã hoàn thành xuất sắc các mục tiêu nghiên cứu với 5 đóng góp học thuật và thực tiễn cốt lõi:

  1. Xác lập hệ thống cơ sở lý luận vững chắc kết hợp giữa Đo lường & Đánh giá giáo dục hiện đại, Ngôn ngữ học ứng dụng và Dạy học tích hợp chuyên ngành - ngôn ngữ (CLIL).
  2. Phác họa bức tranh toàn cảnh, khách quan và khoa học về thực trạng đánh giá ngoại ngữ chuyên ngành tại 8 trường Cao đẳng Du lịch trên toàn quốc.
  3. Đề xuất hệ thống 3 giải pháp đột phá: Xây dựng CĐR năng lực môn học; Phát triển bộ công cụ đánh giá chuẩn hóa đa dạng (Rasch calibrated MCQ, Rubrics, Portfolio); Triển khai mô hình đánh giá tích hợp trong tiến trình dạy học.
  4. Thiết kế, chuẩn hóa và thực nghiệm thành công bộ CĐR cùng 5 bài thi gốc môn Tiếng Anh chuyên ngành Quản trị khách sạn bằng Mô hình Rasch trên phần mềm Quest.
  5. Cung cấp cẩm nang phương pháp luận và công cụ thực hành mẫu mực, đóng góp trực tiếp vào công cuộc đổi mới căn bản, toàn diện giáo dục nghề nghiệp du lịch Việt Nam thời kỳ hội nhập quốc tế sâu rộng.