Nội dung

ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI VIỆT NAM1 Hà Quang Thụy* - Võ Đình Hiếu** - Phan Xuân Hiếu*** - Nguyễn Trí Thành**** - Nguyễn Hữu Đức***** 2 Tóm tắt: Đo lường công bố khoa học của cá nhân nhà khoa học, tổ chức khoa học là một chủ đề hấp dẫn theo các khía cạnh khoa học, kinh tế và quản lý. Tuy nhiên, đo lường công bố khoa học cũng gặp không ít thách thức, vì vậy, việc tìm hiểu một cách toàn diện về đo lường công bố khoa học là một công việc cần thiết. Bài viết này cung cấp một khảo sát bước đầu song đủ khái quát về đo lường công bố khoa học, một số thách thức chính và xu hướng hoạt động này trong thời đại số. Đồng thời trình bày một số trao đổi về hoạt động đo lường công bố khoa học tại Việt Nam. Từ khóa: Trắc lượng thư mục; Công bố khoa học; Đo lường khoa học 1. GIỚI THIỆU Bài báo khoa học và sáng chế là hai trong số các đầu ra cốt lõi về nghiên cứu-phát triển (NC-PT) trong đo lường trình độ của một nền kinh tế tri thức [Chen06]. Chiến lược phát triển kinh tế tri thức tập trung vào ba đầu vào chủ chốt là đầu tư cho giáo dục đại học, cho NC 1 Lời cám ơn: Bài viết nhận được một phần tài trợ từ Đề tài cấp Nhà nước mã số KHGD/16-20.ĐT.007. * Phó Giáo sư, Tiến sĩ, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội. ** Tiến sĩ, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội. *** Phó Giáo sư, Tiến sĩ, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội. **** Phó Giáo sư, Tiến sĩ, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội. ***** Giáo sư, Tiến sĩ, Trường Đại học Công nghệ, Đại học Quốc gia Hà Nội. ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI Việt Nam - PT và cho phần mềm máy tính. Như vậy, cả hai phương diện đầu vào và đầu ra của một nền kinh tế tri thức đều liên quan mật thiết tới hiệu năng hoạt động của các nhà khoa học, các tổ chức khoa học-công nghệ và chính sách khoa học - công nghệ của đất nước, trong đó, công bố khoa học là một loại hình hoạt động quan trọng của các cá nhân - tổ chức khoa học - công nghệ, công bố khoa học như “bánh mì và bơ” đối với nhà khoa học, tạo “một cảm giác được tận hưởng thú vị” đối với một chuyên gia công nghiệp [Recker13]. Theo P. U. K. De Silva và C. K. Vance [Silva17], truyền thống khoa học (dạng sơ khai của công bố khoa học) được hình thành vào cuối thế kỷ thứ XVII. Vai trò quan trọng của khoa học - công nghệ thúc đẩy sự hình thành các tạp chí khoa học nhằm công bố các kết quả nghiên cứu của cộng đồng khoa học - công nghệ để tri thức được phổ biến và ứng dụng sâu rộng phục vụ sự phát triển của xã hội. Tiếp đó, các hệ thống lưu trữ, phân tích công bố khoa học xuất hiện và đo lường công bố khoa học như một hoạt động cơ bản của các hệ thống như vậy. Đầu tiên, Web of Science (nay là Clarivate Analytics1) xuất bản báo cáo chỉ số trích dẫn khoa học từ năm 1964, tiếp đến là Scopus2 (năm 2004), Google Scholar3 (năm 2004), Microsoft Academic4 (năm 2012/ năm 2016), Dimensions5 (năm 2018) và COCI - OpenCitations Index of CrossRef open DOI-to-DOI citations6 (năm 2018) và một số hệ thống khác [Martín20]. Chỉ số trích dẫn (citation) của một bài báo từ các bài báo được lưu trữ trong cùng hệ thống là yếu tố cốt lõi nguyên thủy trong các hệ thống đo lường công bố khoa học. Từ chỉ số trích dẫn, các hệ thống đưa ra các mô hình đo lường ảnh hưởng của một bài báo, một tạp chí mà các mô hình này là có thể khác nhau giữa các hệ thống khác nhau. 1 https://clarivate.com/. 2 https://www.elsevier.com/solutions/scopus. 3 https://scholar.Google.com/. 4 https://academic.microsoft.com/home. 5 https://www.digital-science.com/products/dimensions/. 6 https://opencitations.net/index/coci. 133 134 PHÁT TRIỂN MÔ HÌNH TRUNG TÂM TRI THỨC SỐ CHO CÁC THƯ VIỆN VIỆT NAM Trích dẫn của tác giả bài báo là một dạng hành vi con người vì vậy bản thân việc trích dẫn đã chứa đựng các đặc điểm phức tạp. Hơn nữa, mỗi một hệ thống đo lường trên đây sử dụng các mô hình đo lường khác nhau trên các cơ sở dữ liệu bài báo và tạp chí khoa học khác nhau. Vì vậy, đo lường công bố khoa học (một chỉ số quan trọng đánh giá hiệu năng làm việc) của cá nhân và tổ chức khoa học – công nghệ là một công việc đầy thách thức không chỉ đối với các cơ quan quản lý khoa học công nghệ, các nhà tài trợ mà còn đối với chính các cá nhân và tổ chức nhà khoa học. Trong nhiều trường hợp, một phương án thường được lựa chọn là đơn giản hóa vấn đề bằng cách loại bỏ các thách thức vốn có, và kết quá là, nảy sinh nhiều tình huống không công bằng. Cung cấp một nội dung toàn diện về đo lường công bố khoa học là một việc làm cần thiết, có vai trò góp phần vào việc hình thành một phương án đánh giá công bố khoa học phù hợp hơn. Bài báo này cung cấp một khảo sát bước đầu về đo lường công bố khoa học và được bắt đầu bằng việc giới thiệu sơ bộ về tiến hóa đo lường khoa học và các độ đo lường ảnh hưởng khoa học của cá nhân nhà khoa học và tạp chí khoa học. Ba khuyến nghị giải pháp đối với một số thách thức chính đối với đo lường công bố khoa học (Tuyên bố Dora, Khuyến nghị của Ủy ban IEEE và Tuyên ngôn Leiden) được trình bày. Xu hướng đo lường công bố khoa học trong thời đại số cũng được giới thiệu. Bài báo cũng đề cập sơ bộ về hoạt động đo lường công bố khoa học tại Việt Nam và một số đề nghị liên quan. 2. ĐO LƯỜNG THÔNG TIN VÀ ĐO LƯỜNG KHOA HỌC 2.1. Các lĩnh vực đo lường thông tin và đo lường khoa học Hình 1 cung cấp một khung nhìn về các lĩnh vực đo lường thông tin (Informetrics) và mối quan hệ giữa chúng [Holmberg16]. Như thể hiện trong Hình 1, các lĩnh vực đo lường thông tin (các bộ phận của Informetrics) là Bibliometrics (đo lường thư viện học), Scientometrics (đo lường khoa học), Cybermetrics (đo lường dựa trên mạng), Webometrics (đo lường dựa trên Web) và Altmetrics (đo lường dựa trên phương tiện xã hội); sau đây, bài viết này sử dụng các thuật ngữ gốc ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI Việt Nam tiếng Anh nhằm đảm bảo được hàm ý nguyên thủy của các thuật ngữ. Ngoài ra, Infonomics (Economics of Information: Kinh tế học thông tin) mới được xuất hiện gần đây đề cập tới phương thức đo lường giá trị kinh tế của thông tin; Infonomics bao gồm ba thành phần là quản lý thông tin, đo lường thông tin và tiền tệ hóa thông tin (monetize information hoặc monetize data) [Laney18]. Như thể hiện trên Hình 1, Bibliometrics, Scientometrics và Cybermetrics là ba lĩnh vực đo lường thông tin chính [Holmberg16]. Bibliometrics đề cập tới “việc nghiên cứu các thống kê định lượng về sự sản xuất, phổ biến và sử dụng các thông tin đã được mã hóa”, Scientometrics đề cập tới “việc nghiên cứu các thống kê định lượng của khoa học như là một ngành hay hoạt động kinh tế” còn Cybermetrics đề cập tới “việc nghiên cứu các thống kê định lượng của việc khởi tạo và sử dụng các tài nguyên, cấu trúc và công nghệ thông tin trên toàn bộ Internet theo hướng tiếp cận bibliometric và informetric. Webometrics (một phương thức con của Cybermetrics) đề cập tới “việc nghiên cứu các thống kê định lượng của việc xây dựng và sử dụng các tài nguyên thông tin, cấu trúc và công nghệ trên Web trên cơ sở của phương pháp bibliometric và informetrics”. Scientometrics bao gồm các bộ phận của Bibliometrics, Cybermetrics. Gần đây, một phương thức con của Scientometrics là Altmetrics được sử dụng và Altmetrics cũng là một bộ phận của Bibliometrics và Cybermetrics. Có thể thấy một quá trình tiến hóa Scientometrics đi từ chính nó tới việc sử dụng các thành phần của Bibliometric, Cybermetrics, Webometrics. Altmetrics được coi như lĩnh vực con mới xuất hiện của Scientometrics [Erdt16]. 2.2. Đo lường ảnh hưởng của cá nhân nhà khoa học và tạp chí khoa học Như được giới thiệu, số lượng các bài báo trong cùng hệ thống có tham chiếu tới một bài báo (chỉ số trích dẫn của bài báo đó) là một độ đo nguyên thủy đánh giá độ ảnh hưởng khoa học của một bài báo. Trên nền tảng tập hợp các bài báo cùng chỉ số trích dẫn của chúng, các hệ thống đưa ra các độ đo ảnh hưởng của cá nhân tác giả và tạp chí khoa học trong hệ thống. Dưới đây giới thiệu các độ đo liên quan phổ biến nhất. 135 136 PHÁT TRIỂN MÔ HÌNH TRUNG TÂM TRI THỨC SỐ CHO CÁC THƯ VIỆN VIỆT NAM 2.2.1. Họ độ đo h-index đo lường độ ảnh hưởng của cá nhân nhà khoa học Vào năm 2005, J. E Hirsch [Hirsch05] đưa ra một chỉ số khoa học của cá nhân nhà khoa học (được gọi là chỉ số h-index) được xác định như sau: “là số lớn nhất mà tồn tại công bố khoa học của nhà khoa học có số lượng trích dẫn không nhỏ thua". Độ đo h-index được hầu hết các hệ thống đo lường khoa học (chẳng hạn, Scopus, Google Scholar, Aminer) sử dụng để đánh giá công bố khoa học của cá nhân nhà khoa học. Hình 1. Các lĩnh vực đo lường thông tin và mối quan hệ của chúng [Holmberg16] Tuy nhiên, h-index cũng bộc lộ một số hạn chế, chẳng hạn, h-index kìm hãm ảnh hưởng lớn của các bài báo được trích dẫn nhiều do nó bị lệ thuộc vào lượng trích dẫn thấp của bài báo ở thứ tự h. Chính vì lý do đó, một họ các độ đo cải tiến (chẳng hạn, g-index, A-index, R-index, π-index, v.v.) được phát triển [Egghe10]. Một số hệ thống đo lường khoa học (chẳng hạn, Aminer) công bố cả h-index và g-index. Năm 2011, Google Scholar giới thiệu hai chỉ số i10 và i20, trong đó i10 (i20) chỉ dẫn số lượng bài báo của nhà khoa học có ít nhất 10 (20) tham chiếu. Ngoài ra, để cung cấp độ “tươi” công bố khoa học của cá nhân nhà khoa học, Google Scholar còn cung cấp các độ đo h-index, i10 của nhà khoa học trong năm năm gần nhất. ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI Việt Nam 2.2.2. Độ ảnh hưởng của tạp chí khoa học Hệ số ảnh hưởng của tạp chí (Journal Impact Factor: JIF, ngắn gọn là Impact Factor: IF) là chỉ số đo lường ảnh hưởng của tạp chí đó. Về phổ biến, IF trong một năm (ví dụ, năm y) được tính bằng số lượng trích dẫn trung bình nhận được trong năm được tính (năm y) của các bài báo được công bố trên tạp chí đó trong hai năm quá khứ kề cận (năm y-1 và y-2) [Larivière19, Waltman20]. IF không chỉ được sử dụng để tính độ ảnh hưởng của một tạp chí mà nó còn được sử dụng để đánh giá cá nhân nhà khoa học và tổ chức khoa học có bài báo được công bố trong tạp chí đó; gần đây, việc sử dụng IF vào các mục đích ngoài đánh giá tạp chí như vậy được coi là không hợp lý và bị phản đối. 3. TUYÊN BỐ DORA, KHUYẾN NGHỊ CỦA HỘI ĐỒNG GIÁM ĐỐC IEEE VÀ TUYÊN NGÔN LEIDEN Việc sử dụng chỉ số trích dẫn và các độ đo đo lường công bố khoa học, đặc biệt sử dụng hệ số ảnh hưởng của một tạp chí để đánh giá cá nhân nhà khoa học và tổ chức khoa học, có thể cung cấp một bức tranh sai lệch trong đo lường hoạt động công bố khoa học [Silva17]. R. Todeschini và A. Baccini [Todeschini16] nhận định rằng xuất hiện các mối nguy hiểm khi các bộ chỉ số đo lường công bố khoa học được xây dựng và sử dụng sai mục đích, vì vậy, nhu cầu hướng tới các bộ chỉ số an toàn đã trở nên rất cấp thiết. Nhiều nỗ lực của cộng đồng học thuật (nói chung) và cộng đồng nghiên cứu về đo lường công bố khoa học (nói riêng) đã được thực hiện nhằm hướng tới một phương pháp luận xây dựng các bộ chỉ số đo lường tốt nhất có thể. Tuyên bố San Francisco năm 2012 về đánh giá nghiên cứu (còn được gọi là Tuyên bố DORA1), Khuyến nghị của Hội đồng Giám đốc IEEE năm 2013 về sử dụng các chỉ số đo lường thư viện học để đánh giá công bố khoa học và Tuyên ngôn Leiden năm 2015 về đánh giá nghiên cứu [Hicks15] là ba nỗ lực đáng kể nhất. Hai nỗ lực đầu có thiên hướng về học thuật nhiều hơn còn Tuyên ngôn Leiden có thiên hướng về chính sách nhiều hơn [Todeschini16]. 1 https://www.aminer.org/ 137 138 PHÁT TRIỂN MÔ HÌNH TRUNG TÂM TRI THỨC SỐ CHO CÁC THƯ VIỆN VIỆT NAM Ba mục con tiếp theo giới thiệu nội dung cơ bản về ba nỗ lực này và mục con cuối cùng giới thiệu một số trao đổi liên quan. 3.1. Tuyên bố DORA về đo lường hiệu năng khoa học theo công bố khoa học Tuyên bố DORA (Declaration on Research Assessment, còn được gọi là Tuyên bố San Francisco 2012 do được công bố tại San Francisco vào năm 2012) đề cập tới ba chủ đề chính và có mười tám khuyến nghị xuyên qua ba chủ đề chính trong Tuyên bố. Ba chủ đề chính được quan tâm trong Tuyên bố DORA là: • Sự cần thiết cần loại bỏ việc sử dụng những độ đo dựa trên tạp chí, chẳng hạn như chỉ số ảnh hướng của tạp chí (Journal Impact Factors), trong việc xét duyệt tài trợ, xem xét bổ nhiệm hay thăng tiến; • Sự cần thiết cần đánh giá nghiên cứu khoa học dựa trên phẩm chất của chính nó thay vì dựa trên tạp chí mà nghiên cứu đó được công bố; • Sự cần thiết tận dụng các cơ hội do xuất bản trực tuyến tạo ra (chẳng hạn, không hạn chế số lượng từ, hình vẽ, tài liệu tham khảo trong bài báo), và có thể khám phá các độ đo mới để đo lường tầm quan trọng và ảnh hưởng. Mười tám khuyến nghị trong Tuyên bố DORA gồm một khuyến nghị chung, hai khuyến nghị đối với nhà tài trợ, hai khuyến nghị đối với tổ chức khoa học, năm khuyến nghị đối với các nhà xuất bản, bốn khuyến nghị đối với các tổ chức đưa ra các độ đo đánh giá công bố khoa học, bốn khuyến nghị đối với cá nhân nhà khoa học. 3.2. Khuyến nghị của Ủy ban IEEE về việc sử dụng các chỉ số đo lường thư viện học đánh giá công bố khoa học Theo Ủy ban IEEE, nhiều nhà khoa học và các tổ chức khoa học ở Hoa Kỳ, châu Âu và Úc bày tỏ ra những quan ngại về các đánh giá thuần túy theo các số liệu thống kê, nhấn mạnh về các tiềm năng không mong đợi và bất lợi hậu quả của những thực tiễn này. Họ đã đề xuất các khuyến nghị rõ ràng về việc sử dụng đúng các chỉ số như vậy, và mô tả các phương pháp hay nhất để sử dụng đánh giá đồng đẳng trong ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI Việt Nam đánh giá của các nhà khoa học và các dự án nghiên cứu. Một kết luận chung là sự thừa nhận sự cần thiết phải sử dụng nhiều chỉ số cũng như tầm quan trọng của việc đánh giá đồng nghiệp trong việc đánh giá chất lượng nghiên cứu, kết quả là khuyến nghị chỉ nên sử dụng các chỉ số về hiệu suất bibliometric như là một nhóm tập thể (chứ không phải cá nhân), và kết hợp với việc đánh giá đồng nghiệp theo một bộ quy tắc ứng xử được nêu rõ. IEEE, với vai trò hàng đầu là hiệp hội chuyên nghiệp lớn nhất thế giới trong việc thúc đẩy đổi mới công nghệ, tán thành các nguyên lý sau đây để tiến hành đánh giá thích hợp với các lĩnh vực Kỹ thuật, Khoa học Máy tính và Công nghệ Thông tin: • Việc sử dụng nhiều chỉ số bibliometric bổ sung về cơ bản là quan trọng để đưa ra một cái nhìn thích hợp, toàn diện và cân bằng của mỗi tạp chí trong không gian các ấn bản học thuật. IEEE gần đây đã thông qua Eigenfactor và ảnh hưởng bài báo (Article Influence) ngoài IF cho đánh giá nội bộ và cạnh tranh đối với các tạp chí của nó và hoan nghênh việc áp dụng các độ đo bổ sung phù hợp khác ở mức bài báo, trong khuôn khổ của cái gọi là altmetrics, một khi chúng đã được hợp lệ và công nhận bởi cộng đồng khoa học. • Số liệu dựa trên tạp chí không được thiết kế để đánh giá chất lượng của các bài báo cá nhân và do đó không được sử dụng làm chất lượng cho một bài báo hoặc để đánh giá cá nhân nhà khoa họ. Tất cả các chỉ số bibliometric của tạp chí đều thu được bằng cách tính trung bình nhiều bài báo, và không thể giả định rằng mọi bài báo xuất bản trong một tạp chí có ảnh hưởng cao, được xác định bởi bất kỳ số liệu báo chí nào, sẽ được trích dẫn rất cao. • Trong khi các tài liệu thư mục có thể được sử dụng làm nguồn cung cấp thông tin bổ sung cho việc đánh giá chất lượng trong một phạm vi nghiên cứu cụ thể, cách đánh giá chính về chất lượng khoa học của một dự án nghiên cứu hoặc của một nhà khoa học cá nhân nên được xem xét trực tiếp, nội dung khoa học là khía cạnh quan trọng nhất, cũng như kỳ vọng xuất bản trong khu vực, quy mô và thực tiễn của cộng đồng nghiên cứu. 139 140 PHÁT TRIỂN MÔ HÌNH TRUNG TÂM TRI THỨC SỐ CHO CÁC THƯ VIỆN VIỆT NAM 3.3. Tuyên ngôn Leiden về đo lường nghiên cứu năm 2015 Tuyên ngôn Leiden [Hicks15] đưa ra mười nguyên tắc trong đo lường khoa học như sau: • Đánh giá định lượng cần hỗ trợ đánh giá chất lượng, chuyên môn. • Đo lường hiệu năng phù hợp với sứ mạng nghiên cứu của tổ chức, nhóm hoặc nhà nghiên cứu. • Bảo vệ tính xuất sắc trong nghiên cứu liên quan đến địa phương. • Đảm bảo quy trình thu thập và phân tích dữ liệu là mở, minh bạch và đơn giản. • Cho phép đối tượng được đánh giá xác minh dữ liệu và phân tích. • Dành tài khoản biến thể theo lĩnh vực trong thực tiễn xuất bản và trích dẫn. • Đánh giá cơ bản cá nhân nhà nghiên cứu theo phán quyết chất lượng hồ sơ của họ. • Tránh sử dụng nhầm chỗ tính cụ thể và sai sót độ chính xác. • Nhận diện ảnh hưởng hệ thống của đánh giá và các chỉ số. • Thường xuyên kiểm tra các chỉ số và cập nhật chúng. 3.4. Một số luận điểm liên quan đến Tuyên bố DORA Cộng đồng các nhà nghiên cứu và các tổ chức ủng hộ Tuyên bố DORA ngày càng đông đảo [Larivière19, Waltman20], thậm chí có nhà khoa học còn nhận định rằng việc sử dụng chỉ số IF để đánh giá hiệu năng nghiên cứu cho một bài báo hoặc cho một cá nhân nhà khoa học như một tội trọng. Đồng thời, cũng có ý kiến cho rằng việc sử dụng chỉ số ảnh hưởng của tạp chí IF để đánh giá một bài báo không hẳn đã sai. Tuy không thể hiện một quan điểm ủng hộ hay chống lại việc sử dụng IF để đánh giá một bài báo nhưng L. Waltman và V.A. Traag [Waltman20] chỉ ra rằng các lập luận thống kê như lập luận về độ lệch của phân bố trích dẫn, lập luận ngụy biện sinh thái (the ecological fallacy argument) và các lập ĐO LƯỜNG CÔNG BỐ KHOA HỌC: BỐI CẢNH THẾ GIỚI VÀ LIÊN HỆ VỚI Việt Nam luận thống kê khác được sử dụng để bác bỏ vai trò của IF vào đánh giá một bài báo là không thuyết phục về mặt thống kê. Trong mọi trường hợp, việc đánh giá công bố khoa học là một công việc hết sức khó khăn cả về việc đưa ra các độ đo đánh giá lẫn phương pháp đo lường các độ đo đánh giá đó [Bai20, Bai20a, Bai20b, Cabanac20, Thelwall17, Thelwall20]. Cần tích hợp các chỉ dấu về các độ đo đơn chiều/đa chiều, cấu trúc/phi cấu trúc một cách phù hợp nhất có thể được vào đo lường ảnh hưởng của bài báo như thể hiện ở Hình 2 [Bai20]. 4. LIÊN HỆ VỚI VIỆT NAM 4.1. Thảo luận của một số nhà nghiên cứu người Việt về Tuyên bố DORA Tuyên bố DORA thu hút sự quan tâm của một số nhà nghiên cứu người Việt, trong đó đáng kể nhất là các bàn luận của các tác giả Ngô Đức Thế, Vũ Cao Đàm và một số tác giả người Việt khác. Nguyễn Đức Thế [The13] là nhà nghiên cứu người Việt có bài trao đổi đầu tiên về Tuyên bố DORA. Sau khi nêu lên ý nghĩa của việc sử dụng chỉ số ảnh hưởng của tạp chí trong đo lường công bố khoa học, tác giả giải thích thêm về hạn chế của việc làm đó, trong đó có hậu quả về các “tật xấu”, “mánh khóe” từ một bộ phận các nhà khoa học, cũng như sự khác biệt về chỉ số ảnh hưởng của các tạp chí trong các lĩnh vực nghiên cứu khác nhau. Tác giả nêu lên một vài hiện tượng lạm dụng chỉ số ảnh hưởng tạp chí trong hoạt động công bố khoa học tại Việt Nam. Dựa trên phân tích của một tác giả khác, Nguyễn Đức Thế chỉ ra mặt hạn chế trong việc thực hiện chính sách khuyến khích công bố trên các tạp chí ISI có chỉ số ảnh hưởng cao của Quỹ NAFOSTED. Nội dung bài viết cho thấy câu hỏi được tác giả chọn làm tiêu đề bài viết vẫn còn là một câu hỏi mở. Chúng tôi có một vài trao đổi về bàn luận của tác giả đối với các hạn chế từ chính sách khuyến khích công bố trên các tạp chí ISI có chỉ số ảnh hưởng cao của Quỹ NAFOSTED. Trước hết cần đồng thuận một quan điểm là “Mọi mô hình đều sai và chỉ có một vài mô hình dùng được” [Box76]. Chúng tôi cho rằng chính sách khuyến khích công bố 141