[RESEARCH SERIES] 8 lỗi thường gặp khi viết tổng quan tài liệu nghiên cứu và cách khắc phục
Bài viết “8 common problems with literature reviews and how to fix them” của tác giả Neal Haddaway, đăng trên trang tin The London school of Economics and Political Sciences vừa được Tạp chí Giáo dục lược dịch sang tiếng việt, chị xin phép đăng tải cho Schofan nhà mình cùng tham khảo. Nội dung của bài trình bày 8 lỗi thường gặp trong các bài tổng quan tài liệu, kèm theo đó là những ví dụ cụ thể cho từng vấn đề, đồng thời đưa ra các giải pháp thực tế để giảm thiểu những lỗi đó. Bài viết rất hữu ích, Schofan cùng đón đọc nhé <3
----------------------
Tổng quan tài liệu là một phần không thể thiếu trong quá trình triển khai một nghiên cứu hay truyền thông khoa học. Trong khi các bài tổng quan có hệ thống (systematic reviews) được coi là tiêu chuẩn cao nhất của phương pháp tổng hợp tài liệu, vẫn còn nhiều tác giả viết tổng quan tài liệu không đạt được những tiêu chuẩn này và do đó, có thể dẫn đến những kết luận sai lệch, thiếu độ chính xác và tin cậy về mặt khoa học. Bởi vậy, với mục tiêu hạn chế những lỗi thường gặp, Neal Haddaway đã đưa ra giải pháp cho từng vấn đề dưới đây:
1. Thiếu sự liên hệ – việc thiếu sự tham gia (hoặc tham gia hạn chế) của các bên liên quan đến vấn đề nghiên cứu có thể dẫn đến một bài tổng quan tài liệu có ít giá trị sử dụng thực tế đối với các nhà hoạch định chính sách
---> Giải pháp: Cần chỉ ra các bên liên quan đến vấn đề nghiên cứu, lên kế hoạch và liên hệ với họ để xin ý kiến và sự tham gia của họ, nhưng cũng cần chú ý đến vấn đề ngân sách của nghiên cứu - cần làm sao để tiết kiệm nhất.
2. Nhiệm vụ kỳ bí – là những bài tổng quan tài liệu không công bố phương pháp nghiên cứu theo một phương thức công khai mà người khác có thể kiểm chứng được, do đó mục tiêu và phạm vi nghiên cứu có thể bị thay đổi ngoài ý muốn của tác giả
---> Giải pháp: Cần thiết kế cẩn thận và công bố các phương pháp dự định sử dụng trong việc tìm kiếm, chọn lọc, trích xuất dữ liệu, thẩm định và tổng hợp một cách chi tiết. Tận dụng các nguồn lực hiện có để hỗ trợ bạn (ví dụ: Sáng kiến Hợp tác vì các Bằng chứng Môi trường).
3. Sự thiếu minh bạch / khả năng nhân rộng trong các phương pháp tổng hợp, đồng nghĩa với việc thao tác tổng quan tài liệu đó không thể được thực hiện lại bởi một người khác - một nguyên lý trọng tâm của phương pháp khoa học!
---> Giải pháp: Cần đảm bảo tính rõ ràng và sử dụng các hướng dẫn và tiêu chuẩn chất lượng cao để tiến hành đánh giá, tổng quan (chẳng hạn như Hướng dẫn CEE) và báo cáo (PRISMA hoặc ROSES)
4. Sự thiên lệch trong quá trình lựa chọn (trong đó các nghiên cứu được đưa vào bài tổng quan không có tính đại diện cho các bằng chứng cơ sở mà nhà nghiên cứu dự định sử dụng) và sự thiếu toàn diện (một phương pháp tìm kiếm không phù hợp) có thể khiến bài tổng quan tài liệu đem đến những bằng chứng sai cho vấn đề nghiên cứu.
---> Giải pháp: Thiết kế chiến lược tìm kiếm dữ liệu một cách cẩn thận với một chuyên gia về thông tin; thử nghiệm các chiến lược tìm kiếm (dựa trên danh sách điểm chuẩn); sử dụng nhiều cơ sở dữ liệu thư mục / ngôn ngữ / nguồn tài liệu xám (grey literature); xuất bản các phương pháp tìm kiếm sử dụng các giao thức có thể xác minh được cho quá trình phản biện đồng nghiệp.
5. Việc loại trừ (không xem xét) các tài liệu xám và không kiểm tra bằng chứng về sự thiên lệch có thể dẫn đến kết luận không chính xác hoặc gây hiểu lầm.
---> Giải pháp: Cần tìm kiếm bổ sung tài liệu xám, bao gồm cả báo cáo nghiên cứu và tổ chức các 'ngăn kéo' (những dữ liệu nghiên cứu học thuật chưa được xuất bản). Kiểm tra bằng chứng có thể có về sự thiên lệch trước khi xuất bản.
6. Các bài tổng quan tài liệu truyền thống thường thiếu phần nhận xét, phê bình về tính hợp lệ của các nghiên cứu được đề cập đến, coi tất cả các bằng chứng đều có độ hiệu lực như nhau - chúng ta luôn biết rằng một số nghiên cứu có độ hiệu lực hơn các nghiên cứu còn lại và cần phải đề cập đến vấn đề này trong bài tổng quan.
---> Giải pháp: Lập kế hoạch cẩn thận và thử nghiệm công cụ thẩm định kĩ lưỡng trước khi bắt đầu quy trình tổng quan tài liệu đầy đủ, học hỏi từ các công cụ đánh giá hiện có.
7. Tổng hợp tài liệu một cách không phù hợp (ví dụ: sử dụng phương pháp thu thập ý kiến bình chọn và những phương pháp thống kê không tin cậy khác) có thể làm phủ nhận tất cả các nỗ lực tổng quan “có hệ thống” trước đó. Việc đếm phiếu bình chọn (hoặc kiểm đếm các nghiên cứu dựa trên ý nghĩa thống kê của chúng) bỏ qua tính hợp lệ của nghiên cứu và độ lớn của các quy mô ảnh hưởng.
---> Giải pháp: Lựa chọn phương pháp tổng hợp một cách cẩn thận dựa trên dữ liệu đã phân tích. Không bao giờ sử dụng phương pháp đếm phiếu bình chọn thay cho phân tích tổng hợp. Các phương pháp tổng hợp tự sự cần được sử dụng để tóm tắt và nêu cơ sở dẫn chứng.
- Source: https://bit.ly/3BWRmsG
- Source: https://bit.ly/3BVVglg
❤️Like và share nếu các em thấy thông tin có ích nhé ❤️
#HannahEd #duhoc #hocbong #sanhocbong #scholarshipforVietnamesestudent
「london school of economics reviews」的推薦目錄:
london school of economics reviews 在 Sam Tsang 曾思瀚 Facebook 的最讚貼文
The very fact it's called "Third World" says a lot, and then they publish an article on the "benefit" of colonialism using selective data. I guess that didn't take long...You can't make this stuff up. Occidental hegemony corrected?
19 September 2017
LETTER OF RESIGNATION FROM MEMBERS OF THE EDITORIAL BOARD OF THIRD WORLD QUARTERLY
Dear Shahid Qadir, Taylor & Francis, Colleagues and Interested Public,
We are deeply disappointed by the unacceptable process around the publication of Bruce Gilley’s Viewpoint essay, “The case for colonialism,” which was published in Third World Quarterly without any consultation with the Editorial Board. As International Editorial Board Members, we were told in an email on 15 September from Shahid Qadir that this piece was put through the required double-blind peer review process. We asked for these reviews to be sent to the Editorial Board, and they were not.
We have now been informed by our colleagues who reviewed the piece for a Special Issue that they rejected it as unfit to send to additional peer review, and they stated in an email to us:
“We would question the editorial process that has led to the publication of the piece. It was initially offered to guest editors Dr John Narayan and Dr Leon Sealey-Huggins as an article to consider for inclusion in the aforementioned special issue. The guest editors relayed their unease with the article and rejected considering the piece for peer review. It has subsequently come to light that the article was later reviewed as a standard article and rejected by at least one reviewer and then repackaged as an opinion piece.”—email from Dr John Narayan (Birmingham City University)
Dr Leon Sealey-Huggins (Warwick University)
Dr Kehinde Andrews (Birmingham City University)
Dr Eugene Nulman (Birmingham City University)
Dr Goldie Osuri (University of Warwick)
Dr Lucia Pradella (King’s College London)
Professor Vijay Prashad (Trinity College)
Dr Sahar Rad (SOAS, University of London)
Professor Satnam Virdee (University of Glasgow)
Dr Helen Yaffe (London School of Economics)
We have also been informed through correspondence between Prof Ilan Kapoor and our colleague who was the peer-reviewer, after the piece was rejected by the Special Issue editors, that her review also rejected the Viewpoint. Thus, the fact is established that this did not pass the peer-review when we have documentation that it was rejected by three peer reviewers.
As the Viewpoint did not pass the double-blind peer review as claimed by the editor in the statement he issued in the name of the journal, it must be retracted and a new statement issued.
The Viewpoint fails criterion #1 of the Committee on Publication Ethics COPE guidelines that state: “Journal editors should consider retracting a publication if: they have clear evidence that the findings are unreliable, either as a result of misconduct (e.g. data fabrication) or honest error (e.g. miscalculation or experimental error).” https://publicationethics.org/…/Retractions_COPE_gline_fina…
These COPE guidelines are Taylor & Francis’s reference documents for ethics of retracting a publication the editorial board was told in an email on 18 September by Shahid Qadir.
Thus, Bruce Gilley’s Viewpoint essay, “The case for colonialism” must be retracted, as it fails to provide reliable findings, as demonstrated by its failure in the double-blind peer review process.
We all subscribe to the principle of freedom of speech and the value of provocation in order to generate critical debate. However, this cannot be done by means of a piece that fails to meet academic standards of rigour and balance by ignoring all manner of violence, exploitation and harm perpetrated in the name of colonialism (and imperialism) and that causes offence and hurt and thereby clearly violates that very principle of free speech.
The Editor of TWQ has issued a public statement without any consultation with the Editorial Board that is not truthful about the process of this peer-review, and thus, as we fully disagree with both the academic content of the Viewpoint and the response issued in the name of the journal, we are forced to resign immediately from the Editorial Board of Third World Quarterly.
As scholars, we remain ever-committed to the ideals that this journal has stood for over the past 40 years, and we would consider serving on an Editorial Board under different editorial arrangements.
Sincerely,
Ilan Kapoor (York University, Canada)
Stefano Ponte (Copenhagen Business School, Denmark + Duke University, US)
Lisa Ann Richey(Roskilde University, Denmark + Duke University, US)
Mahmood Mamdani (Makerere Institute of Social Research, Uganda + Columbia University, US)
Asef Bayat (University of Illinois, Urbana-Champaign, US)
Naila Kabeer (London School of Economics and Political Science, UK)
Katie Willis (Royal Holloway University of London, UK)
David Simon (Chalmers Univ. of Technology, Sweden + Royal Holloway Univ. of London, UK)
Walden Bello (State University of New York at Binghamton, US)
Giles Mohan (The Open University, UK)
Ayesha Jalal (Tufts University, US)
Uma Kothari (University of Manchester, UK)
Vijay Prashad (Trinity College, US)
Klaus John Dodds (Royal Holloway University of London, UK)
Richard Falk (Princeton University, US)