單一研究結果的局限性
一些新聞標題常常以“科學表明……”或“最近的一項研究證明……”開頭,表明對科學證據的重視。然而,克萊門等人表示,沒有得到足夠重視的一點是,任何研究都有權衡和局限性,當人們閱讀此類研究文章時,很難理解背景知識。顯然,當一系列專業性強、技術性很強的知識和信息傳播給政策制定者和相關受眾時,需要進行一定程度的轉化。在這個過程中,從事研究的學者可以用各種方式解釋自己的研究成果,但這種方式可能會造成更多的混亂。
例如,在一個司法案件中,經濟學家們對同一話題產生了分歧。在學生公平錄取組織訴哈佛大學案中,學生公平錄取組織指控哈佛大學持續歧視亞裔申請者。加州大學伯克利分校和杜克大學的兩位經濟學家在法庭上作證,在提供論據的過程中,使用了不同的方法得出了相互矛盾的結論,讓公眾和法官難以辨別真假。克萊曼表示,學術界也有不法之徒,一些研究結果可能是基于捏造數據的謊言。無論如何,個別研究結果很難被理解和解讀,讀者很難有能力去評價每一篇學術文章。在這種情況下,元研究成為學術界的必然選擇。
元研究是對研究本身的研究
澳大利亞昆士蘭科技大學公共衛生與社會工作學院教授阿德里安·巴內特在接受本報記者采訪時表示,元研究又稱元科學整合科學,即關于研究的研究、關于科學的科學。“我們能不能做更好的研究?當前的研究存在什么問題?”學者們可以通過元研究的方法回答這類反思性的問題。斯坦福大學元研究創新中心聯席主任約翰·帕特里克·約安尼迪斯表示,元研究是對研究本身的研究,包括研究方法、報告、可重復性和評價等。隨著科學研究的不斷發展,知識創新的機遇與科學研究的完整性和有效性的挑戰并存。元研究用跨學科的方法來研究、促進和捍衛科學的穩健性。
伊奧尼迪斯認為,雖然大多數科學家都有自己的專注領域,但某種程度上,每一位科學家都是元研究者,而元研究的鳥瞰視角與專注于特定領域的研究方法密不可分。根據伊奧尼迪斯的經驗,新研究的靈感往往來自于在特定領域進行研究時遇到的問題或錯誤。當該領域的元研究指出具體問題并提出建設性批評時,研究人員更容易改進和提升。科學仍然是人類進步的主要動力,但如何最好地資助科學活動和激勵高質量的科學研究仍然是一個需要回答的話題。放任研究實踐面臨的偶然性、偏見和方法論無知是一種非常低效的行為。因此,學術界需要元研究來避免浪費精力并進一步優化資源。元研究可以幫助傳播有效的研究實踐并摒棄無用的結果,大大提高有用科研成果的產出和轉化率。
元研究有很多優點
元研究考察的是知識產生的過程和規范,其對象是已經發表的研究成果。元研究在很多方面成為科學研究的關鍵。例如,賓夕法尼亞大學沃頓商學院教授亞當·格蘭特在《反思》一書中強調,在理想世界中,每一個洞察都將來自元研究。事實上,一些引用率高的文章中就包含元研究,因為這些文章整合了大量的文獻,更容易被學者引用。克萊門等人從以下三個方面闡述了元研究的優勢。
元研究是一種高層次的研究整合。科學進步的步伐緩慢而漸進,這種步伐是為了保證研究結果的相對穩定性。然而,其結果是任何研究都非常詳細和集中。面對這樣的研究,讀者如果不經過一定的語境變換,很難理解如此詳細的結果。元研究可以從更高的視角出發,盡量覆蓋很多領域,以確保文章能保持整體性和普遍性。 等人合作進行了一個元研究項目,系統地評估了 77 篇聲稱使用了工具變量統計技術的研究。該研究關注如何將工具變量納入科學研究以提高結果的穩健性,并采取了循序漸進的方式整合所有相關內容。這種廣泛的覆蓋面確保了研究結果及其影響的可識別性,這對于非學術領域的讀者來說非常重要。
元研究是平衡的。同行評審是期刊編輯邀請具有專業知識的學者對論文的學術質量進行評審并做出判斷的過程。這一過程有助于消除一些不精確或誤導性的研究,提高科研質量。但為了在同行評審中表現更好,研究人員會非常積極地展示即將發表的結果,導致許多研究被迫只展示一個特定的方面。在這種情況下,研究結果的獨特性和研究人員的自信比開放和謙遜等特質更受重視。元研究的優點之一是它具有高度的描述性,不專注于任何特定的領域。研究人員通常試圖對某個領域的現狀給出一個平衡的概述。例如,在他們對工具變量的回顧中,等人討論了該方法如何在各種情況下運作,并最終將結果呈現得盡可能詳細和具有代表性。這樣,元研究就成為實現科研平衡的最佳方法之一。
元研究具有反思性。科學家通常被稱為專家,然而,這個頭銜可能會掩蓋科學家也是人,有缺點、偏見和盲點。個人容易犯錯,因此科學之路往往充滿停頓和曲折。不幸的是,在報道科學家的發現時,這一事實可能會被忽略。因此,當元研究從更廣泛的視角比較各種研究方法和研究結果時,讀者可以通過關注科學共識,更容易識別各種研究中的不一致和弱點。元研究要求研究人員具有批判性整合科學,專注于揭示某一領域的不足之處。好的科學應該是反思性的,學術界不應該只關注單個專家學者的觀點或論點,而應該重視能夠推動科學進步的集體智慧。
擴大元研究的范圍
元研究是一個非常新的領域,是近幾十年才發展起來的。最初被元研究吸引,是因為他接觸到了英國牛津大學前醫學統計學教授Doug 等人關于元分析的研究成果。元分析是一種定量分析方法,它利用一些測量和統計分析技術,對已有的研究進行總結和評估。等人研究了衛生研究領域的研究人員如何呈現研究結果以及它們之間的差異,并制定了指南,以增強研究結果報告的透明度和準確性網校哪個好,提高已發表研究文獻的價值和可靠性。對元分析做出了開創性的認識,預見了研究整合的重要作用。目前,元研究主要在歐洲和美國受到關注。認為,這一重要的研究領域應該得到廣泛推廣。
此外,元研究應該涵蓋整個研究過程。 解釋稱,研究人員如何獲得資助、提出問題、開展研究、報告研究、同行評議研究以及如何將研究轉化為政策和實踐都應納入其中。“元”意味著研究人員需要退后一步以獲得更廣闊的視角,研究過程的任何部分都可以也應該被研究。作為一名統計學家, 最感興趣的領域是如何運用統計學。他發現現實中許多研究人員甚至不理解 P 值和樣本量計算等基本概念。因此,研究人員有必要放慢腳步,從元研究的角度研究統計方法,避免在之后的數據收集等其他任務上浪費時間。
當然,元研究也存在一些風險和不足。美國東康涅狄格州立大學心理學助理教授 -(-)表示,研究者存在的一些偏見可能會影響元研究的效度和信度。首先是出版偏見,比如統計檢驗意義越強的文章越容易被發表。其次是搜索偏見,使用不同的關鍵詞或策略搜索數據庫,會產生不同的搜索結果。最后是選擇偏見,研究者需要從大量的研究中篩選出所需要的數據,而不同研究數據的可信度和質量可能有所不同,這會影響元研究的權威性和科學性。這些問題都應該引起研究者的重視,以便更好地促進元研究的發展。