[從有氧無氧話題,談解讀論文的常見錯誤結論]
延續昨天說的,網路時代的可怕,在於沒有經過實證的東西可以被大家大量轉發跟效仿,一般人也沒有思考是否來自專業醫療人士的建議,更不懂得查證(話說沒幾個人懂得查證)。
但是更可怕的是。
其實 #連專家對某些文獻的解讀也有很多的問題,但民眾更不可能把文獻調出來看內容,也沒有能力判斷真偽,只要是專家的解讀就照單全收,這真的是很令人無奈的事。
以下列出許多專家在分析文章會犯的錯誤(這也是我每週去實驗室會議大家常拿出來討論的項目):
1️⃣只會看結論(conclusion),不去一一看研究的設計跟結果,尤其是附加的supplement詳細的內容。
就像我在「有氧運動掉肌肉?飲食背景才是重點!」
https://www.facebook.com/175089479960691/posts/942088663260765/?d=n這篇提到的,或是之前我討論「168斷食」相關研究的態度。
其實很多減重研究的結論只寫「體重下降幾%」,請問有去看「組成」嗎?我從來都不會只看結論就告訴民眾「這個減肥法可以減掉體重幾趴所以是好的減肥方式」,我一定會確認組成當中「肌肉是不是流失太多」「是不是脫水的假象」,才會給予建議。
2️⃣看結論就算了,還斷章取義,一言以蔽之的毛病
例如我常提到的,「正常人」跟「衰弱或肥胖」族群的本身的胰島素抗性跟身體條件不同,很多在正常人身上的結果,不一定適用異常的身體組成。連「男」「女」性在研究中都會出現諸多不同的結果,就是因為先天基因、荷爾蒙跟後天腸道微菌的組成都不一樣(例如:男性普遍微菌基因數量比較多,肌肉較多,沒有女性荷爾蒙週期的干擾,所以在減重效果上比女生快)
例如:延長空腹時間讓生長激素上升的現象, #只出現在正常人而肥胖者沒有,所以肥胖者168會比正常人容易掉肌肉,但現實中幾乎168的都是肥胖者。
例如:有些研究發現「老年人」做有氧短時間可以提高肌肉量,但在「年輕人」身上沒有這個現象。但是想從專家這裡獲取「增肌」建議的都是年輕人,他照著做有氧可能沒有半點肌肉肥大的效果。
例如:有氧在正常飲食的人身上不會掉肌肉,但在「低熱量飲食」的人身上掉慘了,但很多刻意去做有氧的人,她的目的可能是減肥所以搭配了低熱量,結果聽你說有氧不會掉肌肉還會增肌,她就跟著做。
3️⃣研究的族群母數(sample size)太小、時間太短
也就是所謂一個研究「質」與「量」的問題。
誠如我之前寫的有氧跟無氧的文章,裡面對於有氧運動對增肌的幫助有「特定的條件跟環境」,而且我舉例的都是「227人」這樣的數字,或是追蹤長達「三年」這樣的研究。
https://www.facebook.com/175089479960691/posts/942593756543589/?d=n
但是有些專家提出來的研究,都是只有10-20幾個人(連腸道菌這種高成本研究都最少要30人才有統計意義了),而且時間只有1-3個月,這樣短的時間跟小的人數,相較於夠長的觀察時間跟夠多的人數,統計上的結果其實較不客觀,現在的期刊太多,研究也是一堆,但如果 #每個質量差的研究結果都納入考量, #那只會被偏誤拉著走。
4️⃣研究中的各項偏誤(bias in research)
我以前在「實證醫學的陷阱—-研究結果的停看聽」
https://www.facebook.com/175089479960691/posts/384507029018934/?d=n
評論過「喝酒比運動還長壽」的研究,存在著各種偏誤,除了我文中討論的選擇性偏差(Selection bias)外,還有幾種包括:
✔️ #確認偏誤(Confirmation bias)
當人們 #本來就持有某種觀點時, #對這種觀點的感知和注意度會被放大,會 「選擇性」地回憶或收集關於它的事例。人們對於自己原本就相信的觀點會更容易接受,而把 #反面觀點擱置在一旁。
舉例來說,是附圖的研究是2015年的《Cell Metabolism》跟 2018年的 《Cell》,兩個研究者做出了完全相反的結論。
2015年的作者發現不健康的飲食會破壞腸道菌、讓腸道免疫相關的Th17細胞數量下降,導致腸道失去正常防禦能力,連帶造成系統性的肥胖跟發炎。
但2018年的作者發現吃「高脂肪生酮飲食」會讓雙歧桿菌的數量下降,讓Th17數量下降(以上都跟2015年的觀察一致),但他的結論卻是「這樣可以讓發炎下降,是好事」,整篇論文他引用了大量Th17下降有助於哪些疾病改善的文獻,卻在reference中完全沒有引用2015年這篇(太詭異!!根本刻意忽略),也沒有提到Th17對於腸道的保護重要性,可想而知,研究者一開始就認定「高脂肪生酮對身體有益」,選擇忽略好菌下降這些矛盾的發現。
即使是這麼大的期刊,也存在著這樣的確認偏誤,甚至是所謂的✔️ #觀察者期望效應(Observer-Expectancy Effect)——研究者有時可能會期望出現某種結果,他們無意識地操縱了試驗過程,或者 #錯誤地解釋實驗結果,導致 #研究結果嚴重歪曲。
這也就是為何,對於研究的結論照單全收直接告訴民眾, #是非常危險的事,你可能自己也犯了確認偏誤,或是 ✔️ #虛假一致性偏差(False consensus effect)——人們很容易認為其他人跟自己有相同的想法,從而高估這些觀點的普遍適用性。
以上,在知識越來越普及的時代,用功的人人都可能變成專家,但是身為受過 #實證醫學訓練 的專業人員,麻煩在解讀論文跟傳遞訊息時,要在更謹慎小心一點。
#實證醫學的陷阱
同時也有1部Youtube影片,追蹤數超過676萬的網紅Fischer's-フィッシャーズ-,也在其Youtube影片中提到,Fischer'sのリーダー、シルクロードの部屋へようこそ。 暇な時間、なんとなくな、自己満足な、そんなコンテンツです。 お客様、動画が見れるお暇な時間を有意義にお過ごしくださいませ。 今回は最近めっきり見なくなってしまった スポーツドリンクのenergen(エネルゲン)をレビューしました。 味だ...
effect size意義 在 Yim Mau-Kun Studio 冉茂芹畫室 Facebook 的最佳解答
這是早期剛到香港時畫的一幅外銷畫。 剛從內地到香港時,身無分文,必需馬上投入工作。 倒是好,香港在七十年代發展起一種外銷油畫的新行業,大陸初到香港的畫家、美院畢業生接觸到的第一種工作幾乎就是這種「外銷畫」。 這種畫其實細分畫照片人像、臨摹歐洲古典油畫(印刷品)或是一個樣版大量複製的油畫。 前種單價當然高些,但費工費時,尤其對於初次接觸的人實在是一大考驗! 僅憑一張印刷品,要將它放大到十多倍並畫成油畫。 很多人無法達到品質要求,只好去畫量產的「行貨」。
This is one of first paintings I did after moving to Hong Kong from Mainland China in 1980. With nothing more than the clothes on my back when I moved to Hong Kong, I had to find a job right away. Fortunately, the trade in export oil paintings had emerged in Hong Kong during the 1970s. For nearly all painters and fine arts college graduates from China, this type of "export painting" became their first job in Hong Kong. Export paintings were further broken down into photo portraits, reproductions of European classical oil paintings (from prints), and mass-produced replicas of oil paintings. The former naturally commanded a higher unit price but took time and effort. To magnify a single print more than ten times in size and turn it into an oil painting was a tremendous challenge to those without any previous experience. Many people couldn't meet the quality requirements and so had no choice but to paint mass-produced "standard goods" instead.
這幅畫畫名是叫COQUETRY賣弄風情之意吧,畫工精緻、人物生動,也不知是歐洲哪位大師之作? 我用幻燈投影機放大輪廓,足不出戶地畫了一個星期。
This painting is called Coquetry, meaning to act in a flirtatious manner. The intricate brushwork and lifelike character were surely the work of some great European master. I used a projector to magnify the outlines then painted away at home for a whole week.
這一段的工作對我的繪畫藝術也有正面的意義,主要是對油畫肖像的描繪細節更留意。 這些磨練讓我在以後的寫生肖像中能更快地建立起了刻劃各種人物的能力和自信,但是,我也提醒自己,不要落入庸俗的「照片真實」之中。
This period did have a positive effect on my painting career because I paid more attention to the details in oil portraits. The experience gave me the skill and confidence to quickly depict all kinds of characters in live portraits later on. I did, however, remind myself not to fall into the trap of mundane photo-realism.
這種生命經歷既無可避免亦不可重來,善用經歷並將其化為自身的智慧才能把可能是愁苦的境況轉換成快樂之事。
Such experiences in life are unavoidable, nor can they be repeated. But if you turn that experience into your own skills and wisdom then you can find happiness in even the most depressing of circumstances.
effect size意義 在 新思惟國際 Facebook 的最讚貼文
想上 meta-analysis 課程已經有一段時間了。尤其是做 background research 時,常看到 meta-analysis 的文章,如何判斷是否信服於這類分析的結論,變成一個越來越常出現的問題。
為了寫計劃或其他原因,總是需要查閱大量文獻,既然背景資料已經查閱,文章也都躺在電腦裡,如果有能力整理成一個有說服力的結論,也確實比質性描述來得有意義許多。
想做 meta-analysis,卻因為完全不熟悉統計方法、缺乏適當工具,完全找不到下手的方向。
😨相關書籍竟然建議我用 Excel 算 effect size
我上了博客來尋找 meta-analysis 相關的書籍。拜二十四小時隔日取貨全年無休完全不受一例一休影響 之賜,書隔天就來了。
結果勉強讀完前言,進入滿佈公式的實例說明部份,在可怕的根號、log 和 sigma 中間,還穿插著在 CMA 程式如何按鍵、如何選擇的說明,當你好不容易讀懂這一段之後,關鍵部份如何換算 effect size,作者反而爽快的建議你使用他老人家附在光碟片裡的 Excel,用他已經寫在裡面的工式換算真進 CMA (what the……) 然後我就快轉了。然後不知不覺就看到附錄了……嗯。
我想,這本書的作者應該很懂 meta-analysis,但是不太懂 CMA 吧。
📈超清晰 step by step 流程,讓你無痛完成研究圖表。
所以我想大家應該可以理解當拿到數十 mb 的課程檔案及那本薄如蟬翼的課程手冊時,有多麼感動。
檔案裡無論是 PRISMA 流程圖或是 Excel 表格,都是為了實務設計,把資料整理好填入就能直接送入 CMA 運算,不用靠作者設好的函式算出無法驗證的結果。對於 CMA 每一步驟出現的畫面也是詳加說明,一句廢話也沒有。
果然實作時間開始前,校長耳提面命「千萬不要跳步驟」是有深意的,新思惟團隊果然如所承諾的,在上課前幫我們把所有應該跳過的坑、撞過的牆,全試過一篇,再把它濃縮成這一小本手冊印給大家參考。正如校長在手冊裡說的,這就是課程的價值,不用修圖修到天荒地老,新思惟果然是,行!
新思惟,知道你需要什麼。面向新手、協助起步的高品質工作坊,讓你的能力拼圖,加上重要的一大塊!
《統合分析工作坊》
時間|2017 年 8 月 6 日(日)9:00a – 4:30p
地點|台北捷運公館站旁 集思台大會議中心 尼采廳
報名網址|http://meta-analysis.innovarad.tw/event/
effect size意義 在 Fischer's-フィッシャーズ- Youtube 的最佳貼文
Fischer'sのリーダー、シルクロードの部屋へようこそ。
暇な時間、なんとなくな、自己満足な、そんなコンテンツです。
お客様、動画が見れるお暇な時間を有意義にお過ごしくださいませ。
今回は最近めっきり見なくなってしまった
スポーツドリンクのenergen(エネルゲン)をレビューしました。
味だけでなく効果も詳しく説明させてもらいました!
最初の厨二じみたところはお忘れくださいww
Fischer'sとは
「出来そうで出来なさそう」なことを実行し、結果を報告する。
そんなスリル満点な野生児が集結したのが、フィッシャーズです。
ブログ・メンバー紹介:http://fischers.web.fc2.com/
Twitter:https://twitter.com/FischersHome