니시우치 히로무, 「빅데이터를 지배하는 통계의 힘」- 7장. 에비던스 활용하기(시스템리뷰와 메타분석)

7장. 에비던스 활용하기

 

계통적 리뷰 systematic review 와 메타 분석 meta analysis

 

리뷰는 복수의 연구를 정리해 결국 어떤 해석이 가능한지를 밝히는 일을 말한다. 해당 영역에서 지금까지 누가 어떤 연구를 했으며 그 결과 어떤 내용이 밝혀졌는지 알고 있다. 그런 정보를 정리 소개하고 아울러 자신의 의견을 덧붙이는 것은 학자가 어떤 글을 쓰더라도 해야할 일이다. 하지만 리뷰 중에서 자신의 의견을 뒷받침하는데 유리한 결과만을 뽑아쓰는 것도 가능하다. 이처럼 '자기 의견에 유리하게 이용만 하는 리뷰'를 요즘은 '서술적 리뷰'라고 부르며 주관성 유무를 깊게 살피고 있다. 객관성이 담긴 계통적 리뷰가 중요시되는 이유이다.

 

계통적 리뷰는 미리 '검토할 논문의 조건'을 결정한 상태에서 과거에 공표된 여러 분야의 모든 문헌으로부터 조건과 합치하는 것을 골라낸다. 방금 전의 예로 말하면, '미성년, 범죄, 비디오 게임'이라는 단어를 포함하고 있고 소년범죄와 비디오 게임의 관련성을 통계해석한 모든 논문을 수집, 분석한 다음 마지막으로 어떤 내용이 밝혀졌는지 결론을 정리한다. 이런 식으로 해야만 주관 등이 거의 포함되지 않은 '현 시점에서의 최선의 대답'이 될 수 있다.

 

메타 분석은 이런 계통적 리뷰 중에서 복수의 임의화 비교 실험이나 관찰 연구를 통해 보고된 통계 해석 결과를 한층 더 심도있게 정리하는 작업을 말한다.

 

계통적 리뷰와 메타 분석을 정점에 둔 에비던스의 체계는 다음과 같이 정리된다. 전문가의 의견이나 기초실험보다는 관찰연구가, 그리고 임의화 비교실험이 더욱 신뢰 가능한 에비던스임을 알 수 있다. 따라서 복수의 임의화 비교실험이나 관찰 연구를 베타 분석해 얻어진 결과는 현재 최선의 대답이라 할 수 있다.

 

 

 

 

 

 

※ 대표적인 논문데이터베이스

이름	URL	분야
ERIC - Education Resources Information Center	eric.ed.gov‎	교육학
PsycINFO - American Psychological Association	www.apa.org/psycinfo‎	심리학
AEAweb: American Economic Association: EconLit	www.aeaweb.org/econlit‎	경제학
PubMed - NCBI	www.ncbi.nlm.nih.gov/pubmed‎	의학
JSTOR	www.jstor.org‎	종합

 

 

 

 

※ 계통적 리뷰 사이트

 

http://www.cochrane.org/

 

 

http://www.campbellcollaboration.org

 

 

What Works Clearinghouse www.whatworks.ed.gov/

 

 

 

 

빅데이터를 지배하는 통계의 힘 국내도서 저자 : 니시우치 히로무 / 신현호역 출판 : 비전코리아 2013.07.30 상세보기