심리학자들은 새로운 분석에 따르면,”소폭 중요한”결과를보고 사랑

스크린 샷 2019-03-12 에서 09.07.56.png

매튜 워렌

심리학자들에게 가장 큰 유혹 중 하나는”약간 중요한”연구 결과를보고하는 것입니다. 통계적 테스트가 중요성에 도달 할 정도로 가까운 값을 뱉어 낼 때 많은 사람들이 스스로를 도울 수 없습니다.

이제 심리 과학에 대한 연구는 이러한 관행이 얼마나 널리 퍼져 있는지를 보여주었습니다. 안톤 올슨-콜린과 틸부르크 대학의 동료들은 30 년간의 심리학 논문을 분석 한 결과,0.05 와 0.1 사이의 피 값의 무려 40%,즉 기존의 임계 값에 따라 중요하지 않은 값이 실험자들에 의해”소폭 중요”하다고 설명되었습니다.

심리학자들은 피-값을 사용하여 결과가 통계적으로 유의한지 여부를 측정합니다. 그만큼 피-값은”귀무 가설”이 참인 경우 현재 결과(및 기타 극단적 인 결과)가 얻어 질 가능성에 대한 추정치를 제공합니다. (귀무 가설은 연구 대상 그룹간에 효과가 없거나 차이가 없다는 것입니다). 특정 임계 값(보통 0.05 미만)에서 심리학자들은 귀무 가설을 무시하고 그 결과가 아마도 진정한 효과를 나타낼 것이라고 추론합니다.

그러나 때때로 연구자들은 그 임계 값을 다소 유연하게 취급합니다. 만약 피-값이 0.05 보다 조금 크다면,그들은 종종 결과를”약간 중요”하다고 보고하며,이는 여전히 어떤 종류의 실제 효과가 있을 수 있음을 암시한다.

피-값이 이런 식으로 보고되는 빈도를 결정하기 위해,올슨-콜린의 팀은 1985 년부터 2016 년까지 미국 심리학 협회가 발표한 저널에 0.05 와 0.1 사이의 값이 기술된 방식을 조사했다.

팀은 44,200 개의 논문을 통과하고 0.05 와 0.1 사이의 42,504 피 값을 추출하도록 코드를 프로그래밍했습니다. 그런 다음”여백”또는”접근법”을 시작하는 단어에 대한 피-값 직전과 직후에 텍스트를 검색했으며,이는 결과가 소폭 중요한(또는”접근”의미)로보고되었음을 나타낼 수 있습니다.

연구자들은 그들이 확인한 중요하지 않은 피-값의 거의 40%가 소폭 유의미한 것으로 보고되었다는 것을 발견했다. 9 가지 주요 심리학 분야 중,이 관행은 조직 심리학에서 가장 흔했으며,45%의 가치가 소폭 중요하다고 간주되었으며,임상 심리학에서는 가장 흔하지 않았으며,그 숫자는 30%로 떨어졌습니다.

이런 종류의 보고는 잘못된 긍정(널 결과를 진정한 효과로 잘못 배포)과 덜 재현 가능한 연구에 기여할 가능성이 있기 때문에 문제라고 올슨-콜렌 틴과 그의 동료들은 말한다. “일종의 중요한”결과를 호출함으로써,심리학자들은 본질적으로 사실 이후에 중요한 것으로 간주되는 것에 대한 규칙을 변경하고 따라서”진정한”효과를 나타낼 가능성이 적은 결과를 강조하고 있습니다.

그럼에도 불구하고,좋은 소식이 있었다:새로운 분석에 의해 덮여 30 년의 기간에 걸쳐,”소폭 중요한”습관은 아홉 심리적 하위 분야의 대부분에서 덜 일반적이 될 것으로 보인다. “심리학 전반의 하락 추세는 연구자들 사이에서 증가하는 인식을 반영 할 수 있습니다.05 에.10 은 널에 대한 약한 증거를 나타냅니다. 그것은 또한 편집자가 더 엄격 해지는 결과 일 수 있습니다.

결정적으로,새로운 연구는”한계”또는”접근”중요성으로 설명 된 피-값만을 설명했습니다. 그러나 연구자들은 그들이 사용하는 언어로 훨씬 더 창의적 일 수 있습니다. 2013 년 통계학자 매튜 한킨스 는 심리학 과학자들이 문헌에서 중요하지는 않지만 낮은 가치를 묘사하기 위해 사용한 수백 개의 다른 문구 목록을 작성했으며,”통상적 인 수준의 중요성을 유혹”에서”통계적 유의성의 한계를 매우 가깝게 닦았다”. 과학자들이 자신의 연구에서 긍정적 인 결과를 짜내려고하는보다 창조적 인 방법을 놓침으로써이 새로운 연구가 문제의 정도를 과소 평가할 가능성이 있습니다.2015 년 11 월 15 일(토)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)~2015 년 12 월 15 일(일)

답글 남기기

이메일 주소는 공개되지 않습니다.