통계학16 가설검증과 2종오류 지난글 가설검증과 1종 오류 1. 들어가며 가설을 검증한다는 말은 검증하는 사람(분석가)이 명확한 근거를 갖고 있거나 정답을 알고 있다는 뉘앙스를 가진다. 그러나 검증이라는 표현보다는 결단을 내린다는 말이 사실에 더 diseny.tistory.com 1. 들어가며 지난 글에서 가설검증과 1종오류에 대해 다뤘다. 이제 2종 오류에 대해 생각해보자. 1종 오류는 귀무가설이 맞는데도 귀무가설을 기각하는 오류다. 반변, 2종 오류는 귀무가설이 틀렸는데 귀무가설을 기각하지 않는 오류다. 2. 유치한 외우기 1종오류와 2종오류는 설명을 들었을 때는 어렵지 않게 이해가 되는데 나중에 기억하려면 조금 헷갈린다. 그래서 유치하지만 아래와 같은 단어로 외워 두면 좋다. 더 깊은 이해는 핵심 개념의 탄탄한 암기가 바탕이 되.. 2022. 3. 6. 분산으로 평균차이 검증하기(분산분석) 1. 들어가며 두 표본의 평균 차이를 검증하는 T분석 방법을 배운 뒤, 세 집단(표본) 이상을 분석하려면 분산분석(ANOVA)을 해야 한다고 배운다. 왜 평균의 차이를 분산으로 분석하는거지? 라는 의문이 들고, 또한 분산분석은 적어도 하나의 집단 평균이 다른 집단과 다르다는 것을 검증할 뿐이라는 설명도 아리송하다. 이와 같은 의문을 수식을 사용하지 않고 직관적으로 이해해 보자. 2. 총분산의 분해 분산분석을 이해하는 첫 번째 단계는 총분산의 분해다. 총분산이란 집단을 구분하지 않고 모든 표본 데이터에서 구한 분산이다. 총분산은 다음과 같이 분해된다. 총분산 = 집단내 분산 + 집단간 분산 표본 데이터를 집단별로 나누었을 때, 총분산은 집단내에서의 분산과 집단끼리의 분산으로 분리될 수 있다. 결론적으로 방.. 2022. 3. 2. 가설검증과 1종 오류 1. 들어가며가설을 검증한다는 말은 검증하는 사람(분석가)이 명확한 근거를 갖고 있거나 정답을 알고 있다는 뉘앙스를 가진다. 그러나 검증이라는 표현보다는 결단을 내린다는 말이 사실에 더 가깝다. 판단에 대한 기준을 갖고 있긴 하지만 그 기준 자체가 절대적인 것은 아니며 그렇기 때문에 오류 가능성이 필연적으로 존재할 수 밖에 없다. 2. 통계량통계량은 표본 데이터를 계산해서 얻어 낸 값이다. 표본에서 구한 평균, 분산, 표준편차 이런 것들도 모두 통계량이지만 일반적으로 카이제곱값, T값, F값 등을 의미한다. 무엇이 되었든 통계량은 귀무가설이 맞다는 가정하에 생성된 확률 분포를 기반으로 특정한 값 이상을 얻을 확률을 가진다. 3. 귀무가설과 확률분포과 같이 귀무가설이 맞다는 가정하에 그려진 T.. 2022. 2. 24. 다중공선성(Multicollinearity)의 의미와 판별법 관련글 선형회귀분석 밑바닥부터 이해하기 관련글 상관관계와 상관계수 상관관계와 상관계수 1. 들어가며 연속형 변수 x, y의 관계는 상관관계(correlation) 분석을 통해 2가지 사실을 알 수 있다. 관계의 방향 관계의 강도 보통 관계의 방향은 diseny.tistory.com 1. 기본개념 다중회귀분석은 점검해야 할 가정들이 꽤 많다. 그 중 하나가 다중공선성이다. 처음 학습하는 사람들은 모형에 투입되는 설명 변수간에 큰 상관 관계가 존재하면 회귀 모형 추정이 불안정해지므로 설명 변수의 분산팽창지수(VIF) 값 >10 이면 문제가 될 수 있으니 해당 변수를 모형에서 배제하라고 배운다. 다중공선성의 의미에 대해 조금 쉽게 다가가 보자. 2. 개념 하나씩 짚어 보기 (1) 모형을 만든다는 것의 의미 반.. 2022. 2. 16. 효과 크기(Effect Size)의 의미와 필요성 1. 들어가며 기초 추론 통계 방법 중, 두 집단의 평균차이 검증(T-test)이 있다. 두 표본의 평균 차이가 모집단 차원에서도 있는 것인지 아니면 표본에서만 우연히 차이가 있는지 검증하는 방법이다. 많이 알려진 사실이지만 이 검증 방법은 원리상 표본이 충분히 크면 대부분 통계적으로 유의하다고 나온다. 그래서 통계적 유의성 뿐만 아니라 효과크기(Effect Size) 값도 함께 제시되는 것이 좋다. 관련글 t-test 밑바닥부터 이해하기 ※ 관련글 확률, 확률변수 그리고 확률분포 1. 들어가며 통계학은 기술통계와 추론통계로 구분되는데, 기술통계와 추론통계를 연결해주는 것이 확률분포이다. 그런데 확률분포를 이해하기 위해 diseny.tistory.com 2. 효과크기란? 효과 크기 값은 Cohen's D.. 2022. 2. 14. 자유도(Degree of Freedom)에서 자유로워 지기 1. 들어가며 자유도는 통계학을 공부하다 보면 아마 제일 처음 만나는 알쏭달쏭한 개념이다. 최초로 등장하는 시기는 표본분산을 구할 때다. 표본으로 모분산을 추정할 때는 표본의 개수(n)가 아니라 자유도(n-1)로 제곱합(SS)를 나눠야 한다는 법칙. 2. 이상한 나라의 자유도 자유도에 대한 의문을 해결하고자 여러 정보를 찾다보면 책이나, 강의 등에서 대부분 왜 이름이 자유도(degree of freedom)인가?에 대한 설명은 많다. 위의 식에서 표본평균이 들어가는데, 이 표본평균을 계산해내기 위해 자유롭게 선택할 수 있는 표본의 개수가 자유도라는 것이다. 아...그런 자유를 말하는구나.. 그런데 더 근본적인 의문, 즉 "왜 공식에 자유도가 들어가야만 하는가?"에 관한 설명은 별로 없다. 3. 해결책 어.. 2022. 2. 6. 이전 1 2 3 다음