💿 Data/이모저모

베이지안 예시 풀이(Bayesian Problem example)

1번 At a certain stage of a criminal investigation, the inspector in charge is 60% convinced of the guilty of a certain suspect. Suppose now that a new piece of evidence that shows that the criminal has a left-handedness is uncovered. If 20% of population possesses this characteristic, how certain of the guilt of the suspect should the inspector now be if it turns out that the suspect is among th..

큰 수의 법칙, 중심극한정리 코드로 구현

1. 큰 수의 법칙 df3.describe() # 대략적인 데이터의 모수를 확인합니다. 대략 5000개만 가도 값이 비슷해지는 것을 확인할 수 있습니다. dat = [] np.random.seed(42) for i in np.arange(start = 0, stop = 18000, step = 100) : s = np.random.choice(df3, i) dat.append(s.var()) dat (pd .DataFrame(dat) .plot .line(color = '#4000c7') .axhline(y = 192, color = '#00da75') ); 표본의 수가 많아질수록 점차 분산값이 수렴하는 모습을 확인하였습니다. 2. 중심극한정리 sample_means = []..

ANOVA 예시, 여러 샘플링

1. ANOVA 데이터 전처리는 생략하겠습니다. df_tree.head() df_tree_mel = df_tree.reset_index().melt(id_vars='index', value_vars=['은행나무','양버즘나무','느티나무']) # 이상치 및 시각화를 위한 melting from scipy import stats stats.f_oneway(df_tree['은행나무'], df_tree['양버즘나무'], df_tree['느티나무']) F_onewayResult(statistic=17.006289557888046, pvalue=8.935183167883698e-07) 귀무가설(H0) : 서울시의 ..

Python 미분

시그모이드 함수 도함수 구해서 값 구해보기 from math import exp def sig(x): return 1 / (1 + exp(-x)) # 원함수 정의 from scipy.misc import derivative def sig_prime(x): return derivative(sig, x, dx=1e-5) sig_prime(3) # x=3 일 때의 값 구해보기 0.04517665972980644

데이터 정리 및 시각화 예시 기록

from google.colab import files uploaded = files.upload() import pandas as pd # 업로드하는 방식으로 진행하였습니다. file1 = pd.read_csv('n113_마리화나.txt', sep='\t') file2 = pd.read_csv('n113_해운.txt', sep='\t') # txt 데이터라 구분자를 정해주었습니다. 데이터 전처리 과정 코드는 생략하곘습니다. 위와 같이 데이터를 정리한 후 '테마'로 각 컬럼의 평균 테이블을 만들었습니다. df1 = df.groupby('테마').mean() !sudo apt-get install -y fonts-nanu..