pandas 데이터 전처리 (범주형) 범주형 자료의 데이터 전처리를 하기 위해 pandas 전처리 하는 방법에 대해 정리 1. 전처리 하기 위한 데이터 검색 주어진 자료에서 범주형 데이터를 확인해야 한다. data type을 확인하여 범주형인지 아닌지를 판단 할…
python pandas 정렬 python pandas 정렬 의 기능 중 sort_values 함수를 이용하여 데이터 정렬하고 또한 nlargest(), nsmallest() 함수를 사용한다. pandas sort_values 정렬 함수 sort_values() 함수는 dataframe의 기본 정렬 함수로 ascending 옵션을 이용하여 내림차순, 오름차순 정렬을…
python pandas round 함수를 사용시 주의할 점 pandas round 함수는 뱅커 반올림(bankers rounding) 연산을 한다. 숫자가 양쪽의 한 가운데 있을 경우에 가까운 짝수 쪽으로 만드는 것이다. 즉 0.5를 반올림 하면 0이 되고, 1.5를 반올림 하면…
의사결정나무(2) (Decision Tree) 의사결정나무의 분류 모델을 설명하고 Information Gain 에 대해서 설명한다. 1. 의사결정나무 분류 모델 concept 파란색 점이 들어 왔을 때 파란색점은 빨강색으로 예측 초록색 점이 들어오면 주위의 검정색 점이 5개로 검정색으로 예측 2….
여러가지의 행렬특징이 있다. 행렬 곱의 교환법칙 불가 $AB \neq BA$ A = $\begin{bmatrix}2 & 3 \\ 3 & 1 \\ 4 & 5 \end{bmatrix}$, B = $\begin{bmatrix} 1 & 2 & 3 \\ 2 & 3 &…
공분산 행렬 두 변량 값들 간의 공분산을 행렬로 표기 한것이다. 데이터구조를 설명해주며, 특히 특징 쌍(feature pairs)들의 변동이 얼마나 닮았는가(다른말로는 얼마만큼이나 함께 변하는가)를 행렬에 나타낸다 5명의 사람의 키와 몸무게 $\begin{bmatrix} 170&&70\\ 150&&45\\ 160&&55\\ 180&&60\\ 170&&80 \end{bmatrix}$…
가우스-조던 소거법 행령에서 x의 해를 구하는 데 Ax = b에 대한 행 연산을 통해 해 x를 구하는 방법을 보면. Ax = b 에서 행렬 A가 단위 행렬 I라면 해는 x = b임을 알 수 있다. 이러한…
DataFrame 의 자료 구조에서 새로운 column을 만들고 column에 값을 넣을 때 아래와 같은 SettingWithCopyWarning 메시지가 발생한다. <ipython-input-64-04010302304>:1: SettingWithCopyWarning: A values is trying to be set on a copy of a slice from a DataFrame. Try…
자료의 연관 2개의 변수 사이의 자료의 연관 성을 파악한다. 1. 범주형 자료의 연관 관계 교육수준과 결혼생활의 분할표 위와 같이 교육수준과 결혼생활의 분활표가 있다. 위 표를 기반으로 교육수준에 따른 결혼생활의 조건부 분포로 정의하면 아래와 같다. 반대로…
시계열 분해 방법 기본적으로 시계열 분해 방법은 decompose와 같이 분해 하는 방법이다. 두 가지 type(adaptive, multi)로 decompose 하는 방법이 있다. 시계열 분해 방법은 추세와, 계설성과, 나머지 랜덤형태의 분해를 하는 것이다. 승법모형 분해와 가법 모형 분해가…