코드탐험 신비의 세계

모델링 전 데이터 전처리부터 한다. 1. 데이터 확인 import pandas as pd import numpy as np import matplotlib.pyplot as plt import seaborn as sns # 데이터 통계 확인 >>> df.describe() # nan값 확인 >>> df.isna().sum() # 학습을 위해 X,y값 지정 >>> X = df.loc[ : , '컬럼' : '컬럼' ] >>> y = df['컬럼'] 2. 피처 스케일링 from sklearn.preprocessing import MinMaxScaler # X값 피처스케일링 >>> scaler_X = MinMaxScaler() >>> X = scaler_X.fit_transform(X.values) # y값 피..

그리드 서치를 이용해 최적의 하이퍼 파라미터 찾는다. # ! pip install scikeras from scikeras.wrappers import KerasClassifier from sklearn.model_selection import GridSearchCV from keras.models import Sequential from keras.layers import Dense 그리드 서치 하기 위해서 모델링하는 함수를 만든다. >>> def build_model(optimizer='adam'): model = Sequential() model.add(Dense(8, 'relu', input_shape=(11,))) model.add(Dense(6, 'relu')) model.add(Dense(1..

Optimizer는 loss function를 통해 얻은 기울기 정보를 활용하여 신경망의 매개변수를 업데이트하는 방법 이를 통해 모델이 데이터를 효과적으로 학습하고 손실을 최소화할 수 있도록 도와준다.

배치 크기 (Batch Size): 한 번에 모델에 공급되는 데이터의 샘플 수 에포크 (Epoch): 한 번의 에포크는 전체 데이터셋을 한 번 훑는 과정을 의미 훈련 데이터셋 전체를 모델에 대해 한 번씩 학습하는 것을 의미

import tensorflow as tf from tensorflow import keras from keras.models import Sequential from keras.layers import Dense # 레이어를 담을 수 있는 비어있는 틀을 만든다 >>> model = Sequential() # 비어있는 틀에 히든 레이어 추가 # 노드 갯수 입력, 액티베이션 함수 입력, 들어갈 데이터의 갯수 입력(컬럼) 입력 >>> model.add(Dense(units=8, activation='relu', input_shape=(11,))) # 두번째 히든 레이어 추가 >>> model.add(Dense(6, 'relu')) # 결과값이 0 과 1 사이 값으로 나오게한다. sigmoid 함수 사용 >>..

Dummy variable trap 은 없어도 되는 불필요한 컬럼을 없애는 것 # Dummy Variable Trap 을 적용하자. # 딥러닝에서는 컬럼 하나가 연산에 아주 크게 작용하므로 # 원핫 인코딩한 결과에서 가장 왼쪽의 컬럼은 삭제해도 # 데이터를 표현하는 데는 아무 문제 없다. # France, Germany, Spain 3개 컬럼으로 원핫 인코딩 되는데 # 1 0 0 # 0 1 0 # 0 0 1 # 맨 왼쪽 France 컬럼을 삭제해도 # 0 0 => France # 1 0 => Germany # 0 1 => Spain >>> pd.DataFrame(X).drop(0, axis=1).values array([[0.0000000e+00, 0.0000000e+00, 6.1900000e+02, ...