It continues.

μ“Έλͺ¨μ—†λŠ” κ²½ν—˜μ€ μ—†λ‹€.

πŸ€“ ν”„λ‘œλ•νŠΈ λ””μžμΈμΊ ν”„ 6κΈ°/μˆ˜μ—… 및 μ‹€μŠ΅

(DAY43) AI ν™œμš©ν•œ 데이터 뢄석, EDA

mizi.Design 2025. 11. 12. 16:45

 

μ•ˆλ…•ν•˜μ„Έμš”:) μ˜€λŠ˜μ€ EDA에 λŒ€ν•΄ κ³΅λΆ€ν•˜λŠ” μ‹œκ°„μ„ κ°€μ‘ŒμŠ΅λ‹ˆλ‹€. 

λ­”κ°€ λ©ν•˜κ³  μœΌμŠ¬μœΌμŠ¬ν•΄μ„œ μ˜€λŠ˜μ€ 집쀑을 많이 λͺ»ν–ˆμŠ΅λ‹ˆλ‹€ γ…œγ… 


 

 

✏️였늘의 ν•™μŠ΅

EDA μ΄ν•΄ν•˜κΈ°

3D 아바타 뽑아보기

 

 

πŸ“–μ˜€λŠ˜μ˜ 핡심

더 λ‚˜μ€ μ˜μ‚¬μ†Œν†΅μ„ μœ„ν•œ λ“£κΈ°μ— κ΄€ν•˜μ—¬...
μ™œ OOλ₯Ό λŠλΌλŠ”μ§€ νŒŒνŠΈλ„ˆμ—κ²Œ λ§ν•˜κΈ° ex 'μ œκ°€ λ§ν•˜κ³  μ‹Άμ—ˆλ˜ κ±΄ μ΄κ±°μ˜€μ–΄μš”.'

 

 

 

πŸ“ μˆ˜μ—… λ‚΄μš© λ©”λͺ¨μž₯ πŸ‘‡πŸ»

더보기

πŸ“ μˆ˜μ—… λ‚΄μš© λ©”λͺ¨μž₯

 

EDA

: Exploratory Data Analysis

탐색적 데이터뢄석

- μ—¬λŸ¬ κ°λ„μ—μ„œ μͺΌκ°œλ³΄κ³ , 돌렀보고, λΉ„κ΅ν•΄λ³΄λŠ” κ³Όμ •

- 데이터 뢄석 μ‹œμž‘ μ „ 사전쑰사 ν˜Ήμ€ μ›Œλ°μ—… λŠλ‚Œμ΄λΌκ³  보면 됨

- 데이터λ₯Ό λ³Έκ²©μ μœΌλ‘œ λΆ„μ„ν•˜κΈ° μ „에, κ·Έλž˜ν”„λ‚˜ ν†΅κ³„ λ“±μ„ μ΄μš©ν•΄ λ°μ΄ν„°λ₯Ό λ‹€μ–‘ν•œ κ°λ„μ—μ„œ κ΄€μ°°ν•˜κ³  μ΄ν•΄ν•˜λŠ” κ³Όμ •

 

- EDAλ₯Ό μž˜ν–ˆλ‹€λŠ” 것은 데이터 정리λ₯Ό μž˜ν–ˆλ‹€λŠ” 뜻

 

 

 

데이터 μˆ˜μ§‘ μ‚¬μ΄νŠΈ μΆ”μ²œ

Kaggle 

https://www.kaggle.com/datasets

 

Find Open Datasets and Machine Learning Projects | Kaggle

Download Open Datasets on 1000s of Projects + Share Projects on One Platform. Explore Popular Topics Like Government, Sports, Medicine, Fintech, Food, More. Flexible Data Ingestion.

www.kaggle.com

 

 

곡곡데이터포털

https://www.data.go.kr/tcs/eds/selectCoreDataListView.do

 

 

 

EDAλ₯Ό μž˜ν•˜λŠ” 방법

- 데이터λ₯Ό 잘 λ“£κ³  잘 봐야 ν•œλ‹€. Read and Listen

- μ‹œκ°ν™”κ°€ μ€‘μš”ν•˜λ‹€.

 

 

+ λ¨Έμ‹ λŸ¬λ‹ Machine Learning

- 기계 + ν•™μŠ΅

- 기계가 ν•™μŠ΅ν•˜λŠ” 것

ex) κ°•μ•„μ§€, 고양이 사진을 ν•™μŠ΅ν•˜μ—¬ 사진을 보고 ꡬ뢄할 수 μžˆλŠ”κ²ƒ

    - ν•€ν„°λ ˆμŠ€νŠΈ μ‚¬μ§„μ œκ³΅ > μ‚¬μš©μž μ·¨ν–₯ ν•™μŠ΅ν•΄μ„œ 사진 제곡

    - 유투브 μ•Œκ³ λ¦¬μ¦˜

 

 

 

CRISP-DM

0단계 : CSV파일 μ—…λ‘œλ“œ

 

1단계: λΉ„μ¦ˆλ‹ˆμŠ€ 이해

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- λΆ„μ„μ˜ λͺ©μ μ„ λΆ„λͺ…νžˆ ν•˜κΈ°

- λˆ„κ°€ 이 데이터λ₯Ό μ“Έ μ§€, μ–΄λ–€ κ°€μΉ˜λ₯Ό 쀄 수 μžˆλŠ”μ§€ μƒκ°ν•˜κΈ°

ν”„λ‘¬ν”„νŠΈ μ˜ˆμ‹œ

"이 λ°μ΄ν„°μ…‹μ˜ 뢄석 λͺ©μ μ„ μ„€μ •ν•΄μ€˜. (ex)μ£Όνƒκ°€κ²©μ˜ˆμΈ‘μ΄λΌλŠ” λͺ©ν‘œλ‘œ, λˆ„κ΅¬μ—κ²Œ μ–΄λ–€ κ°€μΉ˜λ₯Ό 쀄 수 μžˆλŠ”μ§€ μ •λ¦¬ν•΄μ€˜."

 

2단계 : 데이터 이해

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- 데이터 ꡬ쑰 확인

- 뢄포 μ‹œκ°ν™”

ν”„λ‘¬ν”„νŠΈ μ˜ˆμ‹œ

"데이터 ꡬ쑰와 톡계λ₯Ό λ³΄μ—¬μ€˜. λˆ„λ½κ°’, μ΄μƒμΉ˜ 여뢀도 μ•Œλ €μ€˜. μ£Όμš” λ³€μˆ˜λ“€μ˜ 뢄포도 μ‹œκ°ν™”ν•΄μ€˜."

 

3단계 : 데이터 μ€€λΉ„

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- 이상값 처리 (IQR, ν•˜ν•œ/μƒν•œ μ œν•œ)

- λ²”μ£Όν˜• λ³€μˆ˜ 인코딩 (예: 0/1, 원핫 인코딩)

- ν•„μš” μ—†λŠ” μ—΄ 제거, μŠ€μΌ€μΌλ§

 

4단계 : λͺ¨λΈλ§

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- ν›ˆλ ¨ 데이터와 ν…ŒμŠ€νŠΈ 데이터 뢄리

- μ„ ν˜•νšŒμœ„, 트리 λ“± λ‹€μ–‘ν•œ λͺ¨λΈ ν•™μŠ΅

- 예츑 κ²°κ³Ό 확인

ν”„λ‘¬ν”„νŠΈ μ˜ˆμ‹œ

"μ„ ν˜• νšŒκ·€, 랜덀포레슀트,κ·Έλž˜λ””μ–ΈνŠΈ λΆ€μŠ€νŒ… λͺ¨λΈμ„ ν•™μŠ΅μ‹œμΌœμ€˜. RMSE둜 μ„±λŠ₯ λΉ„κ΅ν•΄μ€˜."

 (μ–΄λ–€ λͺ¨λΈμ΄ κ°€μž₯ μ„±λŠ₯이 쒋을지 λΉ„κ΅ν•΄λ‹¬λΌλŠ” 뜻)

 

5단계 : 평가

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- λͺ¨λΈ μ„±λŠ₯ 평가 (RMSE, MAE λ“±)

- 예츑 뢄석 μ‹œκ°ν™”

- 였차 뢄석

ν”„λ‘¬ν”„νŠΈ μ˜ˆμ‹œ

"κΈ°μ‘΄ λͺ¨λΈλ“€κ³Ό 비ꡐ해, μ„±λŠ₯이 쒋은지 ν‰κ°€ν•΄μ€˜. μ‹œκ°ν™”λ‘œ μ˜ˆμΈ‘κ°’κ³Ό μ‹€μ œκ°’μ„ λΉ„κ΅ν•΄μ€˜."

 

6단계 : 배포 (Deployment) 

이 λ‹¨κ³„μ—μ„œ ν•΄μ•Ό ν•  일

- κ²°κ³Ό μš”μ•½ 및 μΆ”μ²œ

- λͺ¨λΈ 및 μΈμ‚¬μ΄νŠΈ λ¬Έμ„œν™”

ν”„λ‘¬ν”„νŠΈ μ˜ˆμ‹œ

" 이 뢄석 κ²°κ³Όλ₯Ό 기반으둜 ν•œ λ³΄κ³ μ„œλ‚˜ λ°œν‘œμžλ£Œλ₯Ό μš”μ•½ν•΄μ€˜."

 

+ AI ν™œμš©ν•œ κΈ°μ—… 사둀 μ•Œμ•„λ‘κΈ°

- ν•˜μΈμ¦ˆ μΌ€μ±±

- μ½”μŠ€λͺ¨ν΄λ¦¬νƒ„ μž‘μ§€ 컀버

- 11λ²ˆκ°€ κ΄‘κ³ 

- μ½”μΉ΄μ½œλΌ (μΊ”λ°”λž‘ ν˜‘μ—…)

 

 

 

 

μ‹€μŠ΅ ) 아바타 뽑아보기

 

πŸ’‘μ–΄μ œ 과제λ₯Ό λ‹€λ“€ λ²„κ±°μ›Œν•œ 것 κ°™λ‹€κ³  λ©˜ν† λ‹˜μ΄ μ˜€λŠ˜μ€ κ°€λ³κ²Œ 즐길 수 μžˆλŠ” 과제λ₯Ό μ£Όμ…¨μŠ΅λ‹ˆλ‹€. 😊

μ±—GPTν•œν…Œ EDA λ‹¨κ³„λ³„λ‘œ 진행해달라고 ν–ˆλ‹€κ°€ 무료 λ²„μ „μ΄μ–΄μ„œ 쀑간에 ν•œλ„λ₯Ό λ„λ‹¬ν•΄λ²„λ €μ„œ μ•„λ°”νƒ€λŠ” Gemini둜 λ½‘μ•„λ΄€μŠ΅λ‹ˆλ‹€.

 

 

 

컨셉 : 10~20λŒ€λ₯Ό μœ„ν•œ 맀일 5λΆ„ λ¬Έν•΄λ ₯ 및 μ†Œν†΅λ ₯ ν•™μŠ΅μ•±, 링크

 

μž‘μ„±ν•œ ν”„λ‘¬ν”„νŠΈ

λ‹€μŒ 컨셉을 λ°”νƒ•μœΌλ‘œ 3D 아바타λ₯Ό λ½‘μ•„μ€˜. 배경은 투λͺ…μœΌλ‘œν•˜κ³ , μž…μ²΄κ°μ΄ λŠκ»΄μ Έμ•Όν•΄. μ•± λΈŒλžœλ”©μ— μ“Έκ±°λΌμ„œ λ³΅μž‘ν•˜λ©΄ μ•ˆλ˜κ³  κΉ”λ”ν•˜λ©΄μ„œ λ§€λ ₯적인 μŠ€νƒ€μΌλ‘œ ν•΄μ€˜. 맑은 μ΄ˆλ‘μƒ‰κ³Ό μ˜€λ Œμ§€μƒ‰μ˜ κ·ΈλΌλ°μ΄μ…˜μ„ 톡해 말풍선 λ‚΄λΆ€μ˜ λ‹€μ±„λ‘œμš΄ λŒ€ν™”λ₯Ό μ‹œκ°μ μœΌλ‘œ ν‘œν˜„. λˆˆλ™μžλŠ” λ‹€μ–‘ν•œ 감정을 ν‘œν˜„ν•  수 μžˆλŠ” ν˜•νƒœ, λŒ€ν™”μ— 따라 μž‘κ²Œ ν”λ“€λ¦¬κ±°λ‚˜, 웃을 λ•Œ 살짝 톡톡 νŠ€λŠ” λ“±μ˜ μΈν„°λž™μ…˜μ΄ μ–΄μšΈλ¦¬λŠ” μ™Έν˜• λ””μžμΈ, μ†Œν†΅κ³Ό 경청을 μƒμ§•ν•˜λŠ” λ―Έλ‹ˆ ν—€λ“œμ…‹ 뢀속 μš”μ†Œλ₯Ό λ„£μ–΄μ€˜.

 

 

 

 

πŸ’‘ μ œλ―Έλ‚˜μ΄λŠ” λ­”κ°€ 색감을 νƒν•˜κ²Œ μ“΄ 것 κ°™μ•„μ„œ 아쉬움이 λ‚¨λŠ” μž‘μ—…λ¬Όμ΄μ—ˆλ‹€...γ…œ μ±—GPT라면 μ’€ 더 잘 뽑아낼 것 같은데 μ•„μ‰½κ²Œλ„ 였늘 ν•œλ„λ₯Ό λ‹€ μ¨μ„œ ν…ŒμŠ€νŠΈν•΄λ³΄μ§€ λͺ»ν–ˆλ‹€..ν”Œλž«ν•˜κ²Œ λ¦¬λ””μžμΈμ€ ν”Όκ·Έλ§ˆμ—μ„œ μ§„ν–‰ν–ˆλ‹€. λ‹€μŒλ²ˆμ—” μ’€ 더 ν€„λ¦¬ν‹°μžˆκ²Œ 뽑아내고싢닀.

 

μ–΄μ œλΆ€ν„° νƒ„μˆ˜ν™”λ¬Όμ„ λŠμ€ νƒ“μΌκΉŒ,,, 두톡이 쑰금 μžˆμ–΄μ„œ 였늘 μˆ˜μ—…μ€ 집쀑λ ₯ μ œλ‘œμ˜€λ‹€..😫 EDA, λ¨Έμ‹ λŸ¬λ‹μ˜ κΈ°λ³Έκ°œλ…μ— λŒ€ν•΄ κ³΅λΆ€ν–ˆλŠ”λ° λ©˜ν† λ‹˜μ΄ 사싀 λ””μžμ΄λ„ˆλŠ” 직접 ν•  일은 μ—†λ‹€κ³  μ•Œμ•„λ‘λΌκ³ λ§Œ ν•˜μ…”μ„œ 더 집쀑이 μ•ˆλœ 것도 μžˆμ—ˆλ˜ 것 κ°™λ‹€.