티스토리

조수현님의 블로그

검색하기

블로그 홈

조수현님의 블로그

josuhyeon.tistory.com/m

조수현님의 블로그 입니다.

구독자: 9

방명록 방문하기

주요 글 목록

데이터 전처리: 데이터 정규화와 표준화 (비선형 변환 포함) 데이터 변환 및 전처리 데이터 변환은 머신러닝과 데이터 분석에서 중요한 과정으로, 데이터가 모델 학습에 적합하도록 변환하여 성능을 향상시키는 역할을 합니다. 1. 정규화 (Normalization) 정규화는 데이터를 특정 범위(일반적으로 0과 1 사이)로 변환하여 데이터의 스케일을 맞추는 과정입니다. 1.1 Min-Max 정규화 Min-Max 정규화는 아래 공식을 사용하여 데이터를 변환합니다: $$ x' = \frac{x - \text{min}(x)}{\text{max}(x) - \text{min}(x)} $$ 예제: import pandas as pd from sklearn.preprocessing import MinM.. 공감수 0 댓글수 0 2024. 12. 3.
데이터 전처리: 인코딩 (Encoding) 인코딩(Encoding)은 범주형 데이터를 숫자형 데이터로 변환하는 과정입니다. 머신러닝 모델은 대부분 숫자 데이터를 다룰 수 있기 때문에, 데이터가 문자, 텍스트, 혹은 범주형 값으로 이루어져 있다면 이를 숫자로 변환해야 합니다.왜 인코딩이 필요한가?머신러닝 모델은 수치형 데이터만 처리할 수 있습니다.범주형 데이터를 숫자로 변환하면 모델이 데이터의 패턴을 학습할 수 있습니다.데이터 분석 및 전처리 과정에서 필수적인 작업입니다.인코딩의 기본 목적데이터를 머신러닝 모델에 적합한 형식으로 변환예: '남자', '여자' → 0, 1범주 간 관계를 모델이 올바르게 이해할 수 있도록 보장예: 순서가 있는 데이터는 순서를 유지하면서 변환, 순서가 없는 데이터는 편향 없이 변환.인코딩의 종류레이블 인코딩 (Label .. 공감수 0 댓글수 0 2024. 12. 3.
데이터 전처리: 데이터 정규화와 표준화 1. 데이터 정규화 (Normalization)정규화란? 데이터를 0과 1 사이의 값으로 변환하는 과정입니다. 목적: 서로 다른 범위를 가진 데이터를 동일한 스케일로 맞춰 비교 가능하게 만듭니다.1) Min-Max 정규화공식:\[X' = \frac{X - X_{\text{min}}}{X_{\text{max}} - X_{\text{min}}}\] \( X \): 원래 데이터 값 \( X_{\text{min}} \): 최소값 \( X_{\text{max}} \): 최대값예제 코드import pandas as pdfrom sklearn.preprocessing import MinMaxScaler# 데이터 생성data = { '특성1': [10, 20, 30, 40, 50], '특성2': [.. 공감수 0 댓글수 0 2024. 12. 3.
데이터 전처리: 이상치 탐지 및 처리 1. 이상치(Outlier)란?이상치는 데이터의 일반적인 패턴에서 벗어난 값을 의미합니다.문제점:분석 결과에 부정적인 영향을 미침.모델 학습 과정에서 왜곡 발생 가능.해결 필요성:탐지 후 적절히 제거하거나 처리해야 합니다.2. 이상치 탐지 방법1) 기술 통계 기반 탐지describe() 함수: 데이터의 기본 통계량 확인.이상치 의심 기준:평균(mean)과 최대값(max)이 지나치게 차이 나는 경우.표준편차(std)가 지나치게 큰 경우.import pandas as pd# 데이터 생성data = { '이름': ['철수', '영희', '민수', '지수', '상수'], '나이': [25, 30, 22, 35, 120], # 120은 이상치로 의심됨 '점수': [90, 85, 95, 80, 8.. 공감수 0 댓글수 0 2024. 12. 3.
데이터 전처리: 결측치 탐지와 처리 방법 1. 결측치란 무엇인가요?결측치의 정의결측치(Missing Value): 데이터셋에서 값이 누락된 경우를 말합니다.결측치를 제대로 처리하지 않으면 분석 결과의 신뢰성이 크게 떨어질 수 있습니다.2. 결측치 탐지결측치 탐지 방법Pandas를 활용하면 데이터프레임에서 결측치를 쉽게 탐지할 수 있습니다.1) isna() / isnull() 함수 데이터프레임의 각 요소가 결측치인지 여부를 반환합니다.isna()사용 방법: 데이터프레임에서 .isna()를 붙이면 끝!결과: 결측치(True)와 아닌 값(False)을 확인할 수 있습니다. import pandas as pd# 데이터 준비data = { '이름': ['철수', '영희', '민수', '지수'], '나이': [25, 30, None, 35], .. 공감수 0 댓글수 0 2024. 12. 3.
4.2.4 연습 문제: 각 자리 숫자의 합을 구하는 함수(리스트를 이용) 문제정수 num을 매개변수로 받아 각 자리 숫자(digit)의 합을 계산하는 sumOfDigits() 함수를 작성하세요. 단, 나눗셈을 이용하지 말고 리스트를 사용해서 풀어보세요.예 1입력:643출력(6 + 4 + 3 = 13):13예 2입력:47253출력:21코드 설명리스트 컴프리헨션입력받은 문자열 num에서 각 문자를 정수로 변환하여 리스트 digits를 생성합니다.예: "12345" → [1, 2, 3, 4, 5]digits = [int(digit) for digit in num]리스트의 합 계산sum(digits)는 리스트 digits의 요소를 모두 더한 값을 반환합니다.예: [1, 2, 3, 4, 5] → 15return sum(digits)사용자 입력사용자가 입력한 숫자는 문자열로 저장됩니다... 공감수 0 댓글수 0 2024. 11. 29.
4.2.3 연습 문제: 회문 판별 함수 만들기 문제거꾸로 배열해도 같은 단어 혹은 문장이 되는 것을 회문(palindrome)이라고 합니다. 다음은 회문의 예입니다.AnnaCivicKayakLevel...문제 1주어진 단어가 회문인지 판별하는 함수 palindrome()을 작성하세요. 단, 문자열 입력은 모두 소문자로 이뤄지며 공백을 포함하지 않는다고 가정합니다.>>> palindrome('anna')True>>> palindrome('banana')Falsex[::-1] #문자열을 뒤집는다x == x[::-1] #원래 문자열과 뒤집은 문자열이 같은지 비교한다 문제 2대문자와 소문자가 섞여 있더라도 회문으로 판정하도록 함수를 개선하세요.>>> palindrome('Anna')Truex = x.lower() #대문자를 소문자로 변환 -> 대문자가.. 공감수 2 댓글수 3 2024. 11. 29.
4.2.2 슬라이싱 파이썬 슬라이싱(Slicing) 정리슬라이싱은 문자열, 리스트 등에서 특정 부분을 추출하는 기능입니다."데이터를 자르는 것"이라고 이해하면 쉬워요.1. 문자열 슬라이싱기본 문법문자열[시작:끝:단계]시작: 어디서부터 잘라낼지 (포함).끝: 어디까지 잘라낼지 (포함하지 않음).단계: 몇 칸씩 건너뛸지 (기본값은 1).예시 1: 문자열 일부 추출text = "Python"print(text[0:2]) # 출력: 'Py'print(text[2:]) # 출력: 'thon'print(text[:4]) # 출력: 'Pyth'예시 2: 음수 인덱스 사용음수 인덱스는 문자열의 뒤에서부터 위치를 셉니다.print(text[-1]) # 출력: 'n' (마지막 글자)print(text[-3:]) # 출력: .. 공감수 1 댓글수 0 2024. 11. 29.
4.2.1. 연습 문제: 아이돌 팬 (1) 문제다음과 같은 사람들이 있습니다.뉴진스를 좋아하는 사람: 철수, 영희, 민수, 지현, 서연아이브를 좋아하는 사람: 영희, 민수, 지수, 서연, 하나에스파를 좋아하는 사람: 철수, 지현, 지수, 서연, 나영이 중에서 뉴진스와 아이브를 모두 좋아하지만 에스파는 좋아하지 않는 사람은 누구일까요?힌트in 키워드를 사용하여 항목이 목록에 있는지 확인할 수 있습니다.# 책 목록에 특정 책이 있는지 확인하는 예시books = ["해리포터", "반지의 제왕", "셜록 홈즈"]if "해리포터" in books: print("해리포터가 목록에 있습니다.")append 메서드를 사용하여 결과 목록에 새로운 항목을 추가할 수 있습니다.# 장바구니에 물건을 추가하는 예시shopping_cart = []shopping_c.. 공감수 2 댓글수 1 2024. 11. 29.
4.2 문자열과 리스트 1. 문자열(String)문자열은 문자나 문장을 표현하는 자료형이에요. 작은 따옴표(')나 큰 따옴표(")로 감싸서 만듭니다.1-1. 문자열 기본 사용법greeting = "Hello, Python!"print(greeting) # 출력: Hello, Python!1-2. 인덱싱 (Indexing)문자열은 글자마다 번호(인덱스)가 있어요.인덱스는 0부터 시작합니다.뒤에서부터는 음수 인덱스를 사용해요.예시text = "Python"print(text[0]) # 출력: 'P' (첫 번째 글자)print(text[-1]) # 출력: 'n' (마지막 글자)1-3. 슬라이싱 (Slicing)문자열의 일부분을 가져오는 방법이에요.문법: 문자열[시작:끝]끝은 포함되지 않습니다.예시text = "Hello, P.. 공감수 1 댓글수 1 2024. 11. 29.
4.1 자료형 자료형은 데이터를 어떤 모양으로 저장하고 사용하는지 정해주는 틀이에요. 숫자인지, 글자인지, 리스트인지 등을 구분하는 거죠. 😊1. 자료형이 왜 필요할까요?컴퓨터는 데이터를 0과 1로 저장해요. 숫자도 글자도 결국엔 이진수로 변환되죠.예를 들어, 65라는 숫자는 컴퓨터에서 01000001로 저장되는데,이걸 숫자 65로 볼지, 아니면 문자 'A'로 볼지 자료형이 결정해요!2. 파이썬의 주요 자료형(1) 숫자형 (Numbers)숫자를 저장하는 자료형이에요.파이썬은 정수, 소수, 복소수도 다 다룰 수 있어요!정수 (int)그냥 "숫자"를 말해요. 소수점이 없어요.age = 25 print(type(age)) # 출력: 소수 (float)소수점이 있는 숫자예요.pi = 3.14 print(type(pi)) #.. 공감수 0 댓글수 0 2024. 11. 29.
3.5 람다(lambda) 1. 람다 함수란?람다 함수는 간단한 계산을 빠르게 할 수 있는 미니 함수예요.보통 함수를 만들려면 이름을 붙여야 하지만, 람다 함수는 이름 없이 바로 사용할 수 있어요.예시# 일반 함수def add(x, y): return x + y# 람다 함수add_lambda = lambda x, y: x + y두 함수는 같은 일을 해요!add(10, 20)와 add_lambda(10, 20) 둘 다 30을 반환합니다.2. 람다 함수의 문법람다 함수의 기본 문법은 아주 간단해요:lambda 입력값: 계산식예시lambda x: x * 2 # 입력값 x를 2배로 만드는 함수3. 언제 람다 함수를 사용할까?람다 함수는 간단한 계산이 필요할 때 사용해요.이름을 붙이지 않아도 되는 함수가 필요할 때.한 번만 사용할 .. 공감수 0 댓글수 0 2024. 11. 29.
3.3 지역변수, 전역변수 변수는 우리가 정보를 저장하는 **"이름표"**라고 생각하면 됩니다.그런데 이 이름표가 어디서 유효한지, 즉 어디에서 쓸 수 있는지가 지역변수와 전역변수의 차이입니다. 1. 지역변수(Local Variable)란?🏡 지역변수는 함수 안에서만 사용하는 개인 이름표!함수 안에서 만들어진 변수입니다.함수가 실행되는 동안에만 유효하고, 함수가 끝나면 사라집니다.함수 밖에서는 볼 수도, 사용할 수도 없습니다.📦 예를 들어:def greet(): name = "Alice" # 지역변수 print(f"Hello, {name}") # 함수 안에서만 사용 가능greet()# print(name) # 오류! name은 함수 밖에서 사용할 수 없어요.📝 쉽게 생각하면:지역변수는 함수의 개인 메모장.. 공감수 0 댓글수 0 2024. 11. 29.
3.2.4 연습 문제: 놀이 공원 (1) 둘리와 도우너, 마이콜이 놀이 공원에 갔습니다. 놀이 기구 중에는 탑승자의 키를 제한하는 것이 있네요.문제놀이 기구의 이름과 키 제한을 나타낸 문자열을 입력받아서, 놀이 기구의 이름, 탑승 가능한 키의 하한(下限)과 상한(上限)을 각 행에 출력합니다.코드는 다음과 같이 작성하며, ch03 폴더 아래에 파일명을 ridereader.py로 저장합니다.def read(text): # 이곳에 코드를 작성하세요. return ridename, cmmin, cmmaxif __name__ == "__main__": ridename, cmmin, cmmax = read(input()) print("이름:", ridename) print("하한:", cmmin) print("상한:", c.. 공감수 0 댓글수 1 2024. 11. 28.
3.2.3 연습 문제: 이자(단리) 계산 직장인 A씨는 1년 동안 열심히 일해서 연말에 성과급으로 천만 원을 받았습니다. 연이율 3.875%(단리)인 고정금리 상품에 예금하려고 합니다. 5년 동안 넣어두면 이자가 얼마 붙는지 계산해 보겠습니다.첫 해에 원금 10,000,000원에 대한 이자 10,000,000 * 0.03875 = 387500원이 붙습니다.둘째 해에 원금 10,000,000원에 대한 이자 387500원이 붙습니다.마찬가지로 셋째, 넷째, 다섯째 해에도 해마다 같은 금액의 이자가 붙습니다.만기가 되어 받을 수 있는 이자는 다음과 같습니다.>>> 10000000 * 0.03875 * 51937500.0원금과 이자를 합한 총액, 즉 원리금은 다음과 같습니다.>>> 10000000 + 10000000 * 0.03875 * 5119375.. 공감수 0 댓글수 1 2024. 11. 28.
3.2.2 연습 문제: 함수 정의하기 문제 1다음 triple() 함수를 완성하세요.>>> def triple(x):... ██████ █ █ █... >>> triple(2)6>>> triple('x')'xxx'문제 2오늘의 날짜 객체를 구하는 코드는 다음과 같습니다. (코드를 이해하지 못해도 이 문제를 풀 수 있습니다.)>>> from datetime import datetime>>> today = datetime.today()>>> todaydatetime.datetime(2021, 3, 21, 15, 46, 1, 94942)위 코드의 today에서 연도를 구하는 방법은 다음과 같습니다.>>> today.year2021구성 요소2024: 연도 (Year)11: 월 (Month, 11월)28: 일 (Day, 28일)8: 시 (Ho.. 공감수 0 댓글수 0 2024. 11. 28.
3.2.1 연습 문제: 숫자 읽기 함수(1~10) 문제매개변수로 받은 정수를 한국어로 표기한 문자열을 반환하는 함수 korean_number()를 정의하세요. 단, 매개변수는 1 이상 10 이하의 정수라고 가정합니다.예>>> korean_number(1)'일'>>> korean_number(3)'삼'>>> korean_number(10)'십' 답챗쥐피티한테 이쁘게 색깔글자로 바꿔달라함# 사용자로부터 입력받기num = int(input("1에서 10 사이의 정수를 입력하세요: ")) # 정수를 한국어로 변환하는 함수 def korean_number(num): if num == 1: return '일' elif num == 2: return '이' elif num == 3: retu.. 공감수 0 댓글수 0 2024. 11. 27.
3.2 반환(return) 문 파이썬에서 return 문은 함수가 실행 결과를 호출한 곳으로 돌려주는 역할을 합니다. 이를 통해 함수는 특정 작업을 수행한 후 그 결과를 반환할 수 있습니다.return 문의 주요 특징:값 반환: 함수 내부에서 계산된 값을 반환하여, 호출한 곳에서 그 값을 활용할 수 있습니다.함수 종료: return 문을 만나면 함수는 즉시 종료되며, 이후의 코드는 실행되지 않습니다.예시:def f1(x): a = 3 b = 5 y = a * x + b return y # y 값을 반환위 함수 f1은 입력값 x에 대해 3 * x + 5의 결과를 반환합니다.사용 예:c = f1(10) print(c) # 출력: 35이 경우, f1(10)은 35를 반환하며, 이는 변수 c에 저장되고 출.. 공감수 0 댓글수 1 2024. 11. 27.
3.1.2 연습 문제: 구구단 문제다음 예와 같이 구구단을 2단부터 9단까지 계산해서 출력하는 프로그램을 짜보세요. 지금까지 배운 내용만 제대로 이해하시면 충분히 하실 수 있답니다.예출력:2 * 1 = 22 * 2 = 4… 9 * 9 = 81어 근데 예상외로 들여쓰기 문제였다.그리고 2단부터니까 range(1,10)이라고 써야겠네...문제점:두 번째 for 문의 들여쓰기 누락for n in range(1, 10):는 for m의 블록 안에 들어가야 합니다.Python은 들여쓰기를 기준으로 코드의 계층을 판단하므로, 들여쓰기가 없는 경우 에러가 발생합니다.가독성 문제print에서 연산자(*, =)와 값 사이에 공백이 없어, 출력이 복잡하게 보입니다. 정리들여쓰기 문제를 해결하면 코드가 정상 동작합니다.Python에서는 들.. 공감수 0 댓글수 0 2024. 11. 27.
3.1.1 연습 문제: 자릿수를 구하는 함수 만들기 문제양(陽)의 정수를 입력받아, 그 수가 몇 자리 숫자인지 출력하는 함수 numOfDigits()를 만들어 보세요.예>>> numOfDigits(12345)5>>> numOfDigits(1234567890)10 나는 풀어보았다.그리고 지피티한테 검사받으니, 작성하신 코드는 동작은 하지만 문제 요구사항과 정확히 일치하지 않을 가능성이 있습니다.문제에서 요구하는 것은 **"숫자(정수)의 자릿수를 구하는 함수"**이기 때문에, 아래 사항들을 점검해야 합니다:정답 여부작성하신 코드:def numOfDigits(): print(len(input()))numOfDigits()동작은 잘 됩니다.간단히 문자열 길이를 구할 수 있습니다.단점:문제 요구사항과 약간 다릅니다. 숫자가 아닌 입력도 처리될 수 있습니다.반.. 공감수 0 댓글수 0 2024. 11. 27.
3.1 함수 1. 함수의 개념- 함수는 특정 작업을 수행하는 코드 블록으로, 필요할 때마다 호출하여 사용할 수 있습니다.- 예를 들어, `len()` 함수는 리스트나 문자열의 길이를 반환합니다.2. 함수의 필요성- 동일한 작업을 반복적으로 수행할 때, 함수를 사용하면 코드의 재사용성과 가독성이 향상됩니다.- 함수를 사용하면 코드의 유지보수가 용이해집니다.3. 함수 정의 방법- 파이썬에서 함수는 `def` 키워드를 사용하여 정의합니다.- 함수의 기본 구조는 다음과 같습니다:def 함수이름(매개변수1, 매개변수2, ...): 수행할 코드4. 예시: 리스트의 원소 출력 함수- 리스트의 원소를 차례대로 출력하는 함수를 정의할 수 있습니다.def print_list(a): # 지금부터 print_list 함수를 만들겠다.. 공감수 0 댓글수 0 2024. 11. 27.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.