🌳 Home 🌳

2022.03.06 - [데이터 분석/02. Data Processing] - [전처리] Data Transformation(데이터 변환) [전처리] Data Transformation(데이터 변환) - 정규화 2022.03.04 - [데이터 분석/02. Data Processing] - [전처리] Types of data processing 및 데이터 클리닝 [전처리] Types of data processing 및 데이터 클리닝 Data Processing : Data Processing(데이터 전처리.. xod22.tistory.com 저번 포스팅에서 데이터 변환에 대해 공부를 해보았습니다. 이번 포스팅에서는 전처리의 세번째 종류인 Data Reduction(데이터 축소)에 대해 공부해보려고 합니다..

2022.03.06 - [데이터 분석/02. Data Processing] - [전처리] Data Transformation(데이터 변환) - 정규화 [전처리] Data Transformation(데이터 변환) - 정규화 2022.03.04 - [데이터 분석/02. Data Processing] - [전처리] Types of data processing 및 데이터 클리닝 [전처리] Types of data processing 및 데이터 클리닝 Data Processing : Data Processing(데이터 전처리.. xod22.tistory.com 데이터 변환 작업에는 정규화 외에도 기존의 컬럼을 이용하여 새로운 컬럼을 만들거나 데이터를 더 큰 단위로 집계하는 등의 여러가지 변환작업이 있는데요! 저번..

2022.03.04 - [데이터 분석/02. Data Processing] - [전처리] Types of data processing 및 데이터 클리닝 [전처리] Types of data processing 및 데이터 클리닝 Data Processing : Data Processing(데이터 전처리)란 특성 분석에 적합하게 데이터를 가공하는 작업이다. 가장 많은 노력이 들어가는 과정..! 데이터 전처리의 종류는 크게 다음과 같다. 1. Data Cleaning(데이 xod22.tistory.com 저번 포스팅에서 데이터 클리닝에 대해 공부를 해보았습니다. 이번 포스팅에서는 전처리의 두번째 종류인 Data Transformation(데이터 변환)에 대해 공부해보려고 합니다! 1. Data Cleaning(..

문제 Using elemapi2v2.csv, create a multiple 4 by 4 scatter plot for the following variables (api00, meals, ell, enroll) - You may choose to plot 16 separately or at once using subplots. 풀이 1. 파일 불러오기 네 개의 필요한 변수만 저장해줍니다! uk=read_csv('elemapi2v2.csv') new=uk[["api00", "meals", "ell", "enroll"]] new x1 = new['api00'] x2 = new['meals'] x3 = new['ell'] x4 = new['enroll'] 2. 4 by 4 scatter plot # 4x4 ..

2022.03.04 - [데이터 분석/Data Collection] - [크롤링] 웹페이지에서 기사 스크랩(2) [크롤링] 웹페이지에서 기사 스크랩(2) 2022.02.10 - [데이터 분석/Data Collection] - [크롤링] 웹페이지에서 기사 스크랩(1) [크롤링] 웹페이지에서 기사 스크랩(1) 기사 스크랩 웹페이지에서 기사를 스크랩 해올 때 이 세가지를 꼭 수행해야합 xod22.tistory.com 저번 포스팅에서는 해당 웹사이트의 기사 제목과 링크만 가져와봤는데요..! Title, Text, URL을 가져와서 하나의 데이터 프레임으로 만드는 작업을 해보려고 합니다! 실습 1. 첫번째 링크에서 기사 하나 가져와보기 article1='https://www.forbes.com/sites/robe..

Data Processing : Data Processing(데이터 전처리)란 특성 분석에 적합하게 데이터를 가공하는 작업이다. 가장 많은 노력이 들어가는 과정..! 데이터 전처리의 종류는 크게 다음과 같다. 1. Data Cleaning(데이터 클리닝) - 결측치처리,, 2. Data Transformation(데이터 변환) - 정규화,,,등등 3. Data Reduction(데이터 축소) - 차원축소,,, *그럼 데이터 전처리의 첫번째 Data Cleaning에 대해 공부해보겠습니다..! ~1. Data Cleaning(데이터 클리닝)~ 결측치 삭제 1. 패키지 임포트 및 데이터 불러오기 from pandas import read_csv dataset=read_csv('pima-indians-diab..

2022.02.10 - [데이터 분석/Data Collection] - [크롤링] 웹페이지에서 기사 스크랩(1) [크롤링] 웹페이지에서 기사 스크랩(1) 기사 스크랩 웹페이지에서 기사를 스크랩 해올 때 이 세가지를 꼭 수행해야합니다! article=Article("https://www.3gpp.org/news-events/2143-3gpp-meets-imt-2020") article.download() article.parse() 1. 링크.. xod22.tistory.com 이번 포스팅에서는 BeautifulSoup 패키지를 사용해서 크롤링 하는 방법에 대해 공부해보려고 합니다! 실습 1. 패키지 임포트 import urllib.request as ure from bs4 import BeautifulS..

웹에서 테이블 데이터를 직접 Python으로 스크랩하고 싶은 경우에 사용할 수 있는 방법입니다! 실습 위키피디아의 "대통령 선거 결과" 표를 예로 들어보겠습니다. https://en.wikipedia.org/wiki/Politics_of_Pennsylvania Politics of Pennsylvania - Wikipedia Politics of a U.S. state Pennsylvania has swung from being a Republican-leaning state during much of the 20th century to being a notable battleground state in presidential elections. Pennsylvania backed the Democrat..