자기개발/TIL 검색 결과
53 개의 검색 결과가 있습니다.
자기개발/TIL

TIL(Today I Learned) 20200831

1. 데이터기반행정 활성화에 관한 법률에 대한 교육을 받았다. 2. 파이썬의 아나콘다 설치와 주피터 노트북 단축키, 파이썬의 기본 문법에 대해 교육과 실습을 진행했다. 3. 주피터 노트북의 테마 변경에 관한 학습 4. 파이썬 기본 문법 학습 > 데이터기반행정 활성화에 관한 법률 1. 법 제정의 필요성 1) 경험, 직관에 의존했던 기존의 의사결정 > 데이터 요청, 제공에 관한 일반법적 근거가 없어 각 기관이 보유한 정보만을 제한적으로 활용하여 분석 > 필요한 관련 정보의 부족과 미 제공으로 인한 공백ㅇ르 주관적인 경험과 직관으로 메워야 함 > 공공기관 간 데이터 연계를 위한 통합관리체계 및 공공빅데이터센터설치를 위한 근거 미비 2) 객관적 증거·데이터에 기반한 과학적 행정체계 구축 > 데이터 요청, 제공에..

2020. 8. 31.
자기개발/TIL

TIL(Today I Learned) 20200830

파이썬을 이용합 웹 크롤링과 스크레이핑 학습 1. 크롤러 > 웹 페이지의 정보를 추출하기 위한 프로그램 2. RSS 리더 > 사람 대신 크롤러가 RSS 피드를 확인하고, 변경 사항이 있는 경우에 알려줌. > SNS에서 웹페이지 URL을 공유하면 페이지의 제목과 이미지를 미리 보기로 출력해 주는데, 이것도 크롤러가 해당 페이지를 방문해서 관련된 정보를 추출하기 때문에 가능하다. 3. 크롤링 > 크롤러를 사용하여 데이터를 수집하는 것 4. 스크레이핑 > 웹 페이지에서 필요한 정보를 추출하는 작업 > 다운로드한 웹 페이지에서 필요한 정보를 추출하는 작업 5. 크롤링과 스크레이핑 분야에서 사용되는 라이브러리/프레임워크 > lxml, Beautiful Soup, Scrapy 등 > 서드파티 라이브러리 6. 우분투..

2020. 8. 30.
자기개발/TIL

TIL(Today I Learned) 20200829

회귀분석 예측 실습 회귀분석 예측을 실습했는데, 한 가지의 문제점이 생겼다. CSV파일을 read.table과 read.csv로 2가지 형태로 읽어와서 회귀 모델을 만들고, predict를 하는데 read.table에서는 1가지의 행에 결과가 나오는데, read.csv로 한 것은 1개에 데이터 크기의 만큼 결과가 나왔다. 1) read.csv를 한 상태에서 따로 test data set을 만들어서 했지만 에러 발생 2) data.frame을 만들어서 했는데도 에러 발생 아직 해결하지 못했지만, 삽질을 더 많이 해야겠다.

2020. 8. 30.
자기개발/TIL

TIL(Today I Learned) 20200828

카이제곱검정의 이론과 카이제곱의 코딩 실습을 진행했다. 1. 카이제곱검정 > 변수 간 독립성에 대한 귀무가설이 타당한지를 평가하는 검정 > 종속변수가 범주형자료인 경우에 사용하는 분석기법 > 범주형 자료 분석은 적합도 검정(goodness of fit test), 독립성 검정(test of independence), 동질성 검정(test of homogeneity)의 3가지로 분류할 수 있다. 1) 적합도 검정(goodness of fit test) > 관측값들이 어떤 이론적 분포를 따르고 있는지를 검정 > 한 개의 요인을 대상으로 함 2) 독립성 검정(test of independence) > 서로 다른 요인들에 의해 분할되어 있는 경우 그 요인들이 관찰값에 영향을 주고 있는지 아닌지, 요인들이 서로 ..

2020. 8. 28.
자기개발/TIL

TIL(Today I Learned) 20200827

통계 일변량 분석 기초의 이론과 실습을 진행했다. 오랜만에 하는거라 많이 잊어버려 다시 공부하고 있다. 통계 일변량 분석 기초 http://yongku.tistory.com/1012 통계 일변량 분석 기초 1. 평균 평균(Average)은 가장 기본적인 위치 추정 방법으로, 모든 값의 총합을 값의 개수로 나눈 값입니다. 모집단의 표본의 평균을 의미하는 라는 기호를 사용합니다. 2. 절사평균 절사평균(Trimmed yongku.tistory.com 이변량 분석인 상관관계와 상관계수에 대한 이론과 실습에 대해 학습하였다. 통계를 다시 시작하려니 많이 막히고 생각이 안난다. 1. 상관관계 수많은 데이터 분석 프로젝트에서 탐색적 데이터 분석을 하면 예측값과 목푯값과의 상관관계 분석은 필수적입니다. 상관관계는 X..

2020. 8. 28.