박조은 썸네일형 리스트형 [멋쟁이사자처럼 AI스쿨 8기] Day13. week4 - WIL AI스쿨 4주차 WIL(23.1.9 ~ 1.11) 박조은 강사님(오늘코드)과 함께하는 본격적인 python 강의 시작. 학습내용 Review 데이터 수집을 위한 판다스 기초. pandas란? 데이터 조작 및 분석을 위한 소프트웨어 라이브러리 숫자 테이블과 시계열 을 조작하기 위한 데이터 구조 와 연산을 제공 추상화된 도구를 통한 데이터 수집 FinanceDataReader을 통한 KRX 상장 종목 정보 수집 Web Scraping하기 전에 꼭 알아둘것 웹 스크래핑은 브라우저 상에 표기되어야 하는 모든 내용을 빠르게 요청하기 때문에 서버에 부담이 생길 수 있습니다. 서비스 제공자가 요청하는 방식인 API를 통하지 않은 데이터 수집은 데이터베이스권에 대한 침해행위일 수 있습니다. 웹 스크래핑을 할 때 한번에.. 더보기 [멋쟁이사자처럼 AI스쿨 8기] Day12 TIL ㅁ drop index, columns 값으로 삭제. 조건으로 삭제 => boolean indexing 사용 ㅁ 깊은 복사& 얕은복사 얕은 복사 : 주소 값 복사, data1 = data2 , 둘 중 하나의 값 변경시 모두 변경 깊은 복사 : 데이터 복사. __.copy ㅁ ssl 오류 > 인증서가 없는 사이트는 접속 시 웹 브라우저에서 에러 메세지 발생 > verify=False 설정을 통해 ssl 인증서 확인 과정 생략 * requests.packages.urllib3.disable_warnings(requests.packages.urllib3.exceptions.InsecureRequestWarning) 코드로 에러 메세지 생략 가 get : 필요한 데이터를 Query String 에 담아 전송 p.. 더보기 [멋쟁이사자처럼 AI스쿨 8기] Day11 TIL 웹 크롤링(web crawling): 수많은 웹사이트들을 체계적으로 돌아다니면서 URL, 키워드 등을 수집하는 것. 보통 검색 엔진이 웹사이트를 인덱싱하기 위해서 사용됨. 웹 스크래핑(web scraping): 웹사이트에서 필요한 데이터를 긁어오는 것. ㅁ API를 사용하여 데이터를 수집하는 이유 > API : application programming interface 허가된 인원만 정보를 제공, 누가 수집해 갔는지 파악 유료로 데이터를 판매하고 있는 사이트는 데이터 용량 등에 따라 과금 실시간성으로 제공하고자 하는 데이터(공공데이터)의 경우. 예) 부동산실거래가 정보 등 특정 사이트에 무리하게 네트워크 요청시 서버에 다운 가능 예) 다수 인원이 특정한 작은 쇼핑몰에 한번에 요청을 보내면 서버 다운 가.. 더보기 [멋쟁이사자처럼 AI스쿨 8기] Day10 TIL with 박조은(오늘코드) 오늘코드 박조은 강사님과 시작하는 본격적인 AI 스쿨의 일정 . Day10 ㅁ 비어있는 데이터프레임 생성 ㅁ 컬럼 추가 ㅁ 컬럼 값 변경 ㅁ 컬럼 삭제 ㅁ 데이터 요약 ㅁ loc&iloc ㅁ str.contains ㅁ to_csv / read_csv ㅁ 그리고 Null 은 데이터베이스에서 없는 값을 의미. numpy에서 nan 으로 결측치, 없는 값으로 표현. excel에서 N/A 로 표현. np.nan 은 float 타입 처리. df.drop?, help(df.drop) -> 도움말 df.drop?? -> 소스 코드 더보기 [코칭스터디 8기] 끝나고 쓰는 데이터 사이언스-2 약 1달간 진행하였던 부스트코스의 데이터 사이언스 코칭스터디. 나는 무사히 수료?에 성공했다. 부스트코스 데이터 사이언스는 '슬렉'을 통해 활동하며, 제공 강의의 무제한 수강과 더불어 강의 저자 직강 피드백이 가능한 프로그램이었다. 바로 '오늘코드'로 유명하신 '박조은' 강사님. 무려 800여명이 함께했던, 파이썬을 이용해 데이터 분석 업무의 맛보기를 수행했던 1달여의 보람찬 여정. 그리고 부트캠프를 찾던 나에게 멋쟁이사자처럼 AI 스쿨을 추천해준... 23년 목표는 to be 파이썬 마스터. 더보기 [코칭스터디8기] 끝나고 쓰는 데이터 사이언스-1 한창 adsp와 sqld에 정신을 못 차리고 있을 무렵, 언젠가 지원했던 네이버 모두의 연구소, 부스트코스 코칭스터디에 선정 되었다. 부스터는 코칭스터디에서 수강하는 학생들을 총칭하는 단어이며, 그 중 리드부스터는 각 조의 조장으로 생각하면 편하다. 주요 업무는 각 조원의 해당 참여율 보고. 학습 방법은 사전 강의(부스트코스 제공)를 코칭스터디 시작 이전 모두 수강 후 4주에 걸쳐 본 강의(부스트코스 제공)을 수강, 개인/팀 미션을 수행하며 매주 목요일 라이브 코칭(이라쓰고 티칭이라 읽는다)에 참여해 해당 강의에서의 Q&A 및 주간 과제의 목적, 코드의 개선안 공유 등의 시간을 갖으며 데이터 사이언스를 배워나가는 과정이다. 과연 22년의 '나'는 부스트코스를 무사히 수료 하였을까? 더보기 이전 1 ··· 3 4 5 6 다음
