오늘의 컨디션은 어때?
이번 주에 시험이 2개나 있었어서 너무 지치고 피곤하다.. ㅠ 어제 새벽 4시까지 공부하다가.. 준비한 시험 보러 갔었거든.. 사실 내가 준비한 시험이 '독학사'라는 것인데 이게 우리 고등학교 때 모의고사 시험 보는 것처럼 총 4분기에 한 단계씩 4단계로 구분되어서 시험을 봐. 1단계는 오전 9시부터 오후 2시면 시험이 끝났는데 글세 이번에 본 2단계는 오후 3시 40분까지 시험을 보고 왔어.. 사실 학점이 필요해서 공부를 했던 거라 원래는 5시까지 시험을 봤을 건데.. 충분히 목표한 과목은 취득했다는 생각이 들어서 뒤도 안 돌아보고 집으로 도망쳤어 ㅠㅋㅋㅋㅋ
그래서 오늘 Udemy 공부도 후딱 끝내버리고 푹 쉬어야 되겠어! 오늘 컨디션은 많이 피곤.. 하지만 Udemy 강의는 짧고 실속 있게 구성되어있으니까 후딱 듣고 끝낼 수 있을 것 같아 ㅎㅎ 나중에 직장을 가더라도 이런 점들은 너무 좋을 것 같아 ~ 그리고 시험공부하느라고 몰랐는데 Udemy에서 지금 강의 할인 시즌을 하고 있나 봐! 나도 자세한 건 내일 가서 봐야겠지만 강의를 12,000원에 수강할 수 있던 것 같더라고 신규가입 혜택을 놓친 친구들 어서 가서 담아뒀던 강의 듣자! 솔직히 개발 공부 인강으로 듣는데 Udemy만 한 게 없는 것 같다. (링크)
오늘 정리한 내용은 뭐니?
오늘 복습한 파트는 섹션 4 Netflix 크롤링 파트였어. 지난 섹션 3에서 공부한 내용을 실전에서 적용한 개념이었고 섹션 후미에는 pandas를 활용하여 Excel로 보내는 작업까지 진행해보았어. 따라 하며 익히는 파이썬 데이터 수집 마스터 강의의 핵심은 이번 강의를 포함하여 앞으로 배울 부분에 들어있다고 보면 돼! 물론 그렇다고 해서 앞의 강의를 듣지 않으면 안 돼! 왜냐하면 기초적인 설명은 강의 전반부에 다 하기 때문이지 ㅎㅎ 각설하고! 이번에 공부한 내용에 대한 정리는 저번 1 회독 게시글에 그대로 적어놓았으니 오늘은 추출에 사용한 태그들만 간단히 정리해둘게!
구조 :
[섹션 리스트(섹션)] → [프로그램 리스트(프로그램)] → [프로그램 세부 정보(프로그램 제목, 이미지, 링크)]
태그 :
[section.nm-collections-row → h2] → [li] →[span.nm-collections-title-name, img.nm-collections-title-img,a의 href]
전체 학습 커리큘럼
오늘 공부했던 내용은 굵은 글씨로 표기해둘게!
| 1주차(20강) | 준비하기 | 강의 및 강사 소개 파이썬 설치하기 크롤링 방법 장단점 비교 설명 크롤링은 합법?불법?판례로 살펴본 크롤링 쥬피터 노트북 살펴보기 |
|
| 파이썬 익히기 |
컴퓨터와 소통하기
숫자 데이터 다루기
문자 데이터 다루기 여러 개의 데이터 다루기(리스트)
데이터 병합하기(리스트 합치기)
반복 작업하기(for 반복문)
조건에 따라 작업 진행하기(if 조건문)
문자 데이터 자유자재로 사용하기(f-string, 문자열 포매팅)
문자 데이터 내 맘대로 정리하기
|
||
| 크롤링 기초 |
Selenium & chromedriver 설치하기
브라우저 열기
웹 페이지 접속하기 &URL 살펴보기
얼렁뚱땅 HTML 살펴보기
HTML 에서 원하는 정보 가져오기( BeautifulSoup.select() )
|
||
| 2주차(27강) | Netflix 크롤링 |
넷플릭스 오리지널 페이지 살펴보기
섹션 파트 나누기
프로그램 파트 찾기1_섹션 제목 찾기
프로그램 파트 찾기2_프로그램
프로그램 정보 수집하기
모든 프로그램 정보 수집하기(with 반복문)
엑셀 파일에 저장하기
|
|
| Instagram 크롤링 |
인스타그램 페이지 살펴보기
인스타그램 크롤링 계획 설계하기
로그인 하기
태그 검색하기
게시글 클릭하기
다음 게시글 클릭하기
[게시글 정보 수집] - 본문내용
[게시글 정보 수집] - 좋아요 수
[게시글 정보 수집] - 작성 일시
수집 데이터 엑셀 파일에 저장하기
|
||
| Youtube 크롤링 |
유튜브 크롤링 소개
인기영상 리스트 수집하기1
인기영상 리스트 수집하기2
영상정보 수집하기1(제목, 조회수, 업로드 일자)
영상정보 수집하기2(좋아요, 싫어요, 채널명)
댓글수집하기1-총댓글수확인하기
댓글수집하기2-댓글가져오기
(코드정리)원하는 만큼 댓글 가져오기
|
||
오늘 하루 학습에 대한 평가와 느낀 점!
비록 고된 스케줄로.. 몸은 지치고 힘들었지만 공부하면서 사용한 태그도 정리해보고 자료들도 깨끗하게 정리해놓으니까 다음에 참고해서 보더라도 필요한 정보 찾느라 괜히 힘 빼고 힘들어하지 않을 것 같아서 마음도 안심되고 기분도 좋아졌어 ㅎㅎ 그리고 오늘 맛난 음식도 먹어서 더 기분이 좋았던 것 같아. 이제 지금까지도 잘 해왔으니 앞으로 남은 Challenge를 더욱 성실하게 마무리해서 꼭 우수 챌린저에 도전해보겠어!
Outro
좋은 기회를 제공해주셔서 감사합니다.
본 게시글은 UdemyKorea에서 제공한 프로모션에 참여하기 위해 작성한 게시글입니다.
인스타 주소 ⭐
https://www.instagram.com/f.inn_sharp/
#유데미#유데미코리아#스타트위드유데미#스터디윗미
'Life > review' 카테고리의 다른 글
| [Start with Udemy Challengers] 13일차 학습 후기-자문자답 (0) | 2022.05.24 |
|---|---|
| [Start with Udemy Challengers] 12일차 학습 후기-자문자답 (0) | 2022.05.23 |
| [Start with Udemy Challengers] 10일차 학습 후기-자문자답 (0) | 2022.05.23 |
| [Start with Udemy Challengers] 9일차 학습 후기-자문자답 (0) | 2022.05.23 |
| [Start with Udemy Challengers] 8일차 학습 후기-자문자답 (0) | 2022.05.20 |
