본문 바로가기
Python/Web Scraping

[Python] #2.0 What is Web Scraping / #2.1 What are We Building (#코딩공부)

by 함께 공부해요 2020. 2. 12.

https://youtu.be/s4YWhgfEF68


<복습>

https://wook-2124.tistory.com/24

 

[Python] #1.13 Modules (#코딩공부 #모듈)

https://youtu.be/H995Ldft-s4 <복습> https://wook-2124.tistory.com/23 [Python] #1.12 for in (#코딩공부 #for문) https://youtu.be/0wpYyDlAEIg <복습> https://wook-2124.tistory.com/21 [Python] #1.11 if e..

wook-2124.tistory.com


<준비물>

https://repl.it/

 

The world's leading online coding platform

Powerful and simple online compiler, IDE, interpreter, and REPL. Code, compile, and run code in 50+ programming languages: Clojure, Haskell, Kotlin (beta), QBasic, Forth, LOLCODE, BrainF, Emoticon, Bloop, Unlambda, JavaScript, CoffeeScript, Scheme, APL, Lu

repl.it

https://docs.python.org/3/library/

 

The Python Standard Library — Python 3.8.1 documentation

The Python Standard Library While The Python Language Reference describes the exact syntax and semantics of the Python language, this library reference manual describes the standard library that is distributed with Python. It also describes some of the opt

docs.python.org


1. Web Scraping이란?

말 그대로 web에 있는 data를 추출해와서 보여주는 것! 내가 글을 포스팅할 때 공부했던 유튜브 영상을 올릴때 잠깐 이미지가 나오는 것도 web scraping에 해당된다.


2. 추가 설명

다른 곳에서 url 같은걸 가져오면 미리보기 이미지 혹은 글(기사제목 등)을 보여주는 것이라고 생각하면 된다.

 

앞으로 이 Web Scraping으로 indeed와 stackoverflow라는 구직사이트에서 python과 관련된 직업의 정보를 scraping해서 엑셀에 옮기는 작업을 할 것이다!! (사실 오늘 포스팅하는 날짜로 python course 수업을 완료하고 혼자서 project까지 진행완료한 상태지만..!!ㅋㅋ)


https://youtu.be/DM4uWbSdTNM


1. Python과 관련된 일자리를 엑셀시트로 옮기기 대작전! (indeed)

indeed 사이트에서 python, korea라고 치고 Advanced job Search 버튼을 통해 50문항씩해서 Scraping 할 것이다.


2. Python과 관련된 일자리를 엑셀시트로 옮기기 대작전! (stackoverflow)

stackoverflow도 indeed와 마찬가지로 Scraping 할 것이다.

그럼 Course 완료와 개인 Project를 선보이는 날까지 화이팅!! :)


※ 신종 코로나 바이러스 조심하세요!!!!

댓글