처음 Python을 찾아 본 이유는 웹 크롤링을 해보기 위해서 였습니다. 지금 웹 스크래핑을 먼저 배우고 있는데요. 크롤링? 스크래핑? 그놈이 그놈 같은 이 기분을 해소하기 위해서 개념을 알아보려고 합니다. 웹 크롤링, 스크래핑의 개념 많은 사람들이 웹 페이지에서 필요한 정보를 긁어서 수집하는걸 웹 크롤링이라고 생각합니다. 저도 이렇게 이해를 하고 있었는데요. 이게 명확한 표현은 아닙니다. 정확한 내용을 이해하려면 개념을 파악해야 합니다. Web Scraping(웹 스크래핑)이란? 웹 사이트 상에서 원하는 부분의 위치한 데이터를 추출하여 수집하는 기술. Web crawling(웹 크롤링)이란? 자동화 봇(bot)인 웹 크롤러(web crawler)가 정해진 규칙에 따라 복수 개수 웹 페이지를 브라우징하는..
혹시 프로그래밍 언어를 공부하고 싶은데 환경 설정 때문에 미루신 적 있으신가요? 비주얼 코드(Visual Code), 비주얼 스튜디오(Visual Studio), 다른 코드 편집기 등 설치를 미루셨나요? 코딩 입문자분들이 어려워하시는 부분도 이런 설치, 환경 설정 등에 있다고 생각됩니다. 저는 요즘 Python으로 웹 크롤링을 하고 싶어서 보고 있는데요. 지금 기본적인 Python 문법을 익히고 있습니다. 별다른 환경 설정 설치 없이 해보고 있죠. 코딩을 해보기 위한 준비물은 크롬만 있으면 됩니다. 이제 다양한 언어를 사용해 볼 수 있습니다. 어떻게 할까요? Repl.it 사이트를 이용하는 겁니다. Repl.it Repl.it 은 온라인 IDE입니다. IDE는 통합 개발 환경(Integrated Deve..