Crawling with python2 크롬 개발자 모드에서 원하는 Xpath 찾기 ● 인스타그램 해시태그 크롤러를 만들어보고자 몇 가지 코드를 시험하고 있는데 원하는 Xpath를 찾아서 클릭하기를 원할 때 1. F12를 눌러서 크롬 개발자 모드를 키고, 찾고 싶은 부분을 알기 위해 원하는 부분 우클릭 -> 검사를 누릅니다. 아래 그림과 같이 우측에 파란색으로 원하는 위치의 Element을 알 수 있습니다. 2. Xpath로 바꿔서 코드에 넣을 때 아래 그림과 같이 element 위에서 마우스 우클릭 -> copy -> copy Xpath 를 해주면 복사가 됩니다. 3. 코드에 적용하기 복사된 xpath를 원하는 위치에 붙혀넣기 해주면 됩니다. 2021. 1. 21. Selenium, Chrome Webdriver, Beautiful Soup 설치/ 에러 대응 2021-01-20 크롤링 독학을 시작해 보았다. 동기¶ 3-2학기에 금융데이터 분석 수업에서 크롤러를 제대로 사용하지 못하여 구글에게 밴을 당하거나 원하는 데이터를 자유롭게 얻지 못했던 기억이 있었다. 동생 친구에게 인스타그램에서 카페와 관련된 해시태그 수집 방법을 부탁받았었는데 뚝딱해주지 못하는 실력을 갖추지 못했던게 아쉽다. 필요 프로그램 설치¶ Selenium Beutiful Soup Chrome WebDriver In [6]: pip install selenium Requirement already satisfied: selenium in c:\users\dev_account\.conda\envs\dev_1\lib\site-packages (3.141.0) Requirement already s.. 2021. 1. 20. 이전 1 다음
