python/웹크롤링

Tor browser 로 selenium webdriver 크롤링 ip 우회 [Windosws] : 네이버 블로그

달죽 2020. 11. 10. 09:01
반응형
 
from selenium
import webdriver from selenium.webdriver.chrome.options
import Options
for i in range(3):
chrome_options = Options()
chrome_options.add_argument("--proxy-server=socks5://127.0.0.1:9150")
driver = webdriver.Chrome(executable_path='C:/Users/user/Desktop/크롤링/crawler/crwaling code/chromedriver/chromedriver.exe', options=chrome_options)
driver.get('https://whatismyipaddress.com/')

그냥 tor brower 실행 후 이거 실행하면 된다

​

톨브라우저는 여기서 깔면된다

​

https://www.torproject.org/download/languages/

​

파이어폭스로 하다가 짜증나서 해봤는데 이거로 tor로 크롤링 가능

​

크롤링 아이피 우회 #크롤링 #파이썬 #윈도우 리눅스에서 tor 쓰는 예제밖에 없어서 짜증났는데 window 에서 가능하다.

​

​

Tor 유저들끼리 타인의 트래픽이 자신의 컴퓨터를 거쳐갈 수 있게 하여 서로 도움을 줄 수 있다. 설정이 미리 되어있으나 Configuring a Tor relay를 참고하면 좋다. Tor 네트워크가 전체적으로 빨라지는 효과가 있으므로 하는 것을 추천한다. 이때 전기세랑 메모리 할당이 발생할 수 있다. 사용자가 번역을 해서 도움을 줄 수도 있다.

​

Tor 브라우저를 실행한 후 아이피를 127.0.0.1으로, 포트를 9150으로 프록시설정을 하면 다른 프로그램에서도 Tor 네트워크를 사용해 통신 할 수 있다.(socks5 프록시) 그 외에도 모바일에서는 어플리케이션을 통해 타 브라우저 이용을 지원한다.

나무위키

​

반응형