파이썬
-
크롤러 만들기: session 처리 필요한 경우파이썬 2021. 7. 21. 19:01
크롤링을 하다 보면 cookies = { '_ga': 'GA1.1.1~~~~~~', 'csrf_cookie': 'hgjieofj92ejodijfsdf2323kb39', 'sessionid': 'hgjieofj92ejodijfsdf2323kb39', ~~ } 처럼 sessionid 라는 값을 보내야만 데이터를 받을 수 있는 사이트 들이 있다. 이런 경우는 대부분 로그인 을 한 후, 해당 서버의 session id 값으로 진행을 하기 때문에 일반적인 request 호출을 해서는 해당 session id 값을 알기가 어렵다. 파이썬에서 해당 session을 사용하는 방법은 다음과 같다. import requests # Session 생성 s = requests.Session() # 여기서 부터 requests..
-
python filter 사용파이썬 2021. 4. 26. 18:35
test_string = """ [{ 'segmentation': [ [216.7, 211.89, 216.16, 217.81, 215.89, 220.77, 215.89, 223.73, 217.77, 225.35, 219.12, 224.54, 219.12, 220.5, 219.66, 217.27, 219.93, 212.7, 220.46, 207.85, 219.66, 203.01, 218.85, 198.43, 217.77, 195.74, 216.7, 194.93, 215.62, 190.62, 215.62, 186.59, 214.27, 183.89, 211.85, 184.16, 211.85, 187.66, 210.24, 187.66, 209.16, 184.97, 207.81, 183.36, 205.12, 18..