#1 of Python Web Crawling - 핵심 w/ 개발자도구

크롬 개발자 도구

핵심내용
  • 각 엘리먼트들의 selector (선택자) 추출이 중요
    • copy -> selector
  • Network 탭
    • Preserve log
      • 리프레쉬 해도 각 로드된 파일 이력 누적 됨
      • 크롤링 시, 액션에 대한 변화 확인 가능
    • 각 로드된 파일들 오른쪽 클릭
      • clear browser caceh
      • clear browser cookie
  • Performance 탭
    • 녹화 시점부터 모든 액션에 대한 성능 확인 가능
  • Application 탭
    • Storage
      • 세션
      • 쿠키
    • Cache
    • Application
  • Console 탭
    • 영역 내에서 직접 소스를 수기로 작성하여 동작 확인 가능
  • Source 탭
    • 로딩한 리소스 분석 및 디버깅 가능

댓글