- 스터디에 참여해보세요!
#6주차 스터디 결과보고
1.스터디 일시 : 5/26 (화) 18:00
2.스터디 회차: 6번째 스터디
3.스터디 주제: week 6-내 마음대로 움직이는 로봇 브라우저
-week 5 복습: 사이트 내 멸종위기 동물 리스트의 이미지, 이름, 상세페이지 정보 수집하기
-week 6 추가내용: implicitly wait과 explicitly wait, send.keys('Keys.ENTER'), send.keys('Keys.PAGE_DOWN') 에 대해 추가 학습
4.불참자: 미란
5.활동사진: 스터디 사진을 첨부합니다.
크롤링 하는과정에서 다음과 같은 에러가 발생하였습니다. 발생주기도 계속 변하는데 어떻게 해결할 수 있을까요?
requests.reception.ConnectionError
#5주차 스터디 결과보고 (온라인)
1.스터디 일시 : 5/19 (화) 18:00
2.스터디 회차: 5번째 스터디
3.스터디 주제: week 5-데이터 수집 업그레이드
-week 4 복습: "망고플레이트, 테라스 있는 카페 베스트 55곳" 데이터 수집하기
-week 5 추가문제: "이마트몰>인기품목별BEST>라면 탭" 품목별 이름, 가격, 태그와 별점(제품 상세페이지에 있음) 수집하기
4.불참자: 없음
5. 활동사진: 온라인 스터디 사진을 첨부합니다.
#4주차 스터디 결과보고
1.스터디 일시 : 5/12 (화) 18:20
2.스터디 회차: 4번째 스터디
3.스터디 주제: week 4-데이터를 저장하는 방법
-week 3 복습: 인터파크 내 12개의 카테고리별 BEST 100 항목 크롤링하기
https://www.notion.so/3-BEST-100-a5dbdc84c3c34dfc863b1d1c21b477f5
-week 4 내용 더하기: 엑셀 데이터를 저장하는 방법 외에, 거꾸로 엑셀 파일을 파이썬에 불러오는 방법에 대해 추가로 공부했습니다. (Openpyxl 라이브러리, Pandas 라이브러리 이용)
https://www.notion.so/4-ab8e8b76493a4c4794dc8324bf035aa5
4.불참자: 없음
5. 활동사진: 오프라인 스터디 단체사진을 깜빡했네요ㅠ 단톡방 내용을 첨부합니다!
#3주차 스터디 결과보고 (온라인)
1.스터디 일시 : 5/5 (화) 18:20
2.스터디 회차: 3번째 스터디
3.스터디 주제: week 3-파이썬으로 데이터 수집하기
4.불참자: 없음
5. 활동사진: zoom으로 온라인 스터디를 진행했습니다! 화면을 캡쳐했는데 저장이 안됐네요ㅠㅠ 대신 단톡방 내용을 첨부합니다
대상 사이트에서 강동인님의 아이피에 대해 접속을 차단한 경우일 수 있어요.(너무 요청을 많이해서) 이때 request는 몇번더 접속을 시도해보는데 그것조차 실패했다는 문구입니다. 요청횟수를 줄이거나 접속자의 ip를 바꾸는게 방법입니다.
https://cnpnote.tistory.com/entry/PYTHON-%EC%B5%9C%EB%8C%80-%EC%9E%AC%EC%8B%9C%EB%8F%84-%ED%9A%9F%EC%88%98%EA%B0%80-URL-%EC%B4%88%EA%B3%BC%ED%96%88%EC%8A%B5%EB%8B%88%EB%8B%A4
짧은 시간 안에 하나의 IP주소에 너무 많은 요청을 보내서 생기는 오류같아! 링크를 확인해보면 6가지 해결방법이 있는데, 참고할만 해서 올려봅니닷:)