[파이썬 기초] 셀레니움(selenium) NoSuchElementException , ElementNotVisibleException 에러 해결 방법 selenium을 통해 크롤링을 하면 'NoSuchElementException , ElementNotVisibleException ' 와 같은 에러를 자주 만나는데요. 이와 같은 에러가 발생하는 이유는 렌더링 되기전에 특정 요소를 찾으려고 했기 때문입니다. 쉽게 말해 아직 웹페이지가 준비도 안되었는데 정보를 긁으려고 하다보니 발생 되는 문제인것이지요. 이와 같은 문제를 해결하려면 어떻게 해야 할까요? 간단합니다. 웹페이지가 준비가 다 될때까지 기다려 주면 됩니다. 파이썬에서는 여러가지 '시간 대기 메소드'가 있는데요. 그 중에서 오늘 알려드릴 메소드는 time.sleep, 명시적대기(implicit wait), 암시적대기(explicit wait) 총 3개 입니다. 각각의 차이점 및 사용법을 알아보겠습.. 파이썬/파이썬 기초 2020. 5. 13. [파이썬 기초] 엑셀에 이미지 삽입하기 엑셀에 이미지를 삽입하는데 오늘 우리가 사용할 라이브러리는 xlsxwriter 이다. 1. 아래와 같이 xlsxwriter을 터미널창에서 설치해주자.(pip install xlswriter) 2. 아래와 같이 필요한 라이브러리들을 import 해주자. 1) from io import BytesIO 엑셀은 이미지를 불러올때 바이트 코드를 받기 때문에 우리가 다운받을 이미지를 바이트 변환할때 사용되는 라이브러리다. 3. 네이버에 원하는 이미지를 검색하자 (ex.사자) 4. 다운받을 경로를 설정 해준다. 5. 엑셀을 이용하기 위한 초기 작업이다. 6. image url을 불러와서 바이트파일로 변환후 우리가 원하는 엑셀 셀에 사진을 넣어보자. >> worksheet.insert_image('원하는 셀', 이미지.. 파이썬/파이썬 기초 2020. 4. 2. [python 기초] PIL 을 활용하여 webp 이미지 확장자 변경하기 이미지를 다운 받았는데 webp이다..? WebP : 구글에서 만든 이미지 파일 포맷이다. '웹피'라고 읽으며 웹사이트의 페이지를 보다 빠르게 읽을수 있다. 쉽게말해 새로운 이미지 압축 포맷이라고 보면된다. 이미지를 변경하거나 수정하려고 파일을 열었는데 파일이 열리지 않을 경우 보통 파일의 확장자가 webp 인 경우가 많다. 이럴때 확장자를 우리에게 익숙한 jpg나 png 로 변환시켜줘야하는데 어떻게 확장자를 변환시킬 수 있을까? PIL 라이브러리에서 Image 클래스를 이용하면 쉽게 변경 가능하다! 우선 from PIL import Image 로 라이브러리 사용준비를 하자. 1. jpg로 바꾸기 1) webp 확장자를 가진 해당 이미지를 로드하기 위해 Image 클래스를 이용하여 open() 함수를 통.. 파이썬/파이썬 기초 2020. 3. 26. [python 기초] 이미지 다운 받기(requests, urllib.request) 이미지 다운 받기(requests, urllib.request) 아직도 손으로 직접 이미지를 클릭하여 저장하기를 반복하는가? 오늘은 이미지를 자동으로 관리하는데 있어 첫걸음인 이미지 다운 받는 법을 알아보자 이미지 다운받는데 사용하는 라이브러리로는 크게 두가지(requests,urllib.request)가 사용되는데 여러분이 편한 것으로 연습하고 숙달하면 된다. 바로 시작해보겠다. 1. 네이버에 사자라는 이미지를 가져오기 위해 '사자'라고 검색한다. 네이버에 사자 검색 원하는 이미지를 오른쪽 클릭 하여 이미지 주소 복사를 하면 해당 이미지의 url 주소를 복사하게 된다. * 인터넷 주소창에 이미지주소를 넣어 해당이미지가 잘 뜨는지 확인해보자. 1. urllib.request 를 이용하는 법 1) 2) 3.. 파이썬/파이썬 기초 2020. 3. 25. [python 기초] 셀레니움 XPATH 를 이용하여 원하는 정보 추출 우리가 크롤링할때 class 값이나 id값이 계속 변하거나 아예 없을 경우 원하는 값을 가져오기가 쉽지 않은 경우가 있다. 이런 경우는 xpath가 여러분의 유용한 도구가 되어 줄 것이다. 아래 예시를 참고하여 학습해보자. 챗gpt로 크롤링 하는 방법 1. 텍스트기준으로 찾기 우리가 크롤링 하고 싶은 부분은 노란색 블록 부분이다. 기본적으로 class값 이용하여 크롤링을 하지만 보다시피 알수 없는 문자로 이루어져있는 class값이다. 이런 class값은 시간이 변함에 따라 자주 변하기때문에 변할때마다 코드를 변경해야하는 수고로움이 발생한다. 이럴때는 변하지 않을 것같은 의미 있는 부분을 기준으로 크롤링하는것이 좋다. 필자가 여기서 변하지 않을 것으로 판단한 부분은 Choose your size라는 텍스트.. 파이썬/파이썬 기초 2020. 3. 20. [파이썬 기초] PIL을 이용하여 이미지 크기를 변경하자. 요즘 구매대행이나 스마트스토어 등 온라인 사업들이 활발해지면서 썸네일(thumbnail) 이미지 수정이나 상품 이미지 수정을 위한 여러가지 방법들이 소개 되고있다. 그중에서 이번 시간은 파이썬을 이용하여 이미지 크기를 수정하는 방법을 알아보자. 1. python 에서 이미지를 수정하기 위해선 PIL이라는 외부 패키지를 다운받아 이용해야 한다. 2. python 코드작성 우리가 수정할 이미지는 C:/ 드라이버에 있는 '이미지수정전' 라는 제목을 가진 jpg 파일이고. 이 파일을 PIL 패키지를 이용하여 '이미지수정후' 라는 제목을 가진 사이즈가 변경된 파일을 만들어 볼것이다. 추후 코드 작성 편의를 위해 수정할 파일이 있는 위치를 '수정할_파일'이라는 임의에 변수로 지정을 한다. 뒤이어 수정 후 파일이 있.. 파이썬/파이썬 기초 2020. 3. 10. 이전 1 2 다음