Wookang makes AI

* 로그인을 하고 크롤링을 하는 이유 구글의 경우 로그인하고 나오는 이미지와 로그인을 하지 않고 나오는 이미지 목록이 다를때가 많다. 성인인증이 필요한 이미지들은 로그인을 해야만 가져올수 있다. * 사용법 정상적으로 크롤링되는지 확인완료 [23.06.20] 모듈 설치 - pip install undetected_chromedriver selenium 주석 1번에 이미지를 원하는 검색어 목록 입력 주석 2번에 폴더이름 입력. 이미지는 data\google\ 아래 저장됨 주석 3번에 상세이미지의 xPath 입력. 구글의 경우 자주 바뀌는 것 같다. 주석 4번에 구글 ID입력 주석 5번에 구글 비밀번호 입력. 이후 추가로 스마트폰 인증화면이 뜰 경우에 대비해 20초간 기다린다. ''' * 구글 이미지 가져오기..

네이버 이미지 크롤링하기동기1. 좋은 로라를 만들기 위해서는 이미지 파일들이 많을수록 좋다.2. 경험상 이미지 퀄러티는 구글보다 네이버가 더 좋았다 - 물론 구글 이미지 크롤링 코드도 공유할 예정3. 네이버는 구글에 비해 크롤링에 관대하다. 그래서 코드가 간결해진다 - 구글은 undetected_chromedriver 등을 사용해야한다. 사용법1. 2023년 6월 19일 현재 아래 코드는 잘 돌아간다. 사용하기 쉽게 주석을 많이 달아놓았다.2. 셀리니움이나 urllib등의 모듈 설치가 우선이다.pip install selenium3. 실행 후 크롬창이 뜨고 창이 최대화 된다. 4. 자동으로 스크롤되며 이미지 목록을 가져온다. 이때는 창을 내리지말고 스크롤이 끝까지 내려가 더 이상 가져올 이미지가 없을때까..

1. 먼저 우분투 22.04를 설치한다 wsl -l -o 설치 가능한 버전들이 뜬다 wsl --install -d Ubuntu-22.04 22.04를 설치한다. 2. 컴퓨터를 재부팅하면 다시 켜자마자 자동으로 알아서 설정 완료한다. 3. 설치 중 오류가 발생했다면 아래와 같이 윈도우 기능켜기/끄기를 검색한 후 Hyper-X와 Linux용 머시기를 체크해준다. 4. 재부팅 후 다시 시도하면 된다. 5. 그래도 커널에러가 발생할때가 있다 https://wslstorestorage.blob.core.windows.net/wslblob/wsl_update_x64.msi 위 파일을 설치한 후 커널을 업데이트하면 정상적으로 돌아간다. 6. 이제 업데이트 모두 하자 sudo apt-get update sudo apt..

ddetailer나 그걸 수정한 버전까지 여러가지 버전을 설치하고 실행해 보았으나 결국 에러가 났다. 그러다 발견한 것이 Adetailer다. 설치도 아주 간단하다. https://github.com/Bing-su/adetailer GitHub - Bing-su/adetailer: Auto detecting, masking and inpainting with detection model. Auto detecting, masking and inpainting with detection model. - GitHub - Bing-su/adetailer: Auto detecting, masking and inpainting with detection model. github.com 1. Extensions 탭을..

콘다로 새로운 가상환경 만들어준다 conda create -n textgen python=3.10 이 환경 아래에 설치한 후 활성화하기 conda activate textgen 라이브러리들을 설치한다 conda install cuda pytorch torchvision torchaudio pytorch-cuda=11.7 -c pytorch -c nvidia/label/cuda-11.7.0 이제 깃헙에서 받아오자 git clone https://github.com/oobabooga/text-generation-webui.git pip install ninja cd text-generation-webui pip install -r requirements.txt 위와 같은 에러가 뜬다. 한번 잡아보자. htt..