Wookang makes AI

* 동기forge가 뭔지도 몰랐는데  아래 영상 덕분에 알게 되었다. 말그대로 webUI의 강화버전으로 보였다.특히 SVD를 webUI에서 사용할 수 있다는 것이 마음에 들었다.  * 설치하기- 나처럼 개발좀 안다고 기존 webUI에 git branch를 바꿔서 설치하지 마라. 그 동안 내가 커스터 마이징해왔던 파일들 때문에 merge가 곤란해진다. 설령 백업후 discard한다해도 requirements 라이브러리가 달라 계속 꼬인다. 그냥 새로 설치하자. 1. webUI 설치와 동일하게 하면 된다.git clone https://github.com/lllyasviel/stable-diffusion-webui-forge.git sd-forgecd sd-forge실행하기 전에 기존 webUI의 모듈을 가..

* 동기이미지를 움직여보고 싶었다. 최근 유튜브 준비를 하고 있는데 내가 뭐 멋진 영상을 찍고 끝내주는 편집을 하고 그러지 못하기에 sd로 뽑은 멋진 이미지들을 움직여 조금이라도 영상에 적합한 소스를 만들어보고 싶었다. Runway가 가장 유명해서 사용해봤는데 확실히 쉽고 빨랐다. (아래 영상)- 하지만 무료버전은 이미지 해상도가 뭉개지고 오른쪽 하단에 워터마크가 크게 나온다. 저 3개의 원은 계속 움직이며 시선을 끈다.- 유료버전의 credit도 어떤 방식으로 소비되는지 복잡하게 되어있다. 월 12달러에 625크레딧을 주는데 이게 무슨 의미인지 이걸로 몇개의 영상을 만들 수 있는지 감이 오지 않았다.- 뭔가 새로운 움직임에 대한 기대감이 적었다. 움직이고자 하는 objects를 선택할수 있는건 좋았지만..

* 서비스를 사용할지 결정하기1. '말하는 AI 아바타'를 내 PC에서 직접 만드는 방법은 현재(24.07.01)까지 stable diffusion webui에서 sadtalker를 이용하는 것 외에 찾아내지 못했다.2. sadtalker(https://github.com/OpenTalker/SadTalker)는 마지막 업데이트가 9개월 전이고 이제 더이상 업데이트를 기대할수 없는 dead 상태이다. 상업화된 서비스는 많은데 오픈된 서비스가 없다는 건 그만큼 시장성이 없다는 뜻일지 모르겠다.3. 그럼에도 sadtalker의 품질은 괜찮아 보인다. coqui tts와 함께 쓰면 나쁘지 않을 거 같다. * 설치 상황1. 윈도우 버전을 설치한다.2. stable diffusion webui 1.7이하 버전에서..

xtts-webui는 자연스러운 음성생성 xtts를 사용하기 쉽게 만든 라이브러리다.https://github.com/daswer123/xtts-webui.git GitHub - daswer123/xtts-webui: Webui for using XTTS and for finetuning itWebui for using XTTS and for finetuning it. Contribute to daswer123/xtts-webui development by creating an account on GitHub.github.com *  윈도우에 설치 하기- 깃헙에 설명된대로 아주 간단하게 설치된다. 개발자가 배치파일을 잘 만들었다.1. git clone https://github.com/daswer123/..

올해 초 처음 테무에서 실험삼아 가방과 무선 이어폰을 샀다.  모니터 화면으로는 그럴듯했으나 실제로 받아보니 재질이 이상했다. 부스럭 거리는 비닐같았다. 그리고 너무나 가벼웠다. 그냥 보기에도 싼티 작렬이었다. 실제로도 쌌으니 할말은 없었다.무선이어폰은 충전단자가 micro usb 옛날 방식이었다. 소리는 나쁘지 않았지만 기능에 문제가 많았다. 이어폰을 귀에서 제거하고 케이스에 넣어도 음악이 계속 흘러나왔다. 휴대폰과 이어폰의 연결이 자동으로 끊어지지 않았다. 휴대폰에서 직접 음악을 멈춰야만 이어폰에서 나오던 소리가 멈췄다. 휴대폰에서 블루투스 접속을 직접 끊어줘야만 했다. 한마디로 쓰레기였다. 당시 테무에서 결제 정보를 빼간다는 소문도 나돌았다. 바로 카드정보를 삭제하고 앱도 지웠다.내가 다시 테무로 ..

● 동기AI작업을 하다보면 4090의 24GB vram이 간당간당 할때가 있다.보통 llama2 13b 모델이나 Mixtral의 8x7B 모델은 양자화 시켜 돌릴 수 있지만 max length 조절을 섬세?하게 해야한다. yanolja-eeve의 경우도 마찬가지다. 메모리 100메가 차이로 가끔씩 out of memory 메시지를 토해낼때가 있다.이때는 메모리 100, 200메가도 소중한데 이 경우 모니터 출력에 사용하는 메모리만 줄여도 큰 도움이 된다. 내 모니터의 경우 대략 300메가 이상을 먹는다.  그래서 컴퓨터를 앞에 두고도 직접 접속하지 않고hdmi 더미 플러그를 이용한 가상의 모니터에 ssh로 원격접속해 vram을 아껴쓰기도 했다. 잠시마나 내장 그래픽을 이용하자는 생각도 했었지만당시 hp에..

오랜만에 stable diffusion webui에 접속했더니, 아예 돌아가지가 않았다.체크포인트를 추가하고 프롬프트를 넣고 생성버튼을 클릭해도 이미지 자체가 생성되지 않았다. * xformers에서 지원하는 토치 버전 문제 xformer는 이미지 생성 가속화 라이브러리다. 업데이트 되면서 torch 2.1.2버전을 요구했다. 하지만 내 torch버전은 2.0.1이었다. 업그레이드 방법은 간단하다.1. webui-user.bat 파일을 연다. set COMMANDLINE_ARGS=--reinstall-xformers --medvram --xformers --reinstall-torch2. 위처럼 --reinstall-torch 인자를 추가한후 저장하고 다시 webui-user.bat을 다시 시작한다.3...

도다리 고급 번역이 어느정도 안정됨에 따라 코드 공개를 결정했습니다.vram이 23이상일때 야놀자 모델사용 가능운영체제가 리눅스일 경우 vllm(AI 가속 모듈) 사용 가능번역 프롬프트 커스터마이징필터 문구 커스터마이징현재 코드는 개발자인 저에게만 맞춰져 있어 빈틈이 많습니다.모두가 쓸수 있게 바꾸는데에는 시간이 좀 걸릴 것 같습니다. 소스코드 전면 공개 후 다시 공지하겠습니다!현재(24.07.19) eeve(고급번역)모델을 파인튜닝하고 있습니다.여러방식으로 전처리, 후처리, 프롬프트 엔지니어링을 테스트 해보았지만번역 출력시 발생하는 환각현상을 제거하기 어려웠기 때문입니다. 오늘 3차 파인튜닝 결과물을 이용해 테스트를 하고 있는데 지금까지는 결과가 희망적으로 보입니다. => 다시 비관적으로 보입니다ggu..

* 네이버 스마트 스토어를 통해 도다리를 이용하실수 있습니다.1. 도다리 텍스트 txt 고급 번역하러 가기2. 도다리 전자책 epub 고급 번역하러 가기3. 도라리 70분 자유번역하러 가기

* 동기1. 기술관련 영상은 자동생성 자막이라도 어찌어찌 해볼만하지만 다큐멘터리나 인터뷰 영상의 경우 도저히 화면을 따라갈수 없었다.2. 높은 수준이 아니어도 좋으니 내용을 어느 정도는 따라가게 해줄 번역이 필요했다. * 기능1. 이에 도다리 에 자막번역(srt파일) 기능을 추가했다.2. smi 번역도 추가할까해서 알아보니 이건 한국에서만 사용하는 파일형식이라 한다. 그래서 빼버렸다.3. 사용법은 다른 번역과 완전히 동일하다. srt파일을 드래그 하여 첨부한 후 번역버튼을 누르면 된다. * 유튜브 영상에 대하여1. 사실 유튜브 주소만 넣으면 영상과 자막을 자동으로 받고 번역까지 하는걸 이미 개발했다.2. 그런데 비슷한 기능을 가진 라이브러리 whisper-webui 가 이미 있다.3. 다른 점이라면 wh..