jsup.GEN - AI를 이용한 이미지 -> 이미지 생성 검토

Image
by joviansummer original STEEMIT post: https://steemit.com/blog/@joviansummer/4dl3wg-jsup-gen-ai jsup.GEN 실험 - 스팀잇에서 AI 기반 이미지 생성 현재 jsup.GEN 서비스는 텍스트 프롬프트(prompt)로부터 이미지를 생성하는 기능을 가지고 있습니다. 이것은 나름 흥미로운 기능이긴 하나, 영문으로 다수의 키워드를 입력해서 원하는 이미지를 구체적으로 설명해야 하기 때문에 생각하는 결과물을 만들어 내기가 그리 쉽진 않습니다. 따라서, 이미 존재하는 이미지를 기준으로 삼아서 특정한 스타일의 이미지를 생성하는 기능이 효용성 측면에서는 좀 더 우수할 것 같습니다. 이미지로부터 이미지를 생성하는 기능을 검토하고 있는데, 2가지 방법을 생각하고 있습니다. 첫번째 방법은 아래와 같이 2개의 명령어를 구현하는 것입니다. !gen_t : 이 명령어는 텍스트 프롬프트에 더 비중을 두고 이미지를 생성합니다. 입력하는 이미지를 기준으로 삼지만 텍스트 프롬프트로 지정한 내용의 영향이 크게 작용합니다. !gen_i : 이 명령어는 입력 이미지에 더 비중을 두고 이미지를 생성합니다. 따라서 출력 이미지는 입력 이미지와 매우 비슷하며 텍스트 프롬프트에 의해 약간의 수정이 가해진 형태로 생성됩니다. 두번째 방법은 !gen_i 명령어 하나만 제공하고, 위의 2개 명령어 사이의 적당한 중간 지점의 비중을 찾아서 설정하는 것입니다. 어떤 방법을 선택해서 사용하던지 실험을 좀 많이 해 봐야 될 것으로 보입니다. AI쪽에 익숙하지 않아 생소하다는 문제도 있고 아직 작업이 많이 진행되지 않았기 때문에, 실제로 이 명령어들을 성공적으로 구현할 수 있을지 어떨지는 확실치 않습니다. 그러나 어쨌든 작업은 시간이 나는대로 계속 진행해 보려고 합니다. 감사합니다. @joviansummer의 스팀 프로젝트 스팀 증인노드를 운영중입니다. @jswit에 증인투표해 주시면 감사하겠습니다. ( h...

[ENG] jsup.GEN experiment - connecting image AI with Steemit

by joviansummer
original STEEMIT post: https://steemit.com/blog/@joviansummer/eng-jsup-gen-experiment-connecting-image-ai-with-steemit


Hello, this is @joviansummer(witness: @jswit). jsup.GEN is an experiment to develop a function to generate images on Steemit. I've been looking into image generation AI models for some time, out of personal curiosity.

Unfortunately, image generation via AI model is quite computation-intensive and GPU resource is expensive. Because of this, I'm sorry to say that scope and eligibility of this experiment is fairly limited. You're eligible for this experiment if the following 2 conditions are met:

  • more than 1000 SP delegation to @jsup

  • vote for witness @jswit

Image generation request can be sent by writing a reply. You don't need to write one to any specific post which means you may just write a reply to your own post. (I simply didn't want anyone to write one-line post just to make a request.) The request must be one-line starting with "@jsup !gen", and the prompt must be in English. Below is a request example:

@jsup !gen beautiful sunset on the beach, clouds, sailboat, watercolors painting style, best quality

If the request is received, @jsup will write a reply to the request. After image generation is complete, @jsup will write another reply containing the link to the image. The model configuration is biased toward Japanese anime/illustration, so it tends to generate something close to that rather than a photo-realistic one. Below is a result example:

res.jpg

Daily limits of requests are as follows, which are subject to change:

  • SP delegation to @jsup equal to or greater than 1000sp and less than 10000sp: 1 requests

  • SP delegation to @jsup equal to or greater than 10000sp and less than 30000sp: 2 requests

  • SP delegation to @jsup equal to or greater than 30000sp: 4 requests

Currently I can't get 24/7 access to GPU computation, so it may take more than 24 hours to get the results. Also, considering it's the first test phase, which means that there might be some bugs in my code and the service may be suspended for code revision.

Because of cost issue, I'm not sure about how long this experiment can continue. But I think it's worth testing the water.

Thank you for reading, and have a wonderful day!


@joviansummer's STEEM projects

@jswit witness:
I'm running a STEEM witness node. I'd really appreciate it if you vote for my witness account @jswit. (https://steemitwallet.com/~witnesses)
[ENG] Introducing @jswit witness project

@jsup curation:
[ENG] Introduction to @jsup curation project
[ENG] Using @jsup curation project as an auto-voting agent
[ENG] jsup 2.0 - make your upvote great again

Steemit-Search:
Steemit-Search: a simple website for post searching

jSTEEM:
jSTEEM project - STEEM blockchain explorer on Telegram messenger

Comments

Popular posts from this blog

스티미언의 영향력 지수 계산

jsup/avle code update - you don't have to write post everyday

jsup/avle 보팅 코드 갱신 - 1일1포스팅 강박에서 벗어나기