这几天休假,关注的内容比较少。抽空看Discord时,注意到多个AI程序的公告里都增加了一个类似的功能,有的叫“基于文本的修改”,有的叫“Instruct模型”,简单试了一下,都是类似的通过输入文字,修改图片内容。例如公众号里多次介绍过的playgroundai.com的新功能介绍界面:另一个介绍过的stableboost.ai的新模型界面:看了一下,这应该都是基于最近伯克利研究人员发布的 InstructPix2Pix技术:一种可以在给定源图像和指令的情况下生成图像编辑的模型。简单说就是通过文本提示编辑图像。
演示页面:https://huggingface.co/spaces/timbrooks/instruct-pix2pix
论文:https://www.timothybrooks.com/instruct-pix2pix/GitHub: https://github.com/timothybrooks/instruct-pix2pix上面的演示地址相对比较慢,可以试一下前面提到的两个网站。下面是我在playgroundai.com的体验效果。turn the cat on the grasslandchange the sky to blue colorChange the image to Van Gogh style这个功能主要有两个参数,不同程序里的叫法不同,基本就是图像强度和文本强度,通过修改这两个参数,控制最终修改的效果。默认是1.5的图像CFG,7.5的文本强度。
Replace her clothes with sweaters.Replace her clothes with colorful wedding dress,Replace her clothes with colorful T-shirt,change to Flight attendant可以看到服装修改的效果非常方便,当然由于使用的都是通用模型,所以面部扩散的效果比较差,这里主要是演示新功能,没有设置较高的Steps。
现在网上的演示版也很多,感兴趣的还可以试试下面这个:https://huggingface.co/spaces/ysharma/InstructPix2Pix_Chatbot
根据你的喜好,推荐阅读以下AI绘画内容:
对写作者最好的支持就是
转发、点赞、关注、打赏