2022年8月2日

AIに雑な下絵をわたして「続きを描いておいて」という実験をしたらこうなった

進化スピードがすごい
491
深津 貴之 / THE GUILD / note.com @fladdict

THE GUILD。note.com プラットフォームのサービス設計を考える人(CXO)。人の行動や体験のためのデザイナです。インターネット上の無駄なケンカや攻撃性を減らして、多様な知の高速道路を復活させたい。書き物 → note.com/fladdict

note.com/fladdict

今度はこんな実験を

深津 貴之 / THE GUILD / note.com @fladdict

この雑なラクガキをAIに渡すじゃろ…すると、こうなるんじゃ! DiscoDiffusionをカスタマイズして、下書き誘導で画像を生成できるようにするテスト。 pic.twitter.com/26fK6NMeaN

2022-08-01 17:02:51
拡大
拡大
深津 貴之 / THE GUILD / note.com @fladdict

AIに雑なラクガキ渡して、誘導する実験 2 pic.twitter.com/81G37ahd87

2022-08-01 17:15:13
拡大
拡大
深津 貴之 / THE GUILD / note.com @fladdict

これがこうなる…もうちょっと精度をあげたいぃぃ。 pic.twitter.com/KjpUpYJXIr

2022-08-01 18:03:10
拡大
拡大
深津 貴之 / THE GUILD / note.com @fladdict

画質あげると、今度は元構図に忠実じゃなくなってくるな… バランス… pic.twitter.com/WVcBEnYlsa

2022-08-01 19:13:31
拡大

すごい

mio@がっくん(BBの姿 @_mio_2525_

これすごいな もうちょい精度と自由度上がってきたら背景とかも秒でできるんじゃね? twitter.com/fladdict/statu…

2022-08-02 10:36:32
Tsuchiya Satoru(つっちー) @tutti0514

雑な下絵投げたら簡単なイラスト(というか図)なら作ってもらえそうだな twitter.com/fladdict/statu…

2022-08-01 18:06:46
海老庵🦐 @evian

これを極めていけば絵コンテからアニメが作れる?かも。 twitter.com/fladdict/statu…

2022-08-01 17:17:35
ワクさん@日常 @waku_3rd

AIの学習スピードがすごい。。。

2022-08-02 17:50:20
同様の実験をされている方も
takio koizumi | takion.eth @takion0105

@fladdict 素晴らしい実験です! ちょうど自分も全く同じテストをしていたので驚きました! ベースレイアウトの色とプロンプトのバランス、SkipStepsの設定など段々つかめてきました! pic.twitter.com/6W2tSd2wR5

2022-08-01 22:18:56

さらに実験は進み…

深津 貴之 / THE GUILD / note.com @fladdict

AIに雑な下絵をわたして、「続きを描いておいて」という実験をしている。 わりと面白い成果がでてる。 pic.twitter.com/FvnstrljJs

2022-08-02 11:48:46
拡大
拡大
深津 貴之 / THE GUILD / note.com @fladdict

AIに雑な下絵をわたして、「続きを描いておいて」という実験をしている。2 誘導が黄色に引っ張られちゃってるが、意図と構図はうまく伝わってる。 pic.twitter.com/IOrT7wYyf3

2022-08-02 11:49:43
拡大
拡大
深津 貴之 / THE GUILD / note.com @fladdict

AIに雑な下絵をわたして、「続きを描いておいて」という実験をしている。3。 意図を汲んで、素晴らしい絵を描いてくれるのだが… まだ僕が使いこなせてない感ある。ただ、こういう「頭でっかちで足腰が弱そうなメカ」みたいのは、言葉で指定するより絵で指定するほうが精度が高い。 pic.twitter.com/misxZKzXn5

2022-08-02 11:56:39
拡大

こんな点は気になるものの

ゲルやん @gel_hoehoe

すげぇ!と思うと共に結構発注側の意匠を無視するんだなと、逆間接、張り出した脚のパーツ、平たい上半身とかは反映せず全体の雰囲気だけ理解して好きに描いてる感じがする twitter.com/fladdict/statu…

2022-08-02 12:45:58
toyo @toyo9

人っぽいのはいなくなっている? twitter.com/fladdict/statu…

2022-08-02 12:12:56
残りを読む(32)

コメント

フラスケ @fulasuke 2022年8月2日
なんかロボットの造形はエレクトリック・ステイトというかシモン・ストーレンハーグから拝借してる感じがあるなあ。なんだか高度なコラージュな気がする。
49
フナムシミー @A_193 2022年8月2日
fulasuke 既知感の正体はそれだ、ありがとうスッキリした。
1
地雷屋ハイパーマルチメディアクリエイト店@なぜか上海 @mine__0 2022年8月2日
画伯の「スプー」の絵から続きを描かせたらどうなるんだろう?
83
よーぐる @Seto_yasu1987 2022年8月2日
既存の絵から似たような物を持ってきて再構築って感じなんだろうなって思う
2
むぎちゃ @mugicha_gbf 2022年8月2日
AIを調教して作品発表会が開かれそう
1
@boAThOwS 2022年8月3日
黄色い絵の下絵の構図に存在した、人物とロボの対峙を抜かしてしまうのは、構図の意味を読み取れてないからだな。その辺は文章と下絵で指定したら何とかなるんだろうか。配色・陰影・モチーフ・全体のバランスはとれてるのに、細部の意味化がされてない。エントロピー増やす為に人間の一手間は要る感じだな。良い「筆」だと思う。
34
mmmmmtttt37 @mmmmmtttt37 2022年8月3日
2つ目の下絵はディグダグかと思った。
3
1990 @keepontryandtry 2022年8月3日
自分も使ってみたい・・・
3
筋トレナースマン@滅びよ人類 @m2_tanaka 2022年8月3日
人物が入ってるもの意外ならラノベとかの挿絵はほぼ全部AI任せでいけてしまうんじゃね?と思ってしまう出来。
1
ですの @_desuno_ 2022年8月3日
伝説の発注絵コンテと呼ばれてるヤツとかもこのAIに仕上げさせたらどうなるんだろう、漫画のネームみたいにキャラ名結構入ってるから難しいかな
0
R.Mory@Togetter @RMoryTogetter1 2022年8月3日
その雑な下絵に3パターンぐらい少しの何かを付け足して続きを描かせたときの違いとか見てみたい
1
nekosencho @Neko_Sencho 2022年8月3日
おんなじ下絵から描かせたのだろう複数の画像が上がってるが、こういうのがある程度固定できる方が使いやすいよね。たとえば「このロボット少し横むけて」みたいな注文があったとき、回したのはいいけど別ロボットになってるのだと当然没だしさ
15
あおまきしゅにん @aomakipaper 2022年8月3日
下絵に「サクッと描けるからサク」を使うとどんなMSができるのか気になる
0
スズネ💉💉💉 @mattun_ 2022年8月3日
別にどんな絵でも良くて、挿し絵の画風が毎回違って良いなら、ラノベとか行けるさ。
1
スズネ💉💉💉 @mattun_ 2022年8月3日
というか、素人が画家に依頼するときに、ラフから起こして貰って、どうこの絵と違うのか。から始めていくと互いの認識合わせに良いかもしれない。
2
生え際ピンチ @haegiwapinch 2022年8月3日
四角を何色かに塗り分けてるやつから元のキャラが生成されたらどうしよう
1
wot-object @wot_object 2022年8月3日
一枚絵はすごいけど、同じキャラクターを別の構図でとかもできるのだろうか。もしできたら完全にマンガとかかけちゃいそうだけど
5
笹かま @voyageur105 2022年8月3日
すげー。これってAIの個性とかもでてきそうだな。画像作成時のヒントとなる画像をネットで探すならそのタイミングでも変わってきそうだし。
1
キタムラシステム @kitasys 2022年8月3日
ボブ・ゴーストですわ 落書きみたいな状態から恐ろしい仕上がりに持っていくプロセス含めて
0
luckdragon2009(rt多) ワクチン×3済 @rt_luckdragon 2022年8月3日
AI なので、自己学習像を投影しているだけでは。意図は学習元にそういう傾向が無かった、という事。
4
tgttr @tgttr4 2022年8月3日
漫画原作のスキャンと自分で考えたあらすじを入れたら同人誌作れそう 法律的にどうなるか知らんけど
0
捨てさん# @beryberychan 2022年8月3日
骸骨なのに皮膚つけちゃうのこっわ!人の先入観を超えてくるな
1
駄文垂れ流し機 @dabunmachine5 2022年8月3日
抽象画渡したらどう解釈してくるのかな、ゲリハルトリヒターとか
0
中華鍋 @nabesi_ 2022年8月3日
ドラクエのスライム原案を鳥山明が今の姿にしたって奴思い出した
1
doipo @doipo 2022年8月3日
メカとかパット見すごいのがでてくるけど、1枚毎にディテールが矛盾してしまうのがネックですなー。メカ用にチューニングが必要そう
1
asuraneko @読書垢、勉強垢 @asuraneko 2022年8月3日
そのうち、人間に求められるのは「生成されたものを選ぶセンス」だけになり、しかしそれもまたすぐにAIに取り込まれる。
0
GEN @gent9310 2022年8月3日
wot_object 写真から3Dを予想して構築するってのが既に見覚えがあるので、組み合わせとパターン学習ですぐにでも出て来そうですよね(アオリとかすぐにでもお願いしたい)
5
とろかぶと @torokabu 2022年8月3日
一番でかいのはこれに著作権がないフリー素材なことやろなあ。加工もトレスも無料でやっても今のご時世なのに何も怒られない。まあ、そのうち1点ごとにAI使用料とかでるだろうけど…
5
高見知英 @TakamiChie 2022年8月3日
深津さんのDALL-E2乗りこなしスキルが高いなあ とつくづく。わたしもDALL-E2のアカウントいただいたので使ってるけどこんなに書き込みの多い絵描いてもらえないもの。
2
じ〜げん〜 @jigen357mgnm 2022年8月3日
マンガのいわゆるネームと完成原稿で学習してもらって、日刊連載20ページ!とかのハイペースで漫画描けるようになるといいねww
0
あごにー @Agony_01 2022年8月3日
もしかして、概念と化した野獣先輩から野獣先輩を逆生成できるようになるのでは・・・?
2
あん粉し餡 @anko_3916 2022年8月3日
Agony_01 そんなこと学習させなくていいから(良心)
5
サクラアイル🐉 @sakura_aisle 2022年8月3日
夢の内容を映像出力する、みたいなやつに使われていきそう。
1
キャンプ中毒のドライさん(Drydog(乾)) @drydog_jp 2022年8月3日
事前学習次第ではワンパンマンの原作渡したらとなりのYJ版になって帰ってきたりしかねないかも
0
新井春陽 @a_lie_haruhi 2022年8月3日
動画も作れるようになったら【UP主が見たい】Bad Apple!! PV【誰か描いてくれ】みたいなのもガンガン作られるようになるのかな
6
山北篤 @Gheser 2022年8月3日
これ、恐らく欧米のイラストレーターの仕事を基本学習データにしてるんだろうな。もし、真っ白な状態から日本の萌え絵だけとか、ゴルゴ13だけとか学習させたりしたら、全然違う絵を描くAIになるんだろうな。
9
wowithdraw @wowithdraw 2022年8月3日
逆関節を逆に曲げたらあかん戦争になるぞ
0
しゅりぴ @_neru_you 2022年8月3日
1枚目、草原にいるうさちゃんになると思ったのに……
0
笹かま @voyageur105 2022年8月3日
依頼した人間はイラっとしそうな結果だな。「注文したのと違う!書き直して!」
0
wot-object @wot_object 2022年8月3日
gent9310 そうなんだ。すごい時代ですね。ほんと人間いらんくなっちゃう…
0
瑞樹@ウェーイワクチン接種3回終了 @mizuki_windlow 2022年8月3日
そのうち、ネームを書いて渡したら漫画にしてくれそう……
0
終了 @makitani32 2022年8月3日
おそらく人にはすごく特徴的に映るだろう鳥脚(逆関節)メカがなかなか伝わらないの面白いな。学習データの偏りだろうか。
0
ろろむじ @lolomji 2022年8月3日
近い将来、〇〇を絵師の××さんみたいなタッチで描いてと指定できるようになって問題になりそう
0
ma08s@フォロー外からごめんなさい @bygzam_ma08s 2022年8月3日
すごいとは思うけど、「自分と思ってた(期待してた)のとは違う」となった場合、リクエストやリテイクをどう要求していくかが問題になりそう。完成品(一枚絵)を出力するならこれで良しやけど、「デザイン」とか任せるのはまだ難しいかな、という気がしてきた。
0
魔宵蛾(休眠中 @mayoiga 2022年8月3日
エモげな背景(の下絵)をでっちあげて欲しいときや、TRPGのモンスターを用意するのにシルエットだけ決まってるとか単純なデティールだけ描けるときとか、なにか間に合わせででっちあげたり本番のヒントとしたりにはバカには出来ないなと思う。もちろん、本番の絵や元のイメージは人間がやる前提でだけれども。
1
くおんみどり🖖Master_Asia 作品集単行本発売中&楽曲配信中 @midorik 2022年8月4日
メカロボのやつ、重機動メカかウォーカーギャリアに見えたw
0
かつまた🎀あいね📛 @kamiomutsu 2022年8月4日
2つ目の下絵がディグダグにしか見えない…
0
サディア・ラボン(ヒエロサロメ、アスカローナ、プクヒルデ) @taddy_frog 2022年8月4日
AIじゃないけど、雑に描いた喧嘩の絵を人に渡したら、胸から上だけしかない巨人のお化けが空中に浮いてる絵になった事があるかな。 ミクロマン欲しいかも。
0
RAIYA@提督 @RAIYASB 2022年8月4日
fulasuke AIがどういうロボットを勉強してきてるのかも暗に示してる気がする ロボコップ風なロボット絵ばっかり勉強させたらロボコップ寄りの絵になったりしそう
3
ねや @AriaSub 2022年8月4日
おぉ、やっぱり雰囲気似たような何かを持ってきて合成させるのはAIの十八番だなぁ
0
akkr @akkr333 2022年8月4日
イラスト業界にAI分野からの圧力がリアルタイムで押し寄せているのを感じます。中世ヨーロッパ風にしろメカデザインにしろ、無秩序さが一部感じられますが、こういう作品と言われれば全く問題なく受け容れられるものが出力されてますね。少なくとも「こういう雰囲気の絵を描いて」は完璧でしょう。この衝突が良い調和を生むのか、それとも片方が押し負けることになるのか…目が離せませんね。
0
さやか @otlp1v2 2022年8月4日
クレヨンしんちゃんとかどんどん描いてもらお!
0
らじうむ小山_PPPM @Ra_koyama 2022年8月4日
まんがのキャラを下絵にするとどうなるのだろう。たとえばオバQとか… 著作権的に難しいか…
0
BLACK @BlackBlack0013 13日前
Ra_koyama  「AIに幕張ネズミに近い画像を描かせるチキンレース」みたいなのが流行ったりして。
1
fullbocco @fullbocco_bokko 13日前
雑な下絵としてムンクの「叫び」を渡したらAIはどんな判断をするんだろうか?
0
成田伸子/TENKY @BON_NOB 13日前
深津さんのツイートがまとまっていた。AI作画、DiscoDiffusionメモ。
0
イエーガー@ライファン @Jaeger75 13日前
a_lie_haruhi 先を越されてしまったけど(Bad Apple!!)、無理に動画にしなくても紙芝居形式なら今の時点でも作れるのか誰かチャレンジして欲しいって気持ちは有る。(俺はやりたくないw
0
イエーガー@ライファン @Jaeger75 13日前
fulasuke 結局「学習素材としてどういう絵をいっぱい取り込んできたのか?」が出力される絵に影響してるんでしょうね(特定の作家の漫画しか読んでない人が書いた漫画はその人のデッドコピーになってしまうのと同じ) 逆に考えれば、「AIを育てる際に特定の傾向を持つように学習素材を偏らせたら、狙った傾向を持つように調整可能なのかどうか?」って課題と、それが可能なら「特定の傾向を持ったAIを育てるブリーダー」って職業が成立する可能性が(もうあるのかもしれないけど
5
ぺ ん で る @pendelzug 13日前
教師画像が西洋画ばかりなのかそれ風の絵しか出力できない弱いAIか。アニメ絵や漫画、浮世絵や日本画など学習していない画風を生み出すようになれば面白いがね。
1
高見知英 @TakamiChie 12日前
pendelzug 同じDALL-E2ユーザーでアニメ絵(初音ミク)を描かせている方はいましたね。わたしもアカウントを持っているのですが、横浜の風景画と写真チックな画像を作ってもらいました。
0
ぱんどら @kopandacco 10日前
良い玩具である(悪い意味ではない)そのうちはちゅねミクみたいなんが出るのではについては同意したい。
0