カクカクな動画を今話題のフレーム補完でヌルヌルにしてみた!「可能性を感じる」「著作権は?」

重スギィ
アニメーター アニメ フレーム dain-app テクノロジー ドット絵
105
Hirokazu Yokohara @Yokohara_h
8fpsのカクカクな動画を4倍のfpsへAI使った技術でフレーム補完させてみた。前から気になっていた技術が簡単に試せるDain-Appというアプリになっていたのでテスト。思った以上に綺麗に補完してくれる。少ないfpsでレンダリングして補完する使い道とかもいずれ出来そうかも。手描き系にも何か使えそう。 pic.twitter.com/VYh2KLDp39
感想など
ikamusume @keyandrealize
@Yokohara_h アニメ業界に取り入れられたらやばそう
Hirokazu Yokohara @Yokohara_h
@keyandrealize こういった新しい技術でアニメの中割とかの労力が緩和されるといいですよね
炬燵猫 @kotatsuneko720
@Yokohara_h 試しに5分程度のアニメを変換してみたけどRyzen 9 3900XとRTX2080S搭載のマシンでも放置して寝れるくらい時間かかるんですね… CPUやGPUの使用率が全体的に低く使い切れていないのが今後の課題になるかも? 出来上がったものの動きは素晴らしいので今後大いに期待ですね。
Hirokazu Yokohara @Yokohara_h
@kotatsuneko720 補完精度は素晴らしいけど、たしかに処理はハイエンドGPU使ってもかなり重いですよね。もっと軽くなって高解像度もいけると使い道が増えそうです。
鳩とピザまん 篠田連 @hato_pizza
DAIN-app、フォロー作画以外で使い途あるかな ツメ指示のとことかもいけそうか あ、あとフリッカーも 結構使えそうな予感
べーたまる @beta0526
ドット絵の補完もできるのか 結構使えそう kai-tei.daa.jp/2020_0120_1250…
伊藤周@オーナカ @warapuri
youtu.be/q2i6FXVjNT0 DAIN という2D特化型フレーム補間ツール。 これ、マジやばくない?ところどころ変なところあるけど、概ねちゃんとした結果が返ってきている。結構衝撃的なんだけど。 grisk.itch.io/dain-app でダウンロードできるっぽい。アニメもできるっぽい!?ゲゲゲゲ!
拡大
くろろ @Eagle966
Dain App はこちらからダウンロードできます grisk.itch.io/dain-app ・まだアルファ版で1GBもある ・メインウィンドウが出るまで10秒以上かかる事がある ・グラボがCUDA対応していないと使えない ・グラボのドライバが古いと使えないかも ・グラボのメモリ食うので処理中に落ちたらリサイズ出力
AMUTAS @AmutasAlpha
@Yokohara_h @gamsic アニメでは2Dと3Dを使う際、2D側のfpsが低いため、3D側をあえてfpsを下げている物もあるそうです。 これなら高いfpsで合わせられそうですね。
Bianchi_yuki @Bianchi_yuki
すごいなーぬるぬる動く。Gigazineの比較動画もみてるだけで面白い gigazine.net/news/20200121-… twitter.com/Yokohara_h/sta…
おめがレイ@バーチャル双子YouTuber @omesis_ray
コマ撮りした動画を話題の「Dain-App」でヌルヌルさせてみたら、すごい!!!! youtu.be/gLV8Ki0w95w pic.twitter.com/hRRrbrtZMG
実際に動かしてみた
閃乱マリナ @Senran_Marina
昨日のフレーム補完の続き 等速30FPSの動画の120FPS化だと差はあんまり見えないけど、スローにしたときに化けるのがわかってもらえると嬉しい (結局プチフリはフレーム補完でどうこう出来なかった😇 pic.twitter.com/GHo0mTujXw
閃乱マリナ @Senran_Marina
#FromTheDepths メモリオーバーによってカクカクになった動画をAIのフレーム補完によってある程度ヌルヌルに GTX1080のメモリ8Gで横720pixelが限界なので、高画質化は厳しいかも リプに補足書いていきます pic.twitter.com/IX8zOGxIul
鉃フェチ @anironfetish
Dain-app使ってフレーム補完してみたら予想以上にヌルヌル動いてびっくり pic.twitter.com/8Tc9gLqwFC
Fernando Bevilacqua @as3gamegears
Dark magic of AI applied to gamedev!😱Dain-App is a *free* app that let you take any form of media like movies, stop-motion, anime, cartoons, sprites, etc and interpolate new frames, generating a bigger frame-rate. grisk.itch.io/dain-app github.com/baowenbo/DAIN pic.twitter.com/2V7AiuvEmo

mer2 @_mer2
そんなの試しちゃうでしょうに、って事で Dain-App [Alpha 0.1] grisk.itch.io/dain-app やってみた。 あらなんて簡単なんでしょう、補間もかなり綺麗だぞ。こりゃあたいへんだ。 オリジナルは @toxic555 さん撮影の4視点 > twitter.com/toxic555/statu… を"Interpolate 8X"設定で。 pic.twitter.com/KPlupNhrJ7
mer2 @_mer2
@toxic555 上の"Interpolate 8X"な動画を、更に"Interpolate 8X"してみた(さすがに時間がかかった)。 やばい、これはやばい。 pic.twitter.com/g3371fBaYE
Rwi @rwiiug
フレーム補間ソフト「Dain-App」をちょっとお試し。 これが・・・ pic.twitter.com/VnYRwUDB2z
残りを読む(20)

コメント

笹かま @voyageur105 2020年1月27日
またどんどん進化するもんだな。
ふぁむ氏 @phantom0730 2020年1月27日
イージング効いてないからむしろ味が無くなってしまってるのも有るな
むう @nyal1999 2020年1月27日
補完フレームによってはひどいことになってる(最初の女の子の瞬きとか) ので、さすがにまだまだかなあ
ドラゴンチキン @dragonchicken19 2020年1月27日
フルイドでマクロス12話観たがカクカクのままだった。
Isamu HIROSE @BubbleHeadJP 2020年1月27日
映像研4話でやってたやつがコレか
ブラキストン線の向こう側 @cupsoup2 2020年1月27日
クレイアニメなんかも作りやすくなるのか
デルタ @delta393939 2020年1月27日
すごい技術だな。中割りをコンピューターが描く時代がくるのか。
なが @k_watarase 2020年1月27日
急に懐かしい歌詞をぶっこまれて脳がちょっとバグった
てす子 @momimomitest 2020年1月27日
安価3Dアニメでよくある「メリハリのないそのまま補間されてるヌルヌルした動きは場合によっちゃ飛び飛びカクカクの方がまだマシ」ってやつ。 でもちゃんと使う時を選べば数枚は減らせる部分もあるかもしれない
ネットで通りすがるブラジル人 @ntbxp 2020年1月27日
一々著作権でつっかからなくても良いだろうに・・・と、スクショ違法化で著作権に愛想が尽きた自分が思うのであった。
kartis56 @kartis56 2020年1月27日
手が足りてないのは中割じゃなくて原画って前から言われてるでしょ
宝晶石5000兆個のしゃもじ @fc0879 2020年1月27日
これ、最近のゲームで流行りのカクカクアニメーション風CGでも出来る(著作の問題は置いておいて)のかな?
赤間道岳 @m_akama 2020年1月27日
ntbxp 人様の作品を使わせて貰うなら、技術自体を潰されないためにも仁義は切っておいた方が良いですね。
彩肆ひろま(絵練習中) @B0Y0C0M0 2020年1月27日
オレンジとかワザとフレームを抜いてアニメーションの表現として昇華させてる3Dアニメスタジオもあるんだしこういうこと勝手にしてる人見るとアニメのOPをフレーム補完して「ぬるぬるだ!」て言って喜んでる人種を見たときみたいな微妙な気分になる
南風 @nan_poo 2020年1月28日
フレーム補完はアニメーションで最大の威力を発揮する技術ですけど、これが映画のような実写だと、なめらかに動くこととのトレードオフでのっぺりした質感の気持ち悪さが出るので好き嫌いがはっきり分かれますね。
gaheki @gaheki 2020年1月28日
自前で改変して自分で持ってるだけなら私的複製くらいにしかならんのじゃないのかな
KZRNM @naminodarie 2020年1月28日
フレーム補間技術なんてそもそも求められてないからね >トム・クルーズ「映画を観るならTVのフレーム補間をオフに」と呼掛け。理由は「映像が安っぽくなるから」 https://japanese.engadget.com/2018/12/05/tv/
marumushi @marumushi2 2020年1月28日
3コマ打ちアニメを見慣れた目には元動画の方が自然に見える
むう @nyal1999 2020年1月28日
[c7304594] 近年海外でセル・セルライクアニメーションで話題さらったのってありましたっけ…?
CLPS @C_CLPS 2020年2月17日
ドットアニメは高解像度のブラーがかかったような「ズル」をした状態になってるね。ただ、元の解像度と色数に落としてから手作業で調整すればそれなりに使えるかも?
ログインして広告を非表示にする
ログインして広告を非表示にする