芸術系AI（2023年6月アーカイブ）
はじめに
芸術AIの情報2023年6月アーカイブです
芸術系AI注目情報（2023年6月25日～2023年6月1日）
#スケッチカメラ
2023年6月25日
ぶいちゃでこんな写真がとれるスケッチカメラ、もう少し伸びてもいいと思うんだけどなぁ（※無加工）https://t.co/HKmUJ2d3rd pic.twitter.com/V3XUFrcKy7
— nHaruka (@nHaruka_vrc) June 21, 2023
#ChatVRM
2023年6月24日
ChatVRMに.vrma なりm.fbx(mixamo)なりでブラウザからファイルで放り込んで動くようになっとる…！https://t.co/khGTuU8smW https://t.co/m1wK6jPUvh
— Dr.(Shirai)Hakase (@o_ob) June 19, 2023
#ニューラル音源分離
2023年6月24日
最近のニューラル音源分離どんなもんかとFAIRのDemucsを試してみたら、ほぼ完璧でびっくりした。耳コピが捗りそう。
— Yuta Suzuki🌻 (@resnant) June 18, 2023
DockerやColab notebookも用意されていて手厚いhttps://t.co/TR1zh9fTwS
#ラフスケッチからアニメ
2023年6月16日
ラフスケッチから、アニメ絵をリアルタイムに生成するのを支援する生成AI。北陸先端大の方の研究のよう。https://t.co/02nCgItI0i
— 新清士@(生成AI)インディゲーム開発者 (@kiyoshi_shin) June 14, 2023
#AfterEffects
2023年6月16日
しっかりピッタリ張り付いてくる！！あらゆる形状を完璧にトラッキングするAfter Effectsプラグイン「Lockdown」が凄く革命的！！ (1位 / CG GEEKS 2020年 ベスト30) https://t.co/sr47La1uBq pic.twitter.com/0CdTLz3hGo
— CG GEEKS@CGニュースサイト (@cg_geeks) June 14, 2023
#Neuralangelo
2023年6月9日
動画から3Dモデルを作る「Neuralangelo」を発表とのこと なんと従来の方法を大幅に上回る能力。 ビデオゲーム開発者などに貢献しそうですねhttps://t.co/xfl1ZYJ0jS pic.twitter.com/oFrgO0itOY
— Stability AI 日本公式 (@StabilityAI_JP) June 6, 2023
#QRコードから絵画
2023年6月9日
おぉぉ面白い！
— 深津 貴之 / THE GUILD / note.com (@fladdict) June 6, 2023
生成AIでQRコードから生成すると、そのままスキャンできる絵になるwww これは、なんか新しいビジネスとかになりえる小ネタhttps://t.co/jdW6lpBTUP
#SDHKv03
2023年6月9日
SDHKがv03になりました。
— 852話 (@8co28) June 4, 2023
v02から扱いやすくなった分絵柄が彩度高めのアニメ系に寄りました（v02は引き続きDL可）
Hires.fxやNGHとかのネガTI使用推奨https://t.co/yRRohWexrU pic.twitter.com/pH9knzhHZS
#マインクラフト
2023年6月8日
うお、すっご。去年OpenAIがMinecraftの長期タスクで成果をあげたVPTとNVIDIAの自然言語で短期タスクの指示可能なMineDojoの組み合わせ、いつか来ると思ってたがついに来たか。 https://t.co/a62vO2gagK
— bioshok(INFJ) (@bioshok3) June 3, 2023
#Text23D
2023年6月7日
Text-to-3Dはまだ全然クオリティ高い生成ができないんだけど、GANとの組み合わせでキャラクターの3Dモデルを結構良い感じのクオリティで生成できる手法が発表されてる。https://t.co/kX77orLPt9 pic.twitter.com/xp3QWT3qmg
— KAJI | 梶谷健人 (@kajikent) June 2, 2023
#文字が書ける
2023年6月7日
#TextDiffuser
— forasteran (@forasteran) June 3, 2023
Microsoft研からDeepFloyd IFみたいな文字が書けるDiffusion！
と1000万のテキスト付データセットMARIO-10M
FIDスコアはDeepFloydのが上みたい
まだアニメ絵は高品質むずいのね🫢
デモやてみて↓
🤗https://t.co/mqI2IpOabH
'シングルクォート'で文字囲むhttps://t.co/YU9JRQKaew pic.twitter.com/Lj9lhWcsu8
#AIトレカ
2023年6月3日
#AIトレカ で「SR」ぽい表示出た❤
— forasteran (@forasteran) June 2, 2023
どっちが好き？
←左: R-ESRGAN
右→: SwinIR
実はこの２つ、ポジ呪文は同じで
ネガティブとHires化手法が違うだけ
雰囲気は左が好みで、顔は右が好き！
Layerdivider使えば部分入れ替えできるか#BreakDomainRealistic 使ったアニメ風https://t.co/fR4bXvh2ID pic.twitter.com/Oxy76e7017
#RAPHAEL
2023年6月2日
中国企業「SenseTime」と香港大が画像生成AI「ラファエル(RAPHAEL)」を発表(画像中の一番左の列)
— 小猫遊りょう（たかにゃし・りょう） (@jaguring1) May 30, 2023
Stable Diffusion、ERNIE-ViLG2.0、DeepFloyd、DALL-E2などのモデルよりも画像品質と美的な魅力の側面で優れてると報告。1000 A100で2ヶ月間学習。30億パラメータの単一モデルhttps://t.co/5HO6Uc2vUq pic.twitter.com/6AAZAM18KV
#GenerativeFill
2023年6月2日
《そうなるのか》
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) May 29, 2023
マイケルジャクソンのスリラーのジャケ写から
画像の続きを生成している事例
AdobeのGenerative Fill(ジェネレーティブ塗りつぶし)を活用してる
そうなるんだ pic.twitter.com/R8Z6pnhu9r
#Genmo
2023年6月2日
【AIチャットの進化がやばい】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) May 29, 2023
チャットで3Dが作れるAIツール「Genmo」がすごい
一瞬で3D画像や360°の動画が生成
そのままBlenderやARKitに出力も可
2D画像を入力して、3D化＋360°動かすこともできる
そのままチャットでの指示で物体の形や色も変えたりも
3DクリエーターもAIに代替される… pic.twitter.com/HjaJPXh6u9
#MMD →動画
2023年6月2日
VRoidMMDドクヘビ→AI動画変換
— 852話 (@8co28) May 29, 2023
VRoidの簡易モデルを書き込み多いイラスト調にAI変換しつつ従来よりも一貫性を保つ実験 pic.twitter.com/fWA8A9EOLk
#音楽に合わせてからだが動くAI
2023年6月2日
《リズムに合わせて体が動くことってないです？》
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) May 28, 2023
そんなAIが発表されたんです
音楽に合わせて3Dアバターが
･歩行
･ダンス
･パンチ,キック
など様々な人間の動作を勝手に生成するモデル
スピーチ音声に最適化されたジェスチャーの生成も
ゲーム、アニメ制作への応用が期待👀
Sound on 🔊↓ pic.twitter.com/CsHyZV1t4R
#kataragiMIX
2023年6月2日
【特報】
— かたらぎ (@redraw_0) May 28, 2023
ずっと試作版だったモデルの完成版「kataragi-mixV1」を発表いたします！
counterfaitV3をベースに2つの自作LoRAを含む3つのLoRAをマージして作られた鉛筆のような輪郭線に水彩を少し混ぜたような塗りが特徴のモデルです。
↓ダウンロードはこちらからどうぞ！https://t.co/0gvYOAstxG pic.twitter.com/VgVaiIp6A3
#２値化線
2023年6月2日
アニメ業界的には2値化線のAIが出てくると、ザワッってなる気がしました。 https://t.co/prHB9YiYMY
— 榊正宗＠b3d (@megamarsun) May 28, 2023
