x3ru9x | sa.yona.la help | tags | register | sign in

x3ru9x

AI

写真の特徴を別の写真に移し替える軽量なアルゴリズム「FastPhotoS tyle」をNVIDIAが開発

reply

https://gigazine.net/news/20180221-nvidia-fastphotostyle/


・ ペインツトランスファーはこれを使ってリニューしているのではないか..

・ どこにでもあるCG画像をアニメ背景画の色調にしてしまえるかも..

 しかし、写真をそうゆう色調に変換しても写真の階調は残ってしまって やっぱり写真のままだ。 そこにもう一工夫必要になる。

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その16) : マンガの放射線

reply

(拡大)

● 線の密度が高いところがまとまりと見なされ色が入った。 というか 線のない間によって分けられた。

● 絵の上部は黄色、両サイドは青、下部は赤、の色が入った。 これは何を意味するのか。

● (下) 面のある放射線はカラーリングされずシアン系一色になった。 ベタ面 あるなしで変わる。


● 白黒反転させてみた。


(拡大)

● これは以前の照明が入る効果と同じだから真ん中が明るくなった。

● 明るいグレーにおいては、絵の周囲の白い線はライトとして作用する。

● 絵の周囲がどうなのかが結構 影響している。

● この紫はいい色。


● 右から左に諧調をつけてみた。


(拡大)

● 真ん中の明るいところが左側に寄って明るくなった。 この明るいところは周囲の照明によって出来た光の玉と言っていいのではないか。 つまりペインツチェイナーは絵においての光の在り方を学習していて法則のようなものを持っている。(光の在り方をモデリングしている)


● 処理前画像と処理後画像を合成すると


(拡大)


● ペインツチェイナーは下の画像を「二次光とそのシェード影」と見ているのかもしれないな..

 「ペインツチェイナーは二次光とそれによるシェード影から一次光を補完した」 ということじゃないか..

 左側に出た明るい部分は、実は左から光が当たった何かのオブジェクトではないか。


(拡大)

 つまり俺はこの画像で二次光を作った、ということか。

 そうであるなら、左側の明るい部分に影面のない光が当たった面だけの顔の画像を持ってくるとどうなるのか(左からの光が当たった顔)..

 (つづく)

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その15) : 浮世絵の着色

reply

(拡大)

 ソフトな感じになった。 ふわっと色が流れ込んで混色される。 日本画のような感じ。 ソフトエッジ浮世絵。

 絵柄によっては日本画のような絵ができるのでは.. 東山魁夷とか..

 花の絵柄がいいのではないか。

● 元画像


(拡大)

posted by x3ru9x | reply (0)

ペインツトランスファー研究 (その3) : いらすとやさんのイラストの目を変えて着色してみた

reply

(拡大)

 目を変えたのは、ペインツトランスファーがアニメ目を認識すると思ったから。

● かなり塗りの手間が省ける。 白目は黒目の周囲にちょんちょんと白点を打つだけでいい。 口の赤は自動で着いた。


● 使った参照画像 (ペインツトランスファー内 パレット用画像)

  参照画像をぼかして使うと処理後画像の諧調がよくなる。 しかしそうすると線の出が悪くなる。 参照画像のコントラストのエッジが影響している。


● 同じ要領で (塗りありで) (目の色は自動で着いた)


● ペインツトランスファー

http://paintstransfer.com/

posted by x3ru9x | reply (0)

セルシスもAI自動彩色やってる

reply

https://www.clip-studio.com/clip_site/cliplab/

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その14) : 空にあたるところに楕円を描くと雲のようなものができる

reply

(拡大)

 この色調ってドラクエのイラストのような色調。


● 水平線、雲、海、大地、そういったよくある絵柄をペインツチェイナーは学習しているようだ。

● ペインツチェィナーに何かヒントを与えると、ペインツチェイナーは学習したものを出してくる。 そんな感じ。

● 絵の下部で囲んだ形を描くと中が塗られる。 絵の上部ではそうでもない。 たぶん雲を学習しているからだろう。 雲は白いから白を残そうとする。

● 元画像は円だけ。

posted by x3ru9x | reply (0)

http://x3ru9x.sa.yona.la/14901

reply

● フィギアとペインツチェイナーの組み合わせはいける。 ファンシーなイラストになる。 これは発見。


● フィギアでいけるのだったらCGモデルでもいけるやん。

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その14) : ねんどろいどフィギアの写真でやってみた (着色あり)

reply

(拡大)

● 明るめのモノクロにして着色しただけでいい感じになった。 これだけでもええやん。

・ 黒目の両隣りに白点を置くと白目が出て目がはっきりする。

・ 服には何も着色していない。


(拡大)


● 輪郭あるなしの違い (アップロード直後)


(拡大)

● 輪郭を入れると濃くなる。 そこから着色してもいい。 色が着くことで明るくなっていく。


● フィギア 元画像

posted by x3ru9x | reply (0)

http://x3ru9x.sa.yona.la/14898

reply

● ペインツチェイナー着色では、白や薄いグレーを使うのがちょっとしたコツ。 以外とそれをやらないので盲点になっている。

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その13) : その12を踏まえて、マンガのコマに着色してみる

reply

● まず 顔が黒くなるようにする。 (画像にシャープネスをかけて線をくっきりさせると顔が黒くなるようになった)


(拡大)


● 黒くなったところを修正するかのように薄い肌色を着色する。(下)

  いい感じになった。


(拡大)


● 薄い肌色の代わりに白に近いペールグレーで着色した。(下)

  これもいい感じ。


(拡大)


● 照明セット背景なしでもやってみた。 以外といい。 しかし どこかを着色するとどこかに変な色が出るという現象が起こった。

 (この画像もアップロードした直後は顔が真っ黒になる)


(拡大)

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その12) : 前のエントリーの顔が真っ黒になったやつ

reply

(拡大)

● おでこと鼻の頭を白で着色してみると いい感じの階調になった。(下)

  顔が真っ黒になることはエラーではないんだな。 こっちの方が結果がよくなるかも。


(拡大)

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その11) : 背景のライトにあたる部分に黄色の着色をした

reply

(拡大)

● その他の着色

・ 両端ライトの水平線より下にブルー系、上に黄色系

・ 人物のあごの下の影に着色すると顔全体の影にその色がつく。

・ 人物の眉毛の上あたりに白点を置くと顔全体が明るくなる

・ 絵の両下にグリーン系

・ 絵の下部、人物の服のところはグラデ的に白にもっていった方がいい


● 人物に着色するというより、ライトによって色着けると考えた方がいい。

● 背景は自動的にブルーになる。


● 着色しないで処理 (アップロードした直後)


(拡大)

● 上の2枚の画像を合成してもいい。 この肌色を生かす。

● この状態で眉毛の上あたりに白点をちょんと打つだけで顔にメリハリがつく。


● 元画像

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その10) : 同じ顔明度で背景あるなしの違い

reply

(拡大)

(背景がないとき顔の明度が濃く見えるのは比較効果で、顔は同じもの)

 顔の位置も大事。 背景の水平線より下のエリアに顔を置いた。

 こんな不確かなツールを本当にマンガ着色に使うのかなぁ..


・ 背景違いのもの


(拡大)

 スポットライトのような背景にすると なんとなく室内の顔になる。 顔の大きさと位置は絵の上下真ん中より下であること。

● 輪郭線のない面ばかりの絵はうまくいかない。 線は必須。


● 背景画像は過去記事にあります。

タグ : #ペインツチェイナー http://bit.ly/2ET0Vwb

posted by x3ru9x | reply (0)

白泉社ら、深層学習技術を活用した自動着色のカラー版マンガ作品を配信

reply

https://japan.cnet.com/article/35114383/


 ペインツチェイナーを使った着色らしい。 ペインツチェイナーのあとにボストワーク必要でしょ..

 モノクロ漫画のカラー化の作業が進行していくかもしれない..


 画像にちょっとノイズを加えた方がいい処理されたりするからなぁ、あれは..


 線で分けられた面には明度差があった方がいい結果になる。 流し込みツールで薄いグレーを流し込んで明度差を付ければいいと思う。 ちょっとした明度の違いでもペインツチェイナーは反応する。

posted by x3ru9x | reply (0)

NTTの音声合成ソフト、深層学習で自然な声を実現 ナレーションや書籍の読 み上げに期待

reply

http://www.itmedia.co.jp/enterprise/articles/1712/06/news056.html

posted by x3ru9x | reply (0)

http://x3ru9x.sa.yona.la/14863

reply

 落合氏の言う 「デジタルネイチャー」 は 「都市型ユビキタス」 のことで、ネイチャーとまでは言えない。

 日本人は、本当のネイチャーとデジタルとは きっちり分けて整理する。 変な混ぜ合わせはしないから。

posted by x3ru9x | reply (0)

ルネサスの組み込みAIの性能は10倍×10倍×10倍で1000倍へ「推論 に加え学習も」

reply

http://monoist.atmarkit.co.jp/mn/articles/1801/31/news042.html


 日本のAIは電子制御の分野がメイン。 東芝がLSIを開発したころと同じような状況になっている。

 東芝のLSIで先行した電子制御分野のアドバンテージが今も続いている。


 前は東芝、今度はルネサス。

posted by x3ru9x | reply (0)

インテリアCG画像の加工

reply

(拡大)

 ペインツトランスファーとコーレルを使っての加工。 もろもろ合成すると水彩調になった。

・ ペインツトランスファーは基本的にちょっと変な水彩調で出力される。

● 元画像


● ペインツトランスファー2

http://paintstransfer.com/

posted by x3ru9x | reply (0)

ペインツチェイナー研究 (その9) : Skup線画、線の周囲と面にノイズを加えてチェイナーに掛けてみた

reply

(拡大)

 ノイズを加えた方が むしろ面の階調がおさまる。

・ 加工前画像の絵の上部にうっすらとした明るいぼかし線を入れてある。 それがあるので空が青くなる。

・ ペインツチェイナーは面の明度に敏感に反応する。 グラデ階調とノイズにも反応する。

・ 建物の上から下にうっすらとグラデを掛けてある。 そのグラデに反応する。


● 加工前画像

● Skup 元画像 (Sketchup Style Builder を使っての線)

● 背景

※ Sketchup Style Builder は無料版にはついていない、Por版についている。


● ペインツチェイナー

https://paintschainer.preferred.tech/index_ja.html

posted by x3ru9x | reply (0)

ペインツトランスファー研究 (その2) : デフォルトの参照画像に近い絵で試してみた

reply

(拡大)

 ちゃんと服の色が白に変わってる。 すごい。 参照画像と加工前画像の絵柄が近いとうまくいく。 (設定 : スタイル転送)


● 設定を変えて試したもの (設定 : カラーレンダリング)

 いい感じの色調になった。 カラーレンダリングは色調の再配置だわ。


● 設定を変えて試したもの (設定 : 線画着色)

 加工前画像が線画じゃないのでこれは効果が出ていない。


● ペインツトランスファー2

http://paintstransfer.com/

posted by x3ru9x | reply (0)

api | terms of service | privacy policy | support Copyright (C) 2018 HeartRails Inc. All Rights Reserved.