TouchDesigner Vol.050 Intro to Deep Learning for Graphics Programmers – From Training to Inference
注意:このYoutube Liveは TouchDesigner Vol.050 Intro to Deep Learning for Graphics Programmers – From Training to Inference のDAY1(2021/12/5)配信用ページとなっています。
Note: This Youtube Live is a page for broadcasting DAY1 (2021/12/5 UTC+9) ; TouchDesigner Vol.050 Intro to Deep Learning for Graphics Programmers – From Training to Inference.
#Touchdesigner #tutorial
Sample files (TD PROJECT / Github) : https://github.com/5c0tt411en/TDSW_DLWS
Sample files (TD PROJECT / Google Drive) : https://bit.ly/3DjtQGs
Sample files (Assets) : https://bit.ly/3rz5wxV
Documents: https://scottallen.ws/lecture/tdsw-dlws-day1
If you cannot git clone, please download TD PROJECT from the Google Drive link.
Tokyo Developers Study Weekend
TouchDesigner Vol.050&051 Intro to Deep Learning for Graphics Programmers – From Training to Inference
■ 日時(注意:本WSは2回に分けて開催されます)
DAY1: 2021/12/5(日)15:00 – 18:00 UTC+9
DAY2: 2021/12/12(日)15:00 – 18:00 UTC+9
■ 使用言語
日本語 / Japanese
■ レベル
Intermediate
・TouchDesignerの基本操作ができる方
・深層学習については知識の有無を問わず、初学者向けのワークショップとなります
■ スケジュール UTC+9
DAY1: 2021/12/5(日)
15:00-18:00 Workshop (incl. 10 mins break x 2)
18:00-18:10 Update from TDSW
18:10-18:20 Close
■ 講義内容 / Contents
グラフィクスプログラマのための深層学習入門 ー学習から推論までー
現在深層学習の発展により,AIを使ったシステムが至るところで稼働しています.グラフィクスプログラミング表現においても,物体認識や姿勢推定などの識別モデルでカメラ映像から様々な解析を行なった結果を使用したり,GANやVAEをはじめとした生成モデルで直接フレームを生成することで,古典的なプログラムとはひと味違う表現が可能になります.今回は深層学習を活用するための第一歩として,Google Colaboratoryを使って自身で設計したアーキテクチャで学習し,TouchDesigner上で推論するためのプロセスを簡単な識別モデル/生成モデルそれぞれについてレクチャします.
■ 講師 / Instructor
Scott Allen
2016年情報科学芸術大学院大学(IAMAS)修了.投影装置の仕組みに物理的に介入し変調したり,日用品に手を加えることで像を作るスタイルでインスタレーション制作・パフォーマンス活動を行なう.また近年は,深層学習を用いた作品制作を行ない,AIライブコーディングユニットAi.stepとしてもライブ活動を行なう.backspacetokyo所属.慶應義塾大学(2018-)/武蔵野美術大学(2019-)/多摩美術大学(2020-)/情報科学芸術大学院大学(2020-)/明星大学(2021-)非常勤講師.
Website: https://scottallen.ws/
Twitter: https://twitter.com/Scott_Allen__?s=20
■ 事前準備
・TouchDesigner最新バージョン(Win/Mac)
・Non-Commercial で可
・Google アカウント(モデルの学習にGoogle Colaboratoryを利用します)
■ Note
・YouTube Liveを使っての開催になります。
・ライブ配信は無料でご視聴いただけます。配信終了後アーカイブを視聴したい方はTDSW Patreon Membership($20 / month)にご参加ください。アーカイブはワークショップ終了後の約5日以内にアップロードされます。
・ワークショップの終了時間がコンテンツの進行程度によって短縮または延長する可能性があります。
・チャット画面のスクリーンショット等、参加の様子をSNS等で発信する場合がございますので予めご了承ください。
▽過去のアーカイブが見放題!サブスクプランぜひチェックしてね
https://www.patreon.com/tdsw
————————————————————————————-
Tokyo Developers Study Weekend
TouchDesigner Vol.050&051 Intro to Deep Learning for Graphics Programmers – From Training to Inference
Date(Note: This workshop will be held in two sessions.)
DAY1: 5th December 2021 15:00 – 18:00 UTC+9
DAY2: 12th December 2021 15:00 – 18:00 UTC+9
Language
日本語 / Japanese
Level
Intermediate
・Basic operation of TouchDesigner is required.
・This workshop is designed for beginners with or without knowledge of machine learning.
Timetable (subject to change) time in UTC+9
DAY1: 5th December 2021
15:00-18:00 Workshop (incl. 10 mins break x 2)
18:00-18:10 Update from TDSW
18:10-18:20 Close
Content (subject to change)
With the development of deep learning, AI-based systems are now in operation everywhere. In graphics programming, we can use the results of various analyses from the camera, such as object recognition and pose estimation. By generating frames directly with generative models such as GAN and VAE, we can create expressions that are different from those of classical methods. In this lecture, as a first step to using deep learning, I will show you the process of training on an architecture designed by yourself using Google Colaboratory and inferring on TouchDesigner using a simple discriminator and generator.
Instructor
Scott Allen
Completed Institute of Advanced Media Arts and Sciences(IAMAS) in 2016, studied under Ryota Kuwakubo. Currently enrolled in the doctoral course at Keio University. Focusing on the projection media, he creates an installation aimed at deviating from recognition of currently fixed images using lasers, LEDs, and deep learning generated images. Also he performs in a style that creates images by physically interposing the mechanism of the projection device and adding modulation as an evangelist of “ZOGAKU”, which strictly means playing visuals like musical instruments.
He teaches at Keio University from 2018, Musashino Art University from 2019, Tama Art University and Advanced Media Arts and Sciences(IAMAS) from 2020, Meisei University from 2021 as a part-time lecturer.
Website: https://scottallen.ws/
Twitter: https://twitter.com/Scott_Allen__?s=20
Requirements
・A recent computer with the latest official TouchDesigner installed.
・A 2-button mouse with scroll wheel), or 3 button mouse.
・Google account (We will use Google Colaboratory to train models)
・Please consult the System Requirements to make sure your computer is capable of running TouchDesigner.
▽ Join TDSW Patreon Membership, and you can enjoy all past workshops since 2020.
https://www.patreon.com/tdsw