6/6 TouchDesigner Vol.050&051 Intro to Deep Learning for Graphics Programmer

Support TDSW on Patreon
  / tdsw  

Registration on Patreon gives you access to sample files.
We have prepared a lot of contents to learn the techniques and expression methods of wonderful artists, creators, and developers from all over the world.
Please join TDSW Patreon Membership and enjoy your creation!
#TouchDesigner #tutorial #tdsw

■ Contents (subject to change)
グラフィクスプログラマのための深層学習入門　ー学習から推論までー
現在深層学習の発展により，AIを使ったシステムが至るところで稼働しています．グラフィクスプログラミング表現においても，物体認識や姿勢推定などの識別モデルでカメラ映像から様々な解析を行なった結果を使用したり，GANやVAEをはじめとした生成モデルで直接フレームを生成することで，古典的なプログラムとはひと味違う表現が可能になります．今回は深層学習を活用するための第一歩として，Google Colaboratoryを使って自身で設計したアーキテクチャで学習し，TouchDesigner上で推論するためのプロセスを簡単な識別モデル／生成モデルそれぞれについてレクチャします．

With the development of deep learning, AI-based systems are now in operation everywhere. In graphics programming, we can use the results of various analyses from the camera, such as object recognition and pose estimation. By generating frames directly with generative models such as GAN and VAE, we can create expressions that are different from those of classical methods. In this lecture, as a first step to using deep learning, I will show you the process of training on an architecture designed by yourself using Google Colaboratory and inferring on TouchDesigner using a simple discriminator and generator.

■ Instructor
Scott Allen

2016年情報科学芸術大学院大学（IAMAS）修了．投影装置の仕組みに物理的に介入し変調したり，日用品に手を加えることで像を作るスタイルでインスタレーション制作・パフォーマンス活動を行なう．また近年は，深層学習を用いた作品制作を行ない，AIライブコーディングユニットAi.stepとしてもライブ活動を行なう．backspacetokyo所属．慶應義塾大学(2018-)／武蔵野美術大学(2019-)／多摩美術大学(2020-)／情報科学芸術大学院大学(2020-)／明星大学(2021-)非常勤講師．

Completed Institute of Advanced Media Arts and Sciences(IAMAS) in 2016, studied under Ryota Kuwakubo. Currently enrolled in the doctoral course at Keio University. Focusing on the projection media, he creates an installation aimed at deviating from recognition of currently fixed images using lasers, LEDs, and deep learning generated images. Also he performs in a style that creates images by physically interposing the mechanism of the projection device and adding modulation as an evangelist of “ZOGAKU”, which strictly means playing visuals like musical instruments.
He teaches at Keio University from 2018, Musashino Art University from 2019, Tama Art University and Advanced Media Arts and Sciences(IAMAS) from 2020, Meisei University from 2021 as a part-time lecturer.

Website: https://scottallen.ws/
Twitter: https://twitter.com/Scott_Allen__?s=20


■ Requirements
・TouchDesigner最新バージョン（Win/Mac）
・Non-Commercial で可
・Google アカウント（モデルの学習にGoogle Colaboratoryを利用します）

・A recent computer with the latest official TouchDesigner installed. (win/OS X)
・A 2-button mouse with scroll wheel), or 3 button mouse.
・Google account (We will use Google Colaboratory to train models)
・Please consult the System Requirements to make sure your computer is capable of running TouchDesigner.


■ Organizer
TDSW | Tokyo Developers Study Weekend is an organization that runs workshops/events aiming to share techniques and knowledge about digital creativity and networking among creators and manages a community with creative people. We have organized more than 70 events and had more than 4000 attendees in total since April 2018. We deliver exciting after-hours and weekends to creative people focusing on visual programming tools such as TouchDesigner.

Web: https://tdsw.jp/

▽　Follow Peatix! TDSW Peatix Account
https://tdsw.peatix.com

---

Support TDSW on Patreon
  / tdsw  

Patreonへの登録をすると、サンプルファイルへのアクセスが可能となります。
世界各国の素晴らしいアーティスト、クリエイター、デベロッパーの方々の技術や表現手法を学べるコンテンツをたくさんご用意しております。
ぜひTDSW Patreon Membershipに参加してもっとクリエイティブを楽しんでください！
#TouchDesigner #tutorial #tdsw

■　About TDSW
TDSW | Tokyo Developers Study Weekend はデジタルクリエイティブに関する技術や知見シェア、クリエイター同士の交流を目的としたワークショップ・イベントの主催、コミュニティ運営を行う組織です。2018年4月に活動を開始し、これまでに70回を超えるイベント・通算4000人を超える動員を記録しました。TouchDesignerをはじめとするビジュアルプログラミングツールにフォーカスした、ものづくりを愛する人のワクワクするアフター6と週末をお届けします。

Web: https://tdsw.jp/

▽　Follow Peatix! TDSW Peatix Account
https://tdsw.peatix.com