お知らせ 2024年9月1日よりconnpassサービスサイトへのスクレイピングを禁止とし、利用規約に禁止事項として明記します。
9月1日以降のconnpassの情報取得につきましては イベントサーチAPI の利用をご検討ください。

お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用申請及び審査がございます。詳細はヘルプページをご確認ください。

このエントリーをはてなブックマークに追加

Mar

9

Understanding Deep Learning Models #7

Graph Neural Network / Transformers

Organizing : ScrumSign

Understanding Deep Learning Models  #7
Registration info

一般枠

Free

FCFS
15/25

Attendees
today555555
hari2020
T-Nishida
ino
k-skmt
金岡
matsu_masa
Muromoto
Hiroyuki Katsumi
YoshioFukushige
View Attendee List
Start Date
2024/03/09(Sat) 09:30 ~ 12:30
Registration Period

2024/03/08(Fri) 11:05 〜
2024/03/09(Sat) 12:30まで

Location

オンライン

オンライン

参加者への情報
(参加者と発表者のみに公開されます)
出席登録
(イベント開始時間の2時間前から終了時間まで、参加者のみに公開されます)

Description

モチベーション

代表的なな深層学習モデルの、数式とコードを対応づけて理解を深めていく勉強会です。
アムステルダム大学の講義資料を参考に進めていきます。
日本語でディスカッションを行います。

資料URL

https://uvadlc-notebooks.readthedocs.io/en/latest/tutorial_notebooks/JAX/tutorial6/Transformers_and_MHAttention.html

https://uvadlc-notebooks.readthedocs.io/en/latest/tutorial_notebooks/JAX/tutorial7/GNN_overview.html

今回の範囲

Tutorial 6 (JAX): Transformers and Multi-Head Attention
Tutorial 7 (JAX): Graph Neural Networks

予定

DEEP LEARNING 1 (JAX+FLAX)
Tutorial 2 (JAX): Introduction to JAX+Flax 2023/9/9
Tutorial 3 (JAX): Activation Functions 2023/10/14
Tutorial 4 (JAX): Optimization and Initialization 2023/11/11
Tutorial 5 (JAX): Inception, ResNet and DenseNet 2023/12/9
Tutorial 6 (JAX): Transformers and Multi-Head Attention 2024/1/13 and 2024/2/10 and 2024/3/9
Tutorial 7 (JAX): Graph Neural Networks 2024/3/9 Tutorial 9 (JAX): Deep Autoencoders
Tutorial 11 (JAX): Normalizing Flows for image modeling
Tutorial 12 (JAX): Autoregressive Image Modeling
Tutorial 15 (JAX): Vision Transformers
Tutorial 17 (JAX): Self-Supervised Contrastive Learning with SimCLR

進め方

主催が疑問をなげかけたりしながらファシリテートする役割を担います。
参加者は議論に参加したり、質問したり、質問に答えたりするなど自由に応答します。
黙って聴くだけの参加の仕方もOKです。(最初の自己紹介と最後の感想のシェアはお願いしています。)
英語の文献をみますが、ディスカッションは日本語で行います。

09:30~12:30 本編ディスカッション

準備

こちらのZoomというオンラインミーティングのアプリを利用します。
開始前までにインストールしてください。
https://zoom.us/jp-jp/meetings.html
申し込み者のみ閲覧可能なcompass 上の情報ページに勉強会に参加可能なURLが記載されています。

休憩

休憩を途中挟みます。

前提知識

Pythonの基礎知識
微分積分、線形代数、確率モデル、統計的機械学習および深層学習の基礎知識

Math & Codingとは

機械学習の実務者・研究者が、互いに学び研鑽するようなコミュニティとなることを目指します。

◆groupページ
https://www.facebook.com/groups/284004485439214/

◆過去のイベント スクラムサインのコミュニティーページ
https://scrumsign.com/community/

Media View all Media

If you add event media, up to 3 items will be shown here.

Feed

TomokazuKitamura

TomokazuKitamura published Understanding Deep Learning Models #7.

03/08/2024 11:06

Understanding Deep Learning Models #7 を公開しました!

Ended

2024/03/09(Sat)

09:30
12:30

You cannot RSVP if you are already participating in another event at the same date.

Registration Period
2024/03/08(Fri) 11:05 〜
2024/03/09(Sat) 12:30

Location

オンライン

オンライン

オンライン

Attendees(15)

today555555

today555555

Understanding Deep Learning Models #7 に参加を申し込みました!

hari2020

hari2020

Understanding Deep Learning Models #7 に参加を申し込みました!

T-Nishida

T-Nishida

Understanding Deep Learning Models #7 に参加を申し込みました!

ino

ino

Understanding Deep Learning Models #7 に参加を申し込みました!

k-skmt

k-skmt

Understanding Deep Learning Models #7 に参加を申し込みました!

金岡

金岡

Understanding Deep Learning Models #7 に参加を申し込みました!

matsu_masa

matsu_masa

Understanding Deep Learning Models #7 に参加を申し込みました!

Muromoto

Muromoto

Understanding Deep Learning Models #7 に参加を申し込みました!

Hiroyuki Katsumi

Hiroyuki Katsumi

Understanding Deep Learning Models #7 に参加を申し込みました!

YoshioFukushige

YoshioFukushige

Understanding Deep Learning Models #7 に参加を申し込みました!

Attendees (15)