注意 現在X(旧Twitter)でのソーシャルログインができない事象を確認しています。事前にX(旧Twitter)側で再ログインした上でconnpassのソーシャルログインを行うか、
「ユーザー名(またはメールアドレス)」と「パスワード」の組み合わせでのログインをお試しください。合わせてFAQもご確認ください。

お知らせ 2024年9月1日よりconnpassサービスサイトへのスクレイピングを禁止とし、利用規約に禁止事項として明記します。
9月1日以降のconnpassの情報取得につきましては イベントサーチAPI の利用をご検討ください。

お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用申請及び審査がございます。詳細はヘルプページをご確認ください。

このエントリーをはてなブックマークに追加

Jul

2

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京

W&Bのファウンダーによる講演と、Nejumiリーダーボード3の解説の豪華二本立て!

Organizing : Weights & Biases Japan

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京
Hashtag :#wandb
Registration info

ミートアップ(抽選)

Free

Standard (Lottery Finished)
96/100

Attendees
roooot
hk1
Jinta_19
kato-primer
Takaaki Toda
JunkoKogawa
にゃんたこす
haradatm
shimtomo
toshiya_mitsuhashi
View Attendee List
Start Date
2024/07/02(Tue) 18:30 ~ 21:00
Registration Period

2024/06/18(Tue) 09:59 〜
2024/07/02(Tue) 21:00まで

Location

WeWork東京スクエアガーデン(京橋)

東京都中央区京橋3-1-1

View Map
参加者への情報
(参加者と発表者のみに公開されます)
出席登録
(イベント開始時間の2時間前から終了時間まで、参加者のみに公開されます)

Description

イベント概要

Weights & Biasesの共同創業者でありCISOのChris Van Peltが来日し、「生成AIがもたらすソフトウェアエンジニアリングの未来」をテーマに講演を行います。 また、今回のミートアップでは6月末に発表を予定しているNejumi LLMリーダーボード3の解説を行います。このアップデートでは世界的にAIの安全性や倫理性への関心が高まっていることを受け、LLMの安全性評価に焦点を当てた新しい評価項目を追加します。Nejumi LLMリーダーボード3については、弊社エンジニア鎌田より詳細をご説明いたします。 さらに、今回のアップデートで追加された制御性評価のためのデータセット、LCTG Benchの開発者である株式会社AI Shiftの栗原 健太郎さんと毒性評価データセットの開発者であるLINEヤフー株式会社の林 和弘さんからもLLM安全評価の最前線からお話をいただく予定です。

スポンサーからのお願い

  • 講演開催中にお弁当形式の軽食と、懇親会でのお飲み物の提供を予定しておりますが、数には限りがありご参加者全員に行き渡らない場合もございます。

タイムテーブル

時間 内容 スピーカー
18:00 ~ 18:30 受付
18:30 ~ 18:40 オープニング:今回のミートアップの主旨 シバタアキラ
18:40 ~ 19:20 「生成AIがもたらすソフトウェアエンジニアリングの未来」 Chris Van Pelt
19:20 ~ 19:30 休憩
19:30 ~ 19:55 「Nejumiリーダーボード3のご紹介」 鎌田 啓輔
19:55 ~ 20:10 「LCTG Benchの設計思想と今後の期待」 栗原 健太郎さん
20:10 ~ 20:25 「LLMを活用した信頼性評価データセットの構築と自動評価」 林 和弘さん
20:25 ~ 懇親会 ご参加は任意で

スピーカー

Chris Van Pelt / Founder and CISO, Weights and Biases

Image from Gyazo

Weights & Biasesの共同創設者兼CISO。計算インフラ管理、データベースからカスタムUIエレメントまで、ウェブアプリケーション開発のあらゆる側面に精通。シリコンバレーのAI開発コミュニティーに対して革新的な開発手法を提案し、先進的な機械学習技術の普及とコラボレーションの促進に尽力。Weights & Biasesの前はFigure Eightの創設者兼CAOを務める。

「生成AIがもたらすソフトウェアエンジニアリングの未来」(英語講演)

AI技術がますます高度化し、ワークフローに統合されるにつれて、ソフトウェアエンジニアの役割と責任は大きな変革を遂げることが予想されます。この講演では、生成AIを使ったUIエレメントを生成するOpenUIプロジェクトの開発における私自身の経験を通じてこのトピックについて話し、将来のエンジニアがこの新しいパラダイムで必要とするツールについて議論します。

鎌田 啓輔 / Weights & Biases Japan MLエンジニア

Image from Gyazo

因果推論からML、LLMまで行う機械学習エンジニア。APTではビジネス施策における因果推論の支援、DataRobotではヘルスケアチームのLead Data Scientistとしてヘルスケア業界を中心に数十社のAI導入を支援。コロナ禍には国立国際医療研究センターと論文や厚生労働省へのレターを作成。現在Weights & Biasesでは、企業へのML workflow構築支援以外にNejumi Leaderboardやllm-jp-evalの開発も行っている。タンパク質言語モデルのファインチューニングのハンズオントレーニングを製薬企業8社に対し提供するなど、業界特化のLLMの応用に向けた活動も行っている。

「Nejumiリーダーボード3のご紹介」

国内最大級のLLMリーダーボードであるNejumiの最新バージョン、「Nejumiリーダーボード3」をリリースしました。このアップデートの主な特徴は、新しいタクソノミー(分類)に従って評価結果を可視化した点、そして新たにアライメント指標を追加した点になりますが、今回の講演では、追加した指標の詳細や、それによって得られたインサイトについて詳しく解説いたします。

栗原 健太郎 / 株式会社AI Shift AIエンジニア リサーチャー

Image from Gyazo

2021年早稲田大学基幹理工学部情報通信学科卒業。2023年3月同大学院修士課程修了。同年4月より株式会社サイバーエージェントおよび株式会社AI ShiftでAIエンジニア/リサーチャーに従事。専門は自然言語処理。

「LCTG Benchの設計思想と今後の期待」

昨今LLMの研究・開発や利用の動きが加速していく中で、LLMの性能の評価についての関心も高まりつつあります。すでに既存のベンチマークによる評価なども実施されているものの、LLMの生成のバリエーションや能力を包括的にカバーしているものは未だ存在しません。本講演では、多様な能力を持つLLMの制御性能に注目したベンチマークLCTG Benchについて設計思想を含めて述べた上で、今後のLLM評価の動きに期待することを述べます。

林 和弘 / LINEヤフー株式会社 ソフトウェアエンジニア

Image from Gyazo

LINEヤフー株式会社でソフトウェア開発者。Webやスマホアプリの開発者を経て、現在は生成AI技術のサービス組み込みやLLM評価などの仕事を中心に取り組む。

「LLMを活用した毒性評価データセットの構築と自動評価」

LLMを実サービスに活用する際、評価用データセットの構築とその評価には多大なコストがかかるという課題があります。 この課題に対してLINEヤフーでは、AIエージェント等でデータセットを効率的に構築し、LLMによる自動評価を行う方法を模索しています。これにより、実サービスにおけるプロンプトエンジニアリングの評価プロセスを迅速かつ繰り返し行うフローの構築を目指しています。本講演では、この課題に取り組んだ経験をお話します。

会場

WeWork 東京スクエアガーデン

住所: 104-0031 東京都中央区京橋3-1-1 東京スクエアガーデン 14F

これまでのイベントの様子 (以前のイベントの様子)

アクセス

  • 東京メトロ 銀座線 京橋駅(出口3)(駅直結)
  • 東京メトロ 有楽町線 銀座一丁目駅(出口7) 徒歩2分
  • 都営浅草線 宝町駅(A4出口) 徒歩2分

京橋駅直結のビル。3階にあがるとオフィスエントランスがございます。 3階からエレベーターで14階までお越しください。 会場へのアクセス方法の詳細はこちらに:http://wandb.me/tokyo-office

主催・運営

このイベントはWeights & Biases Japan によって運営されています。

WBLogo

本イベントの開催には、WeWork様に多大なご協力をいただいております。

このミートアップに登録することで、Weights & Biasesの製品、サービス、イベントに関するマーケティングコミュニケーションを受け取ることがあります。W&Bは、お客様の個人情報をプライバシーポリシーに従ってのみ使用し、これらのコミュニケーションはいつでも解除することができます。

このミートアップ中に写真や動画が撮影されます。これらはW&Bによってマーケティングや宣伝用に、出版物、ウェブサイト、ソーシャルメディアで使用されることがあります。何か懸念がある場合や、撮影や録画されたくない場合は、お問い合わせください。

発表者

Media View all Media

If you add event media, up to 3 items will be shown here.

Feed

ryo1443

ryo1443 published W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京.

06/18/2024 09:59

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 has been published!

Ended

2024/07/02(Tue)

18:30
21:00

You cannot RSVP if you are already participating in another event at the same date.

Registration Period
2024/06/18(Tue) 09:59 〜
2024/07/02(Tue) 21:00

Location

WeWork東京スクエアガーデン(京橋)

東京都中央区京橋3-1-1

Attendees(96)

roooot

roooot

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

hk1

hk1

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

Jinta_19

Jinta_19

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

kato-primer

kato-primer

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

Takaaki Toda

Takaaki Toda

I joined W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京!

JunkoKogawa

JunkoKogawa

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

にゃんたこす

にゃんたこす

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

haradatm

haradatm

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

shimtomo

shimtomo

W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京 に参加を申し込みました!

toshiya_mitsuhashi

toshiya_mitsuhashi

I joined W&Bファウンダー来日 & Nejumiリーダーボード3 - W&Bミートアップ #14 in 東京!

Attendees (96)

Canceled (15)