注意 現在、Facebook アカウントを利用した connpass ログインが失敗する事象が発生しております。現在、connpassでも調査を続けておりますが、ご注意をお願いします。

注意 現在 PayPal 側の支払い処理に不具合が起こっており、その影響により参加費用を支払ったのにイベントに参加登録できていない状況が複数件報告されております。 もしこの事象に遭われた参加者様、もしくはこの件についてお問い合わせされた主催者様はこちらのページを参考に対応を行なっていただけますようお願いいたします。

新機能 イベントメッセージの予約機能を追加しました。イベント主催者様は、参加者へのメッセージ送信を事前に予約できます。詳しくはこちらをご確認ください。

新機能 イベント詳細画面に「参加者への情報」欄を追加しました。イベント管理者、発表者、参加者(抽選中や補欠は除く)だけに表示されるフィールドです。詳しくはこちら

このエントリーをはてなブックマークに追加

Nov

4

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」

〜データ分析基盤の「これまで」と「これから」を学ぶ勉強会シリーズ第4弾〜

Registration info

聴講枠(オンラインにて制限なし)

Free

Attendees
311

LT公募枠(増枠可能性あり)

Free

Lottery(10/04/2020)
1/3

参加者への情報
(参加者と発表者のみに公開されます)

Description

本イベントは、Infra Study Meetup を運営する Forkwell と、分析基盤向けデータ統合SaaS「trocco」の開発・運営を行う primeNumber による共催イベントです。データ分析に精通した講師をお招きし、データ分析基盤の「これまで」と「これから」を学ぶことを趣旨として開催いたします。

開催内容

概要

本イベントでは、ゆずたそ氏(@yuzutas0)にモデレーターを依頼し、複数回にわたって、各回テーマに沿った内容で各分野でご活躍されているエンジニア/研究者に講演いただきます。

また、講演後には視聴者の方も参加できる二次会会場(Zoom)を用意しています。登壇者と共にデータエンジニアリングに関する学びを深めましょう。

開催背景

Forkwell からのコメント

本イベントは、Infra Study Meetup に注目していただいた primeNumber さまからのお声がけで実現したイベントです。Infra Study Meetup とは主催する団体、扱うテーマが異なることから、別シリーズとして立ち上げました。Infra Study 参加者と共に得たイベントノウハウを継承し、データ分析領域でも学びの場を作ります。
本家 Infra Study にご参加いただいた方はもちろん、データ分析に関心のある方ならどなたでも参加可能です。エンジニアリングと密接に関わるデータ分析領域について楽しく学んでいただけましたら幸いです。
Forkwell 事業責任者 赤川

primeNumber からのコメント

弊社はデータ分析基盤向けの総合支援サービス「trocco」を運営しているのですが、その中で「どういう分析基盤を作っていけばいいのか?」というご質問をよく伺います。そのような方向けに何か有益な情報をご提供できる場はないかと考えた時に、本イベントの開催を思いつきました。
そんなタイミングで、「Infra Study Meetup」という反響が大きいイベントがあるのを見つけ、「データ分析基盤」版を作りませんかとお声がけした所から開催に至りました。
これから分析基盤を作ろうとされている方や、現在運用中の基盤の改善アイデアを探している方に、有益な場に出来ればと思っております。
primeNumber 取締役執行役員CPO 小林寛和

こんなエンジニアにおすすめ

  • データ分析に関わる事例を知りたい方
  • 自社内にデータ分析基盤を作ろうと検討中の方
  • 自社のデータ分析基盤をより効率的にしたいと考えている方
  • データ分析領域に幅を広げてみたいソフトウェアエンジニア・インフラエンジニア

プログラム第4回「データ分析基盤の障害対応事例LT祭り」

第3回までの勉強会で、データ分析基盤の作り方や組織への浸透させる方法について学んできました。 この「データ分析基盤」は1つのシステムですので、障害対応とは切っても切れない関係です。 今回は障害対応をテーマに事例LTを集めることで、これから分析基盤を作ろうとしている方が同じ失敗をしないように、また既に同じ様な障害を経験されている方の再発防止に役立てるようになれればと思っています。

基調LT1「(未定)」 (10分)

 ゆずたそ 氏(@yuzutas0

◼発表内容について

データ収集でよくある4つの障害テーマについて話します(仮)

・データ形式が変わる

・データの中身が変わる話

・データ欠損

・ライブラリのバージョンアップで壊れる話

基調LT2「IoTデバイスのデータ収集で起きた問題・障害」 (10分)

 渡部 徹太郎 氏(@fetarodc
Mobility Technologies データエンジニア
「ビッグデータ分析のシステムと開発がこれ1冊でしっかりわかる教科書」著者

◼発表内容について

Mobility Technologiesではタクシーに取り付けたデバイスのデータを収集していますが、Webとは違うIoTならではの問題や障害を経験しました。それを紹介します。

LT3「(未定)」

 吉田康久 氏(@syou6162 / @syou6162
株式会社はてな Mackerelチーム
Customer Reliability Engineer

◼発表内容について

データ分析でありがちな問題・障害とその対策について話します

1: RDBMSのようにデータ投入時に制約が入れられないデータストア(SFDCやスプレッドシートなど)でユニーク制約を満たせなかったために、集計で差異が出てしまった例

2: データマートに最近利用されていないようなテーブルやビューが氾濫した結果、目的に適さないデータを元に意思決定されてしまった例

LT4「障害はチャンスだ! 障害を前向きに捉える(仮)」

 山田 雄 氏(@nii_yan

◼発表内容について

To be announced...

LT5「(未定)」

 (未定) 氏(

◼発表内容について

To be announced...

タイムスケジュール(目安)

時間 内容
19:30〜 司会より挨拶(10分)
19:40〜 LT1(5分)
ゆずたそ氏「(未定)」
19:45〜 質疑応答(5分)
19:50〜 スポンサーLT1(5分)
19:55〜 LT2(5分)
渡部氏「IoTデバイスのデータ収集で起きた問題・障害」
20:00〜 質疑応答(5分)
20:05〜 休憩(5分)
20:10〜 LT3(5分)
吉田康久氏「(未定)」
20:15〜 質疑応答(5分)
20:20〜 スポンサーLT2(5分)
20:25〜 LT4(5分)
山田 雄氏「障害はチャンスだ! 障害を前向きに捉える(仮)」
20:30〜 質疑応答(5分)
20:35〜 LT5(5分)
(未定)氏「(未定)」
20:40〜 質疑応答(5分)
20:45〜 アフタートーク(15分~)
21:00 完全終了

※ タイムスケジュールは目安です。完全解散21:45までの間で、より参加者にご満足いただける形で各コンテンツ時間が調整される場合がございます。
※ プログラムは変更となる可能性があります。随時こちらで更新いたします。

これまでの勉強会で扱うテーマとアーカイブ動画

参加方法

今回のオンライン勉強会は YouTube Live を使用してライブ配信いたします。
また、コメントや感想は Twitter、講演内容に関する質問は Slido へお願いいたします。
下記、各種URLよりご参加くださいませ!

▍イベント視聴用 YouTube Live URL
- 後日掲載させていただきます

▍質疑応答用 Slido URL
- https://sli.do/DataEngineeringStudy

▍Tweetリンク
- https://twitter.com/intent/tweet?hashtags=DataEngineeringStudy

ライブ配信終了後、アーカイブ動画の公開を予定しております。
当日の開催時間にライブ参加できない方も、こちらのページより参加申込みの上、アーカイブ動画をご視聴いただけます。

なお、Twitterタイムラインと連動したリアルタイムなイベント参加体験を重視するため、YouTube Liveの追いかけ再生はできない設定となりますこと、ご了承くださいませ。 配信中のプログラムからの視聴、あるいはライブ配信終了数時間後から再生可能になるアーカイブ動画をご視聴ください。

留意事項

  • Forkwell、primeNumber の宣伝をさせていただく時間がございます。予めご了承ください。
  • IT技術者の方を対象としたイベントのため、非エンジニアの方のご参加、ならびに同業に属する方の当イベント内でのリクルーティング活動につきましてご遠慮いただいております。
  • イベントの風景を、Forkwellメディア上の記事(イベントレポート)に掲載することがございます。掲載を希望されない方は、当日Zoomチャットまたはイベントページ問い合わせフォームより、掲載希望されない旨をお伝えください。
  • イベント参加時にご入力いただいた情報は、次のプライバシーポリシーに基づき、primeNumber のみで適切に扱います。 https://primenumber.co.jp/privacy/

また、ご参加者の方々が最大限楽しんで頂けるよう、運営サイドで参加にふさわしくないと判断させて頂いた方については、イベント中であろうとご退席をお願いすることがございます。

  • 保険、宗教、ネットワークビジネスの勧誘が目的と見られる方
  • その他運営サイドで参加が不適切だと判断した方 誠に恐れ入りますが、あらかじめご了承くださいませ。

主催・協力

主催/コミュニティ支援協賛

「成長し続けるエンジニアを支援する」サービスを運営する Forkwell



分析基盤向けデータ統合SaaS「trocco」の開発・運営を行う primeNumber

後援

天神放送局様にライブ配信代行として協力いただいております。

天神放送局はライブ配信を広めることで「機会格差をなくす」ことをミッションとしたライブ配信ユニットです。
コミュニティイベントが増え続ける中、コンテンツを熱意ある人に届けるために活動しています。


ソニー株式会社様にコミュニティ運営費用を協力いただいております。


発表者

Media View all Media

If you add event media, up to 3 items will be shown here.

Feed

Forkwell

Forkwell published Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」.

09/16/2020 21:58

Data Engineering Study #4「分析基盤の障害対応事例LT祭り」 を公開しました! LT公募枠もございますので、ぜひお申し込みください!

Group

Forkwell

成長し続けるエンジニアを支援する Forkwell による、エンジニア・人事向けイベントグループ

Number of events 107

Members 8523

Public

2020/11/04(Wed)

19:30
21:55

Please login to register

Registration Period
2020/09/16(Wed) 21:58 〜
2020/11/04(Wed) 21:55

Location

YouTube Live|Data Engineering Study #4

オンライン

YouTube Live|Data Engineering Study #4

Lottery(1)

IwasakiAkira

IwasakiAkira

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

Lottery(1人)

Attendees(311)

basil_mayo

basil_mayo

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

matyubara

matyubara

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」に参加を申し込みました!

m24ttmhk

m24ttmhk

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

RO

RO

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」に参加を申し込みました!

nii_yan

nii_yan

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

akyo0420

akyo0420

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

rodents18

rodents18

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」に参加を申し込みました!

mshrt07

mshrt07

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

Civitaspo

Civitaspo

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

Yuji Tokuda

Yuji Tokuda

Data Engineering Study #4「データ分析基盤の障害対応事例LT祭り」 に参加を申し込みました!

Attendees (311)

Canceled (1)