Movatterモバイル変換
[0]
ホーム
URL:
画像なし
夜間モード
Submit Search
Yahoo! JAPANが持つデータ分析ソリューションの紹介 #yjdsnight
7 likes
5,092 views
Yahoo!デベロッパーネットワーク
Technology
Read more
1 of 19
Download now
Downloaded 17 times
1
2
3
4
5
6
7
Most read
8
9
Most read
10
11
12
13
Most read
14
15
16
17
18
19
Ad
Recommended
PDF
LakeTahoe
Yahoo!デベロッパーネットワーク
PDF
ゼロから始める転移学習
Yahoo!デベロッパーネットワーク
PDF
[AWS EXpert Online for JAWS-UG 18] 見せてやるよ、Step Functions の本気ってやつをな
Amazon Web Services Japan
PPTX
位置データもPythonで!!!
hide ogawa
PDF
AWS上で使えるストレージ十番勝負
Akio Katayama
PDF
Yahoo! JAPAN Tech Conference 2022 Day2 Keynote #yjtc
Yahoo!デベロッパーネットワーク
PDF
深層学習による自然言語処理入門: word2vecからBERT, GPT-3まで
Yahoo!デベロッパーネットワーク
PDF
継続的なモデルモニタリングを実現するKubernetes Operator
Yahoo!デベロッパーネットワーク
PDF
サイエンス領域におけるMLOpsの取り組み #yjtc
Yahoo!デベロッパーネットワーク
PPTX
Helidon 概要
オラクルエンジニア通信
PDF
AWSでアプリ開発するなら 知っておくべこと
Keisuke Nishitani
PDF
SSII2020 [OS2-03] 深層学習における半教師あり学習の最新動向
SSII
PDF
PFNのML/DL基盤を支えるKubernetesにおける自動化 / DevOpsDays Tokyo 2021
Preferred Networks
PDF
イミュータブルデータモデル(入門編)
Yoshitaka Kawashima
PDF
ISUCONの勝ち方 YAPC::Asia Tokyo 2015
Masahiro Nagano
PPTX
モノリスからマイクロサービスへの移行 ~ストラングラーパターンの検証~(Spring Fest 2020講演資料)
NTT DATA Technology & Innovation
PPTX
Apache Avro vs Protocol Buffers
Seiya Mizuno
PDF
RDF Semantic Graph「RDF 超入門」
オラクルエンジニア通信
PDF
ストリーム処理を支えるキューイングシステムの選び方
Yoshiyasu SAEKI
PDF
Kubernetesによる機械学習基盤への挑戦
Preferred Networks
PDF
DeNAの分析を支える分析基盤
Kenshin Yamada
PDF
アジャイル開発とメトリクス
Rakuten Group, Inc.
PDF
ChatGPT 人間のフィードバックから強化学習した対話AI
Shota Imai
PDF
ヤフーのAIプラットフォーム紹介 ~AIテックカンパニーを支えるデータ基盤~ #yjtc
Yahoo!デベロッパーネットワーク
PDF
分散トレーシング技術について(Open tracingやjaeger)
NTT Communications Technology Development
PDF
Apache Solr 検索エンジン入門
Yahoo!デベロッパーネットワーク
PDF
SSII2022 [TS1] Transformerの最前線〜 畳込みニューラルネットワークの先へ 〜
SSII
PPTX
Kafka vs Pulsar @KafkaMeetup_20180316
Nozomi Kurihara
PDF
Prestoクエリログの保存/分析機能の構築 #yjdsnight
Yahoo!デベロッパーネットワーク
PDF
マルチビッグデータの活用を支える DWHの作り方
Yahoo!デベロッパーネットワーク
More Related Content
What's hot
(20)
PDF
サイエンス領域におけるMLOpsの取り組み #yjtc
Yahoo!デベロッパーネットワーク
PPTX
Helidon 概要
オラクルエンジニア通信
PDF
AWSでアプリ開発するなら 知っておくべこと
Keisuke Nishitani
PDF
SSII2020 [OS2-03] 深層学習における半教師あり学習の最新動向
SSII
PDF
PFNのML/DL基盤を支えるKubernetesにおける自動化 / DevOpsDays Tokyo 2021
Preferred Networks
PDF
イミュータブルデータモデル(入門編)
Yoshitaka Kawashima
PDF
ISUCONの勝ち方 YAPC::Asia Tokyo 2015
Masahiro Nagano
PPTX
モノリスからマイクロサービスへの移行 ~ストラングラーパターンの検証~(Spring Fest 2020講演資料)
NTT DATA Technology & Innovation
PPTX
Apache Avro vs Protocol Buffers
Seiya Mizuno
PDF
RDF Semantic Graph「RDF 超入門」
オラクルエンジニア通信
PDF
ストリーム処理を支えるキューイングシステムの選び方
Yoshiyasu SAEKI
PDF
Kubernetesによる機械学習基盤への挑戦
Preferred Networks
PDF
DeNAの分析を支える分析基盤
Kenshin Yamada
PDF
アジャイル開発とメトリクス
Rakuten Group, Inc.
PDF
ChatGPT 人間のフィードバックから強化学習した対話AI
Shota Imai
PDF
ヤフーのAIプラットフォーム紹介 ~AIテックカンパニーを支えるデータ基盤~ #yjtc
Yahoo!デベロッパーネットワーク
PDF
分散トレーシング技術について(Open tracingやjaeger)
NTT Communications Technology Development
PDF
Apache Solr 検索エンジン入門
Yahoo!デベロッパーネットワーク
PDF
SSII2022 [TS1] Transformerの最前線〜 畳込みニューラルネットワークの先へ 〜
SSII
PPTX
Kafka vs Pulsar @KafkaMeetup_20180316
Nozomi Kurihara
サイエンス領域におけるMLOpsの取り組み #yjtc
Yahoo!デベロッパーネットワーク
Helidon 概要
オラクルエンジニア通信
AWSでアプリ開発するなら 知っておくべこと
Keisuke Nishitani
SSII2020 [OS2-03] 深層学習における半教師あり学習の最新動向
SSII
PFNのML/DL基盤を支えるKubernetesにおける自動化 / DevOpsDays Tokyo 2021
Preferred Networks
イミュータブルデータモデル(入門編)
Yoshitaka Kawashima
ISUCONの勝ち方 YAPC::Asia Tokyo 2015
Masahiro Nagano
モノリスからマイクロサービスへの移行 ~ストラングラーパターンの検証~(Spring Fest 2020講演資料)
NTT DATA Technology & Innovation
Apache Avro vs Protocol Buffers
Seiya Mizuno
RDF Semantic Graph「RDF 超入門」
オラクルエンジニア通信
ストリーム処理を支えるキューイングシステムの選び方
Yoshiyasu SAEKI
Kubernetesによる機械学習基盤への挑戦
Preferred Networks
DeNAの分析を支える分析基盤
Kenshin Yamada
アジャイル開発とメトリクス
Rakuten Group, Inc.
ChatGPT 人間のフィードバックから強化学習した対話AI
Shota Imai
ヤフーのAIプラットフォーム紹介 ~AIテックカンパニーを支えるデータ基盤~ #yjtc
Yahoo!デベロッパーネットワーク
分散トレーシング技術について(Open tracingやjaeger)
NTT Communications Technology Development
Apache Solr 検索エンジン入門
Yahoo!デベロッパーネットワーク
SSII2022 [TS1] Transformerの最前線〜 畳込みニューラルネットワークの先へ 〜
SSII
Kafka vs Pulsar @KafkaMeetup_20180316
Nozomi Kurihara
Viewers also liked
(20)
PDF
Prestoクエリログの保存/分析機能の構築 #yjdsnight
Yahoo!デベロッパーネットワーク
PDF
マルチビッグデータの活用を支える DWHの作り方
Yahoo!デベロッパーネットワーク
PDF
Yahoo!プロモーション広告のビックデータ基盤を支える技術と今後の展望
Yahoo!デベロッパーネットワーク
PDF
Presto in Yahoo! JAPAN #yjdsnight
Yahoo!デベロッパーネットワーク
PDF
ICML2017 参加報告会 山本康生
Yahoo!デベロッパーネットワーク
PDF
僕とヤフーと時々Teradata #prestodb
Yahoo!デベロッパーネットワーク
PDF
AMPと広告とOpenRTBと #yjmu
Yahoo!デベロッパーネットワーク
PDF
Hive on Tezのベストプラクティス
Yahoo!デベロッパーネットワーク
PDF
ヤフーオープンローカルプラットフォームの設計思想
Yahoo!デベロッパーネットワーク
PDF
Yahoo! JAPANのCloud Foundry導入状況
Yahoo!デベロッパーネットワーク
PDF
Kafka・Storm・ZooKeeperの認証と認可について #kafkajp
Yahoo!デベロッパーネットワーク
PDF
Yahoo! JAPANにおけるオンライン機械学習実例 #streamctjp
Yahoo!デベロッパーネットワーク
PPTX
ビックデータ処理技術の全体像とリクルートでの使い分け
Tetsutaro Watanabe
PDF
Life of an enginner in rakuten osaka diarmaid lindsay
Rakuten Group, Inc.
PDF
Company Recommendation for New Graduates via Implicit Feedback Multiple Matri...
Recruit Technologies
PDF
ユーザー企業内製CSIRTにおける対応のポイント
Recruit Technologies
PDF
Apache Big Data Miami 2017 - Hadoop Source Code Reading #23 #hadoopreading
Yahoo!デベロッパーネットワーク
PDF
銀行ロビーアシスタント
Recruit Technologies
PDF
Rakutenとsreと私 yanagimoto koichi
Rakuten Group, Inc.
PDF
What i learned from translation of the sre ryuji tamagawa
Rakuten Group, Inc.
Prestoクエリログの保存/分析機能の構築 #yjdsnight
Yahoo!デベロッパーネットワーク
マルチビッグデータの活用を支える DWHの作り方
Yahoo!デベロッパーネットワーク
Yahoo!プロモーション広告のビックデータ基盤を支える技術と今後の展望
Yahoo!デベロッパーネットワーク
Presto in Yahoo! JAPAN #yjdsnight
Yahoo!デベロッパーネットワーク
ICML2017 参加報告会 山本康生
Yahoo!デベロッパーネットワーク
僕とヤフーと時々Teradata #prestodb
Yahoo!デベロッパーネットワーク
AMPと広告とOpenRTBと #yjmu
Yahoo!デベロッパーネットワーク
Hive on Tezのベストプラクティス
Yahoo!デベロッパーネットワーク
ヤフーオープンローカルプラットフォームの設計思想
Yahoo!デベロッパーネットワーク
Yahoo! JAPANのCloud Foundry導入状況
Yahoo!デベロッパーネットワーク
Kafka・Storm・ZooKeeperの認証と認可について #kafkajp
Yahoo!デベロッパーネットワーク
Yahoo! JAPANにおけるオンライン機械学習実例 #streamctjp
Yahoo!デベロッパーネットワーク
ビックデータ処理技術の全体像とリクルートでの使い分け
Tetsutaro Watanabe
Life of an enginner in rakuten osaka diarmaid lindsay
Rakuten Group, Inc.
Company Recommendation for New Graduates via Implicit Feedback Multiple Matri...
Recruit Technologies
ユーザー企業内製CSIRTにおける対応のポイント
Recruit Technologies
Apache Big Data Miami 2017 - Hadoop Source Code Reading #23 #hadoopreading
Yahoo!デベロッパーネットワーク
銀行ロビーアシスタント
Recruit Technologies
Rakutenとsreと私 yanagimoto koichi
Rakuten Group, Inc.
What i learned from translation of the sre ryuji tamagawa
Rakuten Group, Inc.
Ad
Similar to Yahoo! JAPANが持つデータ分析ソリューションの紹介 #yjdsnight
(6)
PDF
ヤフーにおけるデータの可視化
Sho Maekawa
PDF
データサイエンスを支える基盤とそのテクノロジー@WebDBフォーラム2015 #webdbf2015
Yahoo!デベロッパーネットワーク
PDF
プランニングツールにおけるインタラクティブな可視化を支えるバックエンド
Yahoo!デベロッパーネットワーク
PDF
「Data Infrastructure at Scale 」#yjdsw4
Yahoo!デベロッパーネットワーク
PDF
データの見える化で進めるデータドリブンカンパニー #devsumiC
Yahoo!デベロッパーネットワーク
PDF
データテクノロジースペシャル:Yahoo! JAPANにおけるメタデータ管理の試み
Yahoo!デベロッパーネットワーク
ヤフーにおけるデータの可視化
Sho Maekawa
データサイエンスを支える基盤とそのテクノロジー@WebDBフォーラム2015 #webdbf2015
Yahoo!デベロッパーネットワーク
プランニングツールにおけるインタラクティブな可視化を支えるバックエンド
Yahoo!デベロッパーネットワーク
「Data Infrastructure at Scale 」#yjdsw4
Yahoo!デベロッパーネットワーク
データの見える化で進めるデータドリブンカンパニー #devsumiC
Yahoo!デベロッパーネットワーク
データテクノロジースペシャル:Yahoo! JAPANにおけるメタデータ管理の試み
Yahoo!デベロッパーネットワーク
Ad
More from Yahoo!デベロッパーネットワーク
(20)
PDF
ヤフーでは開発迅速性と品質のバランスをどう取ってるか
Yahoo!デベロッパーネットワーク
PDF
オンプレML基盤on Kubernetes パネルディスカッション
Yahoo!デベロッパーネットワーク
PDF
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
Yahoo!デベロッパーネットワーク
PDF
Persistent-memory-native Database High-availability Feature
Yahoo!デベロッパーネットワーク
PDF
データの価値を最大化させるためのデザイン~データビジュアライゼーションの方法~ #devsumi 17-E-2
Yahoo!デベロッパーネットワーク
PDF
eコマースと実店舗の相互利益を目指したデザイン #yjtc
Yahoo!デベロッパーネットワーク
PDF
ヤフーを支えるセキュリティ ~サイバー攻撃を防ぐエンジニアの仕事とは~ #yjtc
Yahoo!デベロッパーネットワーク
PDF
Yahoo! JAPANのIaaSを支えるKubernetesクラスタ、アップデート自動化への挑戦 #yjtc
Yahoo!デベロッパーネットワーク
PDF
ビッグデータから人々のムードを捉える #yjtc
Yahoo!デベロッパーネットワーク
PDF
新技術を使った次世代の商品の見せ方 ~ヤフオク!のマルチビュー機能~ #yjtc
Yahoo!デベロッパーネットワーク
PDF
PC版Yahoo!メールリニューアル ~サービスのUI/UX統合と改善プロセス~ #yjtc
Yahoo!デベロッパーネットワーク
PDF
モブデザインによる多職種チームのコミュニケーション改善 #yjtc
Yahoo!デベロッパーネットワーク
PDF
「新しいおうち探し」のためのAIアシスト検索 #yjtc
Yahoo!デベロッパーネットワーク
PDF
ユーザーの地域を考慮した検索入力補助機能の改善の試み #yjtc
Yahoo!デベロッパーネットワーク
PDF
The potential of Kubernetes as more than just an infrastructure to deploy
Yahoo!デベロッパーネットワーク
PDF
Yahoo! ニュースにおけるドキュメント管理の事例紹介
Yahoo!デベロッパーネットワーク
PDF
ライフステージの変化の中で エンジニア管理職として働くコツ #devsumi A-5
Yahoo!デベロッパーネットワーク
PDF
ユーザー情報格納基盤におけるApache Pulsarの利用事例
Yahoo!デベロッパーネットワーク
PDF
Yahoo! JAPANを支えるログ・メトリクス転送システムのE2Eモニタリングの取り組み
Yahoo!デベロッパーネットワーク
PDF
Apache Pulsarのデモ
Yahoo!デベロッパーネットワーク
ヤフーでは開発迅速性と品質のバランスをどう取ってるか
Yahoo!デベロッパーネットワーク
オンプレML基盤on Kubernetes パネルディスカッション
Yahoo!デベロッパーネットワーク
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜
Yahoo!デベロッパーネットワーク
Persistent-memory-native Database High-availability Feature
Yahoo!デベロッパーネットワーク
データの価値を最大化させるためのデザイン~データビジュアライゼーションの方法~ #devsumi 17-E-2
Yahoo!デベロッパーネットワーク
eコマースと実店舗の相互利益を目指したデザイン #yjtc
Yahoo!デベロッパーネットワーク
ヤフーを支えるセキュリティ ~サイバー攻撃を防ぐエンジニアの仕事とは~ #yjtc
Yahoo!デベロッパーネットワーク
Yahoo! JAPANのIaaSを支えるKubernetesクラスタ、アップデート自動化への挑戦 #yjtc
Yahoo!デベロッパーネットワーク
ビッグデータから人々のムードを捉える #yjtc
Yahoo!デベロッパーネットワーク
新技術を使った次世代の商品の見せ方 ~ヤフオク!のマルチビュー機能~ #yjtc
Yahoo!デベロッパーネットワーク
PC版Yahoo!メールリニューアル ~サービスのUI/UX統合と改善プロセス~ #yjtc
Yahoo!デベロッパーネットワーク
モブデザインによる多職種チームのコミュニケーション改善 #yjtc
Yahoo!デベロッパーネットワーク
「新しいおうち探し」のためのAIアシスト検索 #yjtc
Yahoo!デベロッパーネットワーク
ユーザーの地域を考慮した検索入力補助機能の改善の試み #yjtc
Yahoo!デベロッパーネットワーク
The potential of Kubernetes as more than just an infrastructure to deploy
Yahoo!デベロッパーネットワーク
Yahoo! ニュースにおけるドキュメント管理の事例紹介
Yahoo!デベロッパーネットワーク
ライフステージの変化の中で エンジニア管理職として働くコツ #devsumi A-5
Yahoo!デベロッパーネットワーク
ユーザー情報格納基盤におけるApache Pulsarの利用事例
Yahoo!デベロッパーネットワーク
Yahoo! JAPANを支えるログ・メトリクス転送システムのE2Eモニタリングの取り組み
Yahoo!デベロッパーネットワーク
Apache Pulsarのデモ
Yahoo!デベロッパーネットワーク
Recently uploaded
(10)
PDF
ABC2025S LT講演「世界の窓から Androidこんにちは2025」アプリ自動生成の将来?ロボティクスの夢再び?
嶋 是一 (Yoshikazu SHIMA)
PDF
20250630_aws_reinforce_2025_aws_sheild_network_security_director
uedayuki
PDF
プライバシ保護のためのインターネットアーキテクチャの進化 (2025-07-11)
Jun Kurihara
PDF
Hyperledger Fabric公式サンプル fabric-samples徹底解説
LFDT Tokyo Meetup
PDF
[Hardening Designers Confernece 2025]ランサムウェアでの見えざるログ・見えるログ
kataware
PDF
SIG-AUDIO 2025 Vol.02 オンラインセミナー SIG-Audioプレゼン資料_オーディオプラグイン開発_塩澤達矢.pdf
IGDA Japan SIG-Audio
PDF
Hyperledger Fabric最新v3.x系での機能強化、変更点にキャッチアップ!
LFDT Tokyo Meetup
PDF
人気ブロックチェーン基盤「Hyperledger Fabric」最新版を動かしてみた!
LFDT Tokyo Meetup
PDF
生成AIパネルトーク(Interop25Tokyo APPS JAPAN M1-07,M2-07 嶋ポジショントーク)
嶋 是一 (Yoshikazu SHIMA)
PDF
20250710_Devinで切り拓くDB革命_〜価値創出に集中せよ〜.pdf
Masaki Yamakawa
ABC2025S LT講演「世界の窓から Androidこんにちは2025」アプリ自動生成の将来?ロボティクスの夢再び?
嶋 是一 (Yoshikazu SHIMA)
20250630_aws_reinforce_2025_aws_sheild_network_security_director
uedayuki
プライバシ保護のためのインターネットアーキテクチャの進化 (2025-07-11)
Jun Kurihara
Hyperledger Fabric公式サンプル fabric-samples徹底解説
LFDT Tokyo Meetup
[Hardening Designers Confernece 2025]ランサムウェアでの見えざるログ・見えるログ
kataware
SIG-AUDIO 2025 Vol.02 オンラインセミナー SIG-Audioプレゼン資料_オーディオプラグイン開発_塩澤達矢.pdf
IGDA Japan SIG-Audio
Hyperledger Fabric最新v3.x系での機能強化、変更点にキャッチアップ!
LFDT Tokyo Meetup
人気ブロックチェーン基盤「Hyperledger Fabric」最新版を動かしてみた!
LFDT Tokyo Meetup
生成AIパネルトーク(Interop25Tokyo APPS JAPAN M1-07,M2-07 嶋ポジショントーク)
嶋 是一 (Yoshikazu SHIMA)
20250710_Devinで切り拓くDB革命_〜価値創出に集中せよ〜.pdf
Masaki Yamakawa
Yahoo! JAPANが持つデータ分析ソリューションの紹介 #yjdsnight
1.
2017年3月15日1ヤフー株式会社平林 和也Yahoo! JAPANが持つデータ分析ソリューションの紹介
2.
アジェンダ2• 自己紹介• ヤフーのデータ分析環境•
現在目指していること• まとめ
3.
自己紹介3平林 和也ヤフー株式会社データ&サイエンスソリューション統括本部データサービス本部 技術2部データ分析基盤技術経歴2011年
新卒入社(エンジニア)2011年〜 ヤフオク!に所属(KPI管理システムの開発・運用)2014年〜 D&S統括本部 データサービス本部に所属(データ分析基盤の構築)
4.
ヤフーのデータ分析環境
5.
課題解決のプロセス5検知 分析 実行
評価それぞれのプロセスに適した分析環境を全社に展開
6.
検知:dClip6検知 分析 実行
評価• ダッシュボードツール• サービスの日々の健康状態をウォッチするため• PVやUUといったサービスの基本指標を可視化
7.
分析:OTEPON7• 集計ツール• WebUI上からHiveQLが実行できる•
毎日の定常集計を自動化(スケジューリング)することができる検知 分析 実行 評価
8.
実行:Miffy8• A/Bテスト管理ツール• ユーザーの振り分け&配信スケジュールを管理する•
現在どのサービスでA/Bテストが実施しているのか、一目で把握できる検知 分析 実行 評価
9.
評価:NASUBI9• A/Bテスト評価ツール• A/Bテストの結果を可視化•
PVやUB、CTRといった基本的な指標から有意差判定し、施策面の評価を行うことができる検知 分析 実行 評価
10.
ヤフーのデータ分析環境10検知 分析 実行
評価dClip Miffy NASUBIBIRヒートマップFIROTEPONCATLOGOS++データを”見る”文化を浸透させる
11.
現在目指していること
12.
現在の課題は?12利用者 D&S• 独自の分析環境で、データを”見る”文化は浸透してきた•
さらに事業に合わせた分析(深掘り)がしたい• 全社共通の環境は提供してきた• 数100種類あるサービス全ての分析ニーズを把握し、環境を提供するのは非常に難しい
13.
現在の課題は?13利用者 D&S• 独自の分析環境で、データを”見る”文化は浸透してきた•
さらに事業に合わせた分析(深掘り)がしたい• 全社共通の環境は提供してきた• 数100種類あるサービス全ての分析ニーズを把握し、環境を提供するのは非常に難しい分析のセルフ化
14.
インタラクティブな環境の整備14今まで これから内製ツール群Tableauprestoetc...内製ツール群
15.
スキルの向上15例)HiveQLセミナー• SQLの基本知識〜HiveQLがかけるようになるまでをレクチャー• エンジニアだけでなく企画職からも参加•
のべ400人が受講
16.
分析のセルフ化16データを”使う”文化を促進する今後取り組んでいきたいことインタラクティブな環境の整備ETLの最適化 ロギングの簡易化スキルの向上データ利活用ノウハウの蓄積マルチビッグデータ
17.
まとめ
18.
まとめ18独自の分析環境=データを”見る”文化を浸透させる分析のセルフ化=データを”使う”文化を促進する
19.
ご静聴ありがとうございました
Download
[8]
ページ先頭
©2009-2025
Movatter.jp