---
title: データ事業におけるデータ活用の取り組み
tags:  #データマネジメントトーク  
author: [Yahoo!デベロッパーネットワーク](https://convert.docswell.com/user/ydnjp)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/8JDW1NP3EG.jpg?width=480
description: 2023/1/26に開催したイベントにて、ヤフーのデータソリューション事業の事業運営として、データ利活用に関わるアーキテクチャーやマスターデータ管理の取り組みについて紹介しています。  イベント詳細：【デジタル庁・ヤフー・10X 登壇】社会課題に挑むデータマネジメント https://10x.connpass.com/event/271899/
published: January 31, 23
canonical: https://convert.docswell.com/s/ydnjp/KE6JEK-2023-01-31-150930
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/8JDW1NP3EG.jpg)

CONFIDENTIAL
2023/01/26
データ事業におけるデータ活⽤の取り組み
データソリューション事業
⼭⼝ 寛
(C)Yahoo Japan
1


# Page. 2

![Page Image](https://bcdn.docswell.com/page/VEP9Q5NP78.jpg)

CONFIDENTIAL
⾃⼰紹介
• ⼭⼝ 寛
• データソリューション(DS)事業
エンジニアマネージャー
• 経歴
広告業務システムの開発 → Hadoopの構築運⽤
→ データ事業の⽴上げ時のエンジニア
• 直近
ヤフーのデータ事業であるDS事業のエンジニア
チームをまとめつつ、バックオフィスやDS.API
などのプロダクトを管理
(C)Yahoo Japan
2


# Page. 3

![Page Image](https://bcdn.docswell.com/page/27VM5PKV7Q.jpg)

CONFIDENTIAL
データソリューション事業とは
• 2019年10⽉ サービス開始
• マルチビックデータを活かし
た分析サービス
• サービスラインナップ
• DS.INSIGHT
• DS.API
• DS.DATASET
• DS.ANALYSYS
(C)Yahoo Japan
3


# Page. 4

![Page Image](https://bcdn.docswell.com/page/5JGG6PQ1JL.jpg)

CONFIDENTIAL
Peopleの主な機能
【共起キーワード】
「○○」と⼀緒に検索されているキーワード
【上昇キーワード】
検索キーワードのトレンド
(C)Yahoo Japan
【時系列キーワード】
「○○」の前後で検索されているキーワード
【検索推移・地域別特徴度】
検索キーワード「○○」の推移
4


# Page. 5

![Page Image](https://bcdn.docswell.com/page/47QX42KNJP.jpg)

CONFIDENTIAL
今⽇のお話
(C)Yahoo Japan
5


# Page. 6

![Page Image](https://bcdn.docswell.com/page/KE46QLP3J1.jpg)

CONFIDENTIAL
今⽇話すこと、話さないこと
■ 話すこと
• DS事業の事業運営で活⽤するデータをどう管理してきたか
• データ活⽤する上で意識していること
• データエンジニアとしてどんな取り組みをしたか
■ 話さないこと
• DS事業で提供しているデータの管理や技術的詳細など
参考 : https://tech-verse.me/ja/sessions/133
(C)Yahoo Japan
6


# Page. 7

![Page Image](https://bcdn.docswell.com/page/L71VPL9ZJG.jpg)

CONFIDENTIAL
アジェンダ
1）データの活⽤⽬的を明確化
2）事業全体で活⽤する環境整備
3）データを扱える⼈を増やす
(C)Yahoo Japan
7


# Page. 8

![Page Image](https://bcdn.docswell.com/page/G7WL2VQ6J2.jpg)

CONFIDENTIAL
事業全体でデータを活⽤するために
1）データの活⽤⽬的を明確化
2）事業全体で活⽤する環境整備
3）データを扱える⼈を増やす
(C)Yahoo Japan
8


# Page. 9

![Page Image](https://bcdn.docswell.com/page/4JZMD4WR73.jpg)

CONFIDENTIAL
To Bサービスでの事業データの活⽤
それぞれの⽬的に合わせて部⾨で対応
請求
広告効果測定
プロダクト成果
売上管理
性能
(C)Yahoo Japan
利⽤状況分析
リード数
9


# Page. 10

![Page Image](https://bcdn.docswell.com/page/YE6N13G1EV.jpg)

CONFIDENTIAL
To Bサービスでの事業データの活⽤
請求
広告効果測定
売上管理
性能
(C)Yahoo Japan
マーケ部⾨で広告管
理ツールで管理
利⽤状況分析
プロダクト成果
リード数
10


# Page. 11

![Page Image](https://bcdn.docswell.com/page/GE554LVLE4.jpg)

CONFIDENTIAL
To Bサービスでの事業データの活⽤
請求
広告効果測定
売上管理
性能
(C)Yahoo Japan
マーケ部⾨で広告管
理ツールで管理
利⽤状況分析
プロダクト成果
リード数
事業部⾨で エクセルや
Salesforceなどで管理
11


# Page. 12

![Page Image](https://bcdn.docswell.com/page/972NVL33JR.jpg)

CONFIDENTIAL
ToBサービスとしての事業データ活⽤
請求
広告効果測定
売上管理
性能
マーケ部⾨で広告管
理ツールで管理
利⽤状況分析
プロダクト部⾨で
独⾃DBで管理
プロダクト成果
リード数
事業部⾨で エクセルや
Salesforceなどで管理
各部⾨で活⽤しやすい環境を構築
(C)Yahoo Japan
12


# Page. 13

![Page Image](https://bcdn.docswell.com/page/DJYP3Q18JM.jpg)

CONFIDENTIAL
個別最適時の環境
⼀部独⾃管理
営業部⾨
広告サービスA
マーケ部⾨
広告サービスB
LP
申し込み
salesforce
事業部⾨
SFレポート
請求
DSプロダクト
logger
プロダクト部⾨
(C)Yahoo Japan
13


# Page. 14

![Page Image](https://bcdn.docswell.com/page/V7N5VK29E8.jpg)

CONFIDENTIAL
個別最適化の結果
⼀部独⾃管理
営業部⾨
広告サービスA
マーケ部⾨
広告サービスB
各部で利⽤しやすい環境構築が可能
施策検討なども⼩さく素早く実現ができる
LP
申し込み
salesforce
事業部⾨
SFレポート
請求
DSプロダクト
logger
プロダクト部⾨
(C)Yahoo Japan
14


# Page. 15

![Page Image](https://bcdn.docswell.com/page/YJ9Y6V1373.jpg)

CONFIDENTIAL
個別最適時の課題例（1）
横断したデータ活⽤時に⼿間がかかる
• プロダクトの利⽤状況をに応じたマーケティングを⾏いたい
• プロダクトの利⽤状況と売上の関係を⾒る
都度集計や設計が必要となり、活⽤までのコストが増⼤
マーケ部⾨
都度作成
SFレポート
マーケ部⾨
売上
事業部⾨
事業部⾨
プロダクト部⾨
(C)Yahoo Japan
15


# Page. 16

![Page Image](https://bcdn.docswell.com/page/GJ86ZP4LED.jpg)

CONFIDENTIAL
個別最適時の課題例（2）
部⾨間でのデータのズレ
• 部⾨内では活⽤可能だが、事業と営業で実績に解離が発⽣（最終的には同値）
• 値がズレたことで経営判断などでデータの信頼度が低下し活⽤が困難
(C)Yahoo Japan
16


# Page. 17

![Page Image](https://bcdn.docswell.com/page/LJL9D16Q7R.jpg)

CONFIDENTIAL
個別最適時の課題のまとめ
• 横断して分析や利活⽤でのコスト増⼤
• データへの認識齟齬からデータの信頼度の低下
→ データ利活⽤の妨げ！
(C)Yahoo Japan
17


# Page. 18

![Page Image](https://bcdn.docswell.com/page/47MZPWGKJW.jpg)

CONFIDENTIAL
データ活⽤の⽬的を明確化
• ⽬的の明確化
プロダクトとビジネスで横断したデータ活⽤を⾏い事業の意思決定に活かす
• そのために
データ活⽤を促進するための環境整備
• データエンジニアとして
データのフロー策定と事業全体でのデータのマスターを整理
(C)Yahoo Japan
18


# Page. 19

![Page Image](https://bcdn.docswell.com/page/P7R61YZ6E9.jpg)

CONFIDENTIAL
事業全体でデータを活⽤するために
1）データの活⽤⽬的を明確化
2）事業全体で活⽤する環境整備
3）データを扱える⼈を増やす
(C)Yahoo Japan
19


# Page. 20

![Page Image](https://bcdn.docswell.com/page/PJXMYG9DEX.jpg)

CONFIDENTIAL
事業全体で活⽤する環境整備
• データの品質を担保していくためにマスターデータを作る
• 事業全体でデータをつなぐためのキーを管理
• 個別最適にならない活⽤までのデータの流れを整える
• データ利活⽤環境の構築
(C)Yahoo Japan
20


# Page. 21

![Page Image](https://bcdn.docswell.com/page/3JKG34PD7D.jpg)

CONFIDENTIAL
マスターデータを作る
(C)Yahoo Japan
21


# Page. 22

![Page Image](https://bcdn.docswell.com/page/LE3NGLXPE5.jpg)

CONFIDENTIAL
どんなマスターデータを作る必要があるのか？
• 事業メンバーがどう扱いたいのか？
• 主要な分析軸はなにか？
(C)Yahoo Japan
22


# Page. 23

![Page Image](https://bcdn.docswell.com/page/8EDW1N237G.jpg)

CONFIDENTIAL
どんなマスターデータを作る必要があるのか？
• 事業メンバーがどう扱いたいのか？
• 顧客獲得時は契約単位である企業単位で分析したい
• 広告はユーザ単位で届けるが、契約のコンバージョンは企業単位
• プロダクト利⽤はユーザ単位で分析
• 解約予測や利⽤促進のためには企業単位の状況把握
• 主要な分析軸はなにか？
(C)Yahoo Japan
23


# Page. 24

![Page Image](https://bcdn.docswell.com/page/V7P9Q51PJ8.jpg)

CONFIDENTIAL
どんなマスターデータを作る必要があるのか？
• 事業メンバーがどう扱いたいのか？
• 顧客獲得時は契約単位である企業単位で分析したい
• 広告はユーザ単位で届けるが、契約のコンバージョンは企業単位
• プロダクト利⽤はユーザ単位で分析
• 解約予測や利⽤促進のためには企業単位の状況把握
• 主要な分析軸はなにか？
契約主体は企業
利⽤はユーザ
• クライアントとなる企業軸
• プロダクトを利⽤するユーザ軸
事業全体分析の主キーは企業IDとユーザID
(C)Yahoo Japan
24


# Page. 25

![Page Image](https://bcdn.docswell.com/page/2JVM5PYVJQ.jpg)

CONFIDENTIAL
【再掲】個別最適時の環境
⼀部独⾃管理
営業部⾨
広告サービスA
マーケ部⾨
広告サービスB
LP
• 広告などの社外サービス
• DS事業のプロダクト
• 社内システム
全体を横断してID体系を⾒直しを実施
申し込み
salesforce
事業部⾨
SFレポート
請求
DSプロダクト
logger
プロダクト部⾨
(C)Yahoo Japan
25


# Page. 26

![Page Image](https://bcdn.docswell.com/page/5EGG6P91EL.jpg)

CONFIDENTIAL
各システムをつなぐID体系
• salesforceなどの社外サービス
• IDや企業情報のマスターとなる社内PF
• DS事業のプロダクトのログ
各システムの企業IDを紐づける
SF企業ID
DS企業ID
DS企業ID
社内PF企業ID
社内PF企業ID
ユーザID
salesforce
DS事業の企業マスタ
社内PF
DS企業ID
マスクユーザID
timestamp
click
(C)Yahoo Japan
利⽤時実績ログ
26


# Page. 27

![Page Image](https://bcdn.docswell.com/page/4JQX42WNEP.jpg)

CONFIDENTIAL
事業全体の概要図
社外SaaS
社内PF
申し込み・問い合わせ
salesforce
クライアント
全社企業管理
Backoffice
システム
DSプロダクト
ユーザID基盤
事業専⽤のBackofficeシステム
を中⼼に
企業・ユーザIDを管理しつつ
契約や請求を管理
社外SaaS
logger
プロダクト利⽤実績
請求代⾏サービス
(C)Yahoo Japan
27


# Page. 28

![Page Image](https://bcdn.docswell.com/page/K746QLK3E1.jpg)

CONFIDENTIAL
まとめ：マスターデータを作る
• 事業をつなぐための企業IDとユーザIDを定義
• 各情報は上記2つのIDに紐づく形で設計することでデータ連携を容易に！
• 分析時のコストを削減し横断的な分析に活⽤
(C)Yahoo Japan
28


# Page. 29

![Page Image](https://bcdn.docswell.com/page/LJ1VPLXZEG.jpg)

CONFIDENTIAL
データの流れを作る
(C)Yahoo Japan
29


# Page. 30

![Page Image](https://bcdn.docswell.com/page/GJWL2VN6E2.jpg)

CONFIDENTIAL
データを活⽤する上で考慮すること
• 個⼈情報への配慮
• 各種社内ルールへの考慮
• 上記を踏まえてのデータ整備とアクセス権限の実現
(C)Yahoo Japan
30


# Page. 31

![Page Image](https://bcdn.docswell.com/page/4EZMD43RJ3.jpg)

CONFIDENTIAL
データを利⽤ユーザの実情
• 事業メンバーの多くは⽣のデータは不要
• KPI実績や利⽤状況の統計情報がわかれば⼗分
• センシティブな情報を意識せず安全に利⽤したい
• ルールなど意識せずとも活⽤できる
×
(C)Yahoo Japan
31


# Page. 32

![Page Image](https://bcdn.docswell.com/page/Y76N13X17V.jpg)

CONFIDENTIAL
活⽤までのデータの流れを整える
DataSource
（⽣データ）
事業活⽤DataMart
Salesforce
Backoffice
利⽤実績
ETL
(nifi)
MySQL
BIツールで可視化
(Tableau)
参照
必要な情報の抽出
・統計化を実施
その他関連情報
(C)Yahoo Japan
32


# Page. 33

![Page Image](https://bcdn.docswell.com/page/G7554LXL74.jpg)

CONFIDENTIAL
まとめ：データの流れを整える
• データソースとなる⽣ログやプロダクション情報から必要な情報を抽出
• マスター情報を作るためのキーをもとにデータを集約
• 統計化など⾏い安全に活⽤できる環境を整備
可視化も⾏いマスターデータとして活⽤を促進
(C)Yahoo Japan
33


# Page. 34

![Page Image](https://bcdn.docswell.com/page/9J2NVLX3ER.jpg)

CONFIDENTIAL
事業全体でデータを活⽤するために
1）データの活⽤⽬的を明確化
2）事業全体で活⽤する環境整備
3）データを扱える⼈を増やす
(C)Yahoo Japan
34


# Page. 35

![Page Image](https://bcdn.docswell.com/page/DEYP3Q88EM.jpg)

CONFIDENTIAL
データを扱える⼈を増やす
• データが利⽤できる環境を整備するだけではなくデータ活⽤する⼈を増やす
→ データ利⽤のハードルを下げる
(C)Yahoo Japan
35


# Page. 36

![Page Image](https://bcdn.docswell.com/page/VJN5VKQ978.jpg)

CONFIDENTIAL
データを扱える⼈を増やす
• データ活⽤の⽅法による提供環境の整理とアクセス権限の整理
• センシティブなデータへの影響を最⼩化
アクセス権の例
対象ユーザ想定
想定ツール
意思決定する⼈
KPI参照ができれば良いので
tableauのダッシュボードを参照
エクセルなどで数字のシミュレーションを⾏う⼈
tableauからデータをDLして分析
アドホック時は各部⾨管理のデータソースを活⽤
SQLやtableauなど直接操作し分析が必要な⼈
ダッシュボードを作成する⼈
データマートへの参照権限
深い分析を⾏う必要がある⼈
データマートに加えて、必要に応じてデータソースへ
のアクセス件
(C)Yahoo Japan
36


# Page. 37

![Page Image](https://bcdn.docswell.com/page/YE9Y6VD3J3.jpg)

CONFIDENTIAL
活⽤までのデータの流れを整える
DataSource
Salesforce
事業活⽤DataMart
深い分析を⾏う⼈
ダッシュボード作成
アナリスト
直接SQLなどで抽出
広告管理ツール
シミュレーションする⼈
データをDLし活⽤
利⽤実績
その他関連情報
(C)Yahoo Japan
ETL
(nifi)
MySQL
BIツールで可視化
(Tableau)
経営判断する⼈
参照して判断
37


# Page. 38

![Page Image](https://bcdn.docswell.com/page/GE86ZP3L7D.jpg)

CONFIDENTIAL
データを扱える⼈がなぜ増やせるか？
• データマートやtableauのデータはルールに則り活⽤可能
• 社内ルールなどに則り統計化など整備済みデータ
• 安全を担保したデータのため攻めの利⽤も可能
• 社内活⽤する上で問題が起きないため事業メンバー全員へ権限付与も可能
• tableauのダッシュボードからデータダウンロード提供
• 実際に気になる利⽤者はデータをダウンロードして⼿元で分析
• データ作成者は事業のアナリストで不明なところはSlackで相談可能
安全に利⽤でき、分析相談もできたことで徐々に利⽤者が増加
(C)Yahoo Japan
38


# Page. 39

![Page Image](https://bcdn.docswell.com/page/LEL9D1VQJR.jpg)

CONFIDENTIAL
まとめ
(C)Yahoo Japan
39


# Page. 40

![Page Image](https://bcdn.docswell.com/page/4JMZPWNKEW.jpg)

CONFIDENTIAL
まとめ
■データ事業でデータ活⽤するために取り組んだこと
1. マスターとなるID体系を作成
ID体系を整備することで横断的なデータ利活⽤が可能
分析コストの削減にもつながる
2. 安全に活⽤できるデータを整備する
データフローを作るとともに、各種ルールに準拠できる仕組みを構築
→ 活⽤の流れや仕組みができたことで機能追加時にも考慮可能に！
(C)Yahoo Japan
40


# Page. 41

![Page Image](https://bcdn.docswell.com/page/PJR61YD679.jpg)

CONFIDENTIAL
Copyright (C) 2020 Yahoo Japan Corporation. All Rights Reserved.
41


