Japan 公式ブログ
Google の企業向けソリューションに関する公式な情報やユーザーの事例などを、いち早く皆さんにお届けします。
ソニーネットワークコミュニケーションズ株式会社の導入事例:BigQuery の導入でデータサイエンティストが “価値ある仕事” に集中できるように
2017年8月17日木曜日
ソニーネットワークコミュニケーションズと言えば、インターネットプロバイダ(ISP)事業「So-net」が有名ですが、実は、ソニー製品・サービスのクラウド・アプリ開発・運用でも大きな役割を果たしています。そんな同社のデータ分析に、今、Google Cloud Platform(GCP)が活躍。80:20ルールなど、同社が抱えていた悩みを、GCP が、BigQuery がどのように解決したのかを聞いてきました。
■ソニーネットワークコミュニケーションズ株式会社
クラウド&アプリ事業部門 クラウド開発運用部 2 課 課長
川田 雅人氏
■ 利用している Google Cloud Platform サービス
BigQuery
、
Cloud Dataflow
、
Cloud Pub/Sub
、
Container Engine
など
■
ソニーネットワークコミュニケーションズ株式会社
1995 年 11 月、ソニーコミュニケーションネットワーク株式会社として設立。翌年から『So-net』として ISP(Internet Service Provider)業務を開始。現在は、ISP 事業のほか、法人向けのクラウドを軸にした IT ソリューションや、インテグレーション事業など、多彩な事業を展開。クラウド&アプリ事業部門ではソニー製テレビ向けアプリ『Video & TV SideView』など、ソニー製品・サービスに対するクラウド開発・運用や、アプリケーション開発を行っている。
脱「80:20 ルール」に向けて GCP を導入
ソニーネットワークコミュニケーションズ株式会社 クラウド&アプリ事業部門は、ソニー製品・サービスに対するクラウド開発・運用や、アプリケーション開発を行う部署。データビジネスの生産性を向上させるために、そこで得られたビッグデータを活用しデータ分析を通じて、製品・サービス内容や、ユーザーエクスペリエンス(UX)を向上させることも大きな役割の 1 つとなっています。
「こうしたデータの分析をおよそ 4 年前から本格化させているのですが、オンラインサービスやアプリの普及に比例して、月間 100 億レコードを超えるまでに増え続けているデータ量をしっかり分析できる環境作りが急務となっていました。データの質・量を増やしつつもクエリは速くすることでデータ運用を効率化し、価値ある分析業務に集中できる仕組みを構築することによって、ビジネスの PDCA サイクルのパフォーマンス向上を図りました。さらに、データサイエンティストが満足する分析環境であるだけでなく、彼ら以外のビジネス担当者などにも分析業務のすそ野を広げていくことが、ビジネス基盤としての必要条件ととらえ、チャレンジしたいと考えていました。」
と、語るのはクラウド&アプリ事業部門クラウド開発運用部 2 課 課長の川田 雅人さん。ちなみにそれまで同社では、他社クラウドプラットフォーム上で、Hive や Spark などといったビッグデータ処理ツールを利用していたのですが、その環境では「80:20ルール」の呪縛から逃れれないことも問題になっていたと川田さんは語ります。
「データ分析の業務において問題となる 80:20 ルールとは、作業時間の 8 割が分析ではなく、その準備に割かれてしまう状況のこと。データを集めたり、それを変換・加工したりする前準備にほとんどの時間を費やしてしまい、価値のあることには 2 割の時間しか割けていないんです。データ分析チームは、データサイエンティスト、データエンジニア、ビジネス担当から構成されています。私自身、データエンジニアとして長らく、この問題に悩まされていたのですが、マネージドサービスである BigQuery が、我々をこうした準備やインスタンスの容量・性能設計業務から開放、運用にパラダイムシフトをもたらしてくれました。」(川田さん)
この成功を受けて同社では、データの効率的運用や処理時間の短縮、そして費用削減などを目的に、2016 年より GCP を本格導入。BigQuery を中心に、Cloud Dataflow や Cloud Pub/Sub、そして、Google Container Engine(GKE)などといった Google のテクノロジーを駆使して、複数アプリ・サービスの商用データ分析基盤を構築します。
「これはいわゆるプライベート DMP(Data Management Platform)なのですが、ユーザセントリックに分析し理解すること、セグメントを作りビジネスに活用すること、これらの目的のために、必要な全てのデータは BigQuery に投入し管理します。BigQuery の安価なストレージとクエリ課金モデルによって、目的に必要なボリュームのあるデータを躊躇なく扱えています。データをシンプルに 1 つの場所に入れられることで、データ管理、分析、集計、BI(Business Intelligence) ツールも含めて環境が一元化され、データ分析チームの作業効率は大きく向上。高速で、必要なデータをすぐに取り出せる BigQuery だからこそ実現できたと考えています。」(川田さん)
GCP の成長が、我々のビジネスも成長させていく
また、マネジメントサービスを導入したことで、これまで頭を悩ませていた監視・メンテナンス業務からデータ分析チームが開放されたということも大きかったそう。雑事に謀殺されず、データの利用や、データ構造の最適化に注力できるようになったことも大きな変化だったと川田さんは言います。
「BigQuery の強みは、GCP 内外に保存された生データをどんどん投げ込んでいけることなんですが、それでは最高のパフォーマンスは引き出せません。やはり目的に合わせてデータ構造を最適化する必要があるんです。これについては今年 3 月にサンフランシスコで行われた Google Cloud Next '17 でも熱い議論が交わされていましたね。我々の場合、BigQuery 内のストレージに、ほぼ生の蓄積データとそれぞれの目的に特化したデータマート層、その間に分析しやすく結合・変換・補完などがされている中間層といったデータ構造を導入することで効率性、生産性を高めています。これによって専門的なデータサイエンティストが最高のパフォーマンスを引き出せるようにしたほか、簡単な SQL なら書けるというマーケターにとっても使いやすい環境を構築することができました。」(川田さん)
そしてもう 1 つの工夫としてクエリ開発&実行フレームワークも構築。クエリとスケジュール、出力先を指定できる簡単なテンプレートを作ることによって、その中身をデータサイエンティストが自在にカスタマイズできるのはもちろん、SQL を少し書けるという程度の人がフォーマットをほんの少しだけチューニングして使うということもできるようにしました。これによって、誰でも簡単に、分析結果をすぐに商用サービスに適用できるようにしているそうです。
今後の展望としては、
Cloud Datalab
や、
Cloud ML
(Machine Learning)などといった機械学習系のフレームワークとの連携を既に始めているほか、現在は非公開ベータ版として提供されている次世代のインテリジェントデータサービス
Cloud Dataprep
による、さらなる省力化にも期待しているという川田さん。
「今、我々の業務が、GCP に支えられているという実感があります。GCP が成長すると我々のビジネスも成長していくのです。これからもぜひ一緒に進化していきたいですね。」(川田さん)
ソニーネットワークコミュニケーションズ株式会社の導入事例 PDF は
こちら
をご覧ください。
GCP のその他の導入事例は
こちら
をご覧ください。
合同会社コンデナスト・ジャパンの導入事例: 注目記事へのアクセス集中をものともしない堅牢なコンテンツ配信環境を Google Cloud Platform で実現
2017年8月4日金曜日
コンデナストは、最高のクオリティのコンテンツを提供するプレミア メディア カンパニー。日本法人となる合同会社コンデナスト・ジャパンは、『VOGUE JAPAN』や『GQ JAPAN』『WIRED』などのメディア・ブランドを展開しています。そんな同社が昨年末に、Web メディアの半数を Google Cloud Platform (GCP) に移行。その背景を聞いてきました。
■写真左から
合同会社コンデナスト・ジャパン
バックエンド・エンジニア 井上 貴弘氏
CTO 仁礼 英銘氏
データ・アナリティクス データ・アナリスト 大坪 弘典氏
■利用している Google Cloud Platform サービス
Google Compute Engine
、
BigQuery
など
■
合同会社コンデナスト・ジャパン
VOGUE GIRL 公式サイト
WIRED 公式サイト
コンデナストは、業界をリードするプリント、デジタル、動画コンテンツにより、多くのオーディエンスを惹きつけている。日本では、コンデナスト・ジャパンによって 1999 年 7 月に創刊した『VOGUE JAPAN』をはじめ、『GQ JAPAN』『WIRED』『VOGUE GIRL』『VOGUE Wedding』などのメディア・ブランドを展開している。
欲しかったのは急激なトラフィック増をものともしない強力なインフラ
多くの出版社がそうであるよう、コンデナスト・ジャパンも Web 展開にも積極的で、多数のオンラインメディアを展開中。そのうち「WIRED」と「VOGUE GIRL」の公式サイトを、2016 年末より Google Cloud Platform(GCP)上で稼働させています。その導入前夜を、同社 CTO(最高技術責任者)の仁礼 英銘さんは、こうふり返ります。
「より多くの読者に読んでもらうことを目的とするメディアのサイトは、さまざまな Web サービスの中でも、とりわけ負荷がかかりやすく、また、その増減が激しいという問題があります。記事を公開した直後はそれほどでもなかったのが、SNS などで拡散された瞬間にドカッと負荷がかかってしまうんですね。昨年夏に私が CTO に就任した時には、そのトラフィックを受け止められるインフラの構築が急務となっていました。」(仁礼さん)
それまで、コンデナスト・ジャパンでは、同社の 4 つの Web メディアを全てオンプレミス環境で運用していたのですが、年々増加するアクセス(VOGUE GIRL 1800 万 PV /月, WIRED 1400万 PV / 月)を支え続けることは難しく、その限界が近いことは明らかでした。そこで、仁礼さんはクラウドへの全面移行を決定し、さまざまなクラウドプラットフォームを検討、最終的に GCP を選択します。
「GCP を選んだ最大の理由は、急激な負荷上昇があった際に、最も素早くスケールしてくれるのが GCP だったからです。また、検討を開始した時期に、東京リージョンがオープンしたということも大きかったですね。そして、何より料金が安い。いわゆる “
継続利用割引
” の仕組みが柔軟で使いやすかったのが好印象でした。他社のそれは、1 年先までの利用をコミットしなければならないなど、変化の激しいメディアの世界になじまないものが多かったんです。」(仁礼さん)
そして昨年末から GCP への移行が順次スタート。まずは「VOGUE GIRL」を、続いて「WIRED」を GCP に移行させました。移行に際して、トラブルはなかったのか、移行作業を主導したバックエンド・エンジニアの井上 貴弘さんは次のように語ってくれました。
「実は『VOGUE GIRL』の時は、自分たちだけで移行作業を行なったのですが、ノウハウが全くなかったため、GCP のパフォーマンスを上手く引き出せないということがありました。そこで、Google さんに、GCP に関する豊富なノウハウをお持ちの Google 認定パートナーさんをご紹介いただき、以降は、二人三脚というかたちで作業を進めています。おかげで、現在は安定して稼働するようになりました。」(井上さん)
そして導入から約半年が経過した現在、その成果をコンデナスト・ジャパンはどのように評価しているのでしょうか?
「『VOGUE GIRL』の人気コンテンツに『しいたけ占い』というものがあります。毎週月曜日の朝に公開するのですが、これが夕方から夜にかけて、通常時の 10 倍以上の負荷を呼び込むんです。オンプレミスであれば、サーバーハードを追加投資し、待機させておかないと到底耐えられない負荷なのですが、GCP はこれを難なくさばいてくれます。以前、テレビに紹介された時に、なんと 150 倍ものトラフィックを記録したことがあったのですが、GCP はそれにも耐えてくれました。期待以上のパフォーマンスに満足しています。」(仁礼さん)
「もう1つの『WIRED』の場合は、ニュースサイトや SNS からの突発的な流入が多いのですが、GCP はそうした急激なアクセス向上にもしっかり耐えてくれるのがうれしいですね。もちろん、今後もチューニングは続けていき、より多くのアクセスがあっても快適に動作するようにしていきたいと考えています。」(井上さん)
BigQuery を活用して顧客動向をより詳細に分析したい
そして、コンデナスト・ジャパンでは、GCP をもう 1 つ、アクセス状況の統計的な分析に利用するプロジェクトも推進中。これまで同社ではアクセス解析を Google アナリティクスを使って行なっていたのですが、より正確な分析を行なうために BigQuery の活用を検討・研究中なのだそうです。
「Google アナリティクスでは、どうしてもセッション単位の分析しかできず、ユーザーの趣味嗜好などがはっきりとはわかりませんでした。我々のメディアは、こだわりを持つ層に向けたものなので、一般的なサイトよりも詳細な分析が必要。そこで、バッチ処理でアクセスログを BigQuery に転送・解析し、より正確なユーザー動向を分析できるようにしたいと考えています。」
そう語るのは、同社データ・アナリストの大坪 弘典さん。プロジェクトはまだ始まったばかりだそうですが、計画の第 1 ステップではどのように読者が定着していくのかを分析して、それを編集にフィードバック、第 2 ステップでは、レコメンデーションを内部だけでなく、広告など外部の誘導にも使っていきたいとしています。
「こうした処理をボタン 1 つで行なえるようになるのが、GCP のすごいところ。前職時代に、オンプレミス環境や他のクラウドプラットフォームで、同じようなことを凄まじい工数をかけてやろうとしているのを見ていたので、感心しました。この導入のしやすさは素晴らしいと思います。」(大坪さん)
「今後はレコメンデーションをさらに強化していくため、他の API と連携させて、サービスを拡充していきたいと考えています。こうしたことは他のクラウドプラットフォームでもできるのですが、GCP なら、ダッシュボードを見てもわかるように、チェックボックス 1 つで Compute Engine 上のインスタンスと各種 Cloud API との権限設定ができるなど、インテグレーションがスムーズにできるようになっています。我々が使っているのは、GCP という大きなプラットフォームのまだごく一部。今後も、これらをしっかり活用・統合していきたいと考えています。」(仁礼さん)
合同会社コンデナスト・ジャパンの導入事例 PDF は
こちら
をご覧ください。
GCP のその他の導入事例は
こちら
をご覧ください。
Labels
#GoogleCloudSummit
#GoogleNext18
#GoogleNext19
77 min Lunch
add on
admin
Advanced Solutions Lab
AI
AI Hub
AI Platform
Android
Anthos
API
App Engine
App Maker
apps
Apps script
ASL
atmosphere
Atmosphere Tokyo
AutoML
AutoML Natural Language
AutoML Translation
bigquery
Box
Calendar
Case Study
Chorme OS
Chrome
Chrome Enterprise
Chrome Enterprise 導入事例
Chrome for Work
Chrome ウェブストア
chromebook
chromebooks
Chromebooks for Education
Chromebooks for meeting
Chromebooks for Work
Chromebox
Chromebox for digital signage
Chromebox for meetings
Chronicle
Cisco
Cloud
Cloud Armor
Cloud AutoML
Cloud AutoML Natural Language
Cloud AutoML Translation
Cloud AutoML Vision
cloud connect
Cloud Dataflow
Cloud Identity
Cloud IoT Core
Cloud Load Balancing
Cloud Memorystore for Redis
Cloud monitoring
Cloud OnAir
Cloud Pub/Sub
Cloud Ranking
Cloud Services Platform
Cloud Storage
Cloud TPU
compliance
compute engine
Contact Center AI
Container Engine
Coursera
Deloitte
developers
Dialogflow Enterprise Edition
Drive for Work
Dropbox
earth api
Education
enterprise
Enterprise Japan
event
Evernote
Expo
Firebase
FISC
Forrester
G Suite
G Suite Business
G Suite for Education
G Suite 事例
G Suite 導入事例
G+
gadget
GAE
GCE
GCP
GCP 導入事例
GCP 認定資格チャレンジ
GDPR
GEO
GEP
GfWtips
GKE
gmail
Gmail、新機能
Gone Google
GoneGoogle
Google App Engine
Google Apps
Google Apps Blog
Google Apps for Education
Google Apps for Work
Google Apps Script
Google Apps ユーザー事例
Google Apps 導入事例
Google atmosphere
Google calendar
Google calender
Google classroom
Google Cloud
Google Cloud Certification
Google Cloud Next '18 in Tokyo
Google Cloud Next '19 in Tokyo
google cloud platform
Google Cloud Search
Google Cloud Summit '18
Google Cloud 認定資格チャレンジ
Google Commerce Search
Google Derive
Google Docs
Google Docs API
google drive
Google Drive for Work
Google Earth
google enterprise
Google Enterprise Day
Google for Education
Google for Work
Google form
Google hang-out
Google hung-out
google map
Google maps
google maps api
google maps api premier
Google Maps APIs
Google Maps for Work
Google Maps Platform
Google Message Continuity
google search appliance
Google Shopping
Google Sites
Google Springboard
Google Storage for Developers
Google Video
Google Wave
Google スライド
Google ドキュメント
Google ドライブ
Google フォーム
Google マップ
Google+
GoogleApps
GoogleApps、新機能、spreadsheets
groups
gsa
Hangouts Meet
healthcare
Hybrid Cloud Platform for Google Cloud
Inbox
INSIDE
iOS
iphone
ISAE 3402 Type II
ISO 27018
IT
Jamboard
japan
Kubeflow Pipelines
Looker
Lotus Notes
Machine learning
map
maps api
Maps 導入事例
Maps-sensei
Mapsコーナー
media
microsoft office
migration
mobile
new features
Next
Next Tokyo
OAuth
Office 365
Office of the CTO
Osaka
partner
Partner Interconnect
partner program
Partner Summit
postini
pricing
Qwiklabs
region
research
RSA
SAP
SAS70
search
Security
Security Key
seminar
Shizuoka
Signage
Sites
SMB
SSAE 16 Type II
startup
Status Dashboard
TensorFlow
Trial
Upload any files
vault
Veolia
Viacom
Virtual Conference
VMware
あっぷす先生
あっぷす先生 誤解をとく!
あっぷす先生会社訪問
イベント
インフラストラクチャ
おしえて!あっぷす先生
おしえて!くらうど先生
オフライン
クラウド
くらうど先生
サイネージ
サポート
セキュリティ
チームドライブ
チェンジマネジメント
デジタル トランスフォーメーション
テレワーク
パートナー
ハングアウト
プライバシー
まっぷす先生
ランキング
リージョン
ワークインサイト
円周率
海底ケーブル
企業検索
機械学習
互換性
事例
小売
新機能
働き方
認定資格
Archive
2019
8月
7月
6月
5月
4月
3月
2月
1月
2018
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2017
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2016
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2015
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2014
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2013
12月
11月
10月
9月
7月
6月
5月
4月
3月
1月
2012
12月
11月
10月
9月
8月
7月
6月
5月
4月
2月
2011
12月
10月
9月
8月
7月
5月
4月
2月
2010
12月
11月
10月
9月
7月
6月
5月
3月
2月
1月
2009
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
1月
2008
12月
11月
10月
9月
8月
7月
6月
5月
4月
3月
2月
2007
12月
Feed
Follow @googlecloud_jp
Useful Links
G Suite
Google Cloud Platform
Google 検索アプライアンス
Google Maps
G Suite 公式アップデート情報