DOORS DX

ベストなDXへの入り口が
見つかるメディア

Apache Sparkの導入検証を行いました －パフォーマンス検証編－

執筆者

DOORS編集部

公開日
2020.10.30
更新日
2024.02.26

皆さん、こんにちは。マーケティングプラットフォーム本部で広告系製品の開発を担当している渥美です。

前回の ブログでは、新たな分散基盤である「Apache Spark（アパッチ スパーク）」の概要について、「基礎編」として解説させていただきました。今回は、実際に弊社内で行ったパフォーマンス検証について、皆さんにスライドでご紹介したいと思います。

スライドの内容

1.Spark検証環境
2.Spark検証
3.Spark検証結果
4.Spark Streaming検証
5.Spark Streaming検証結果
6.Spark Streamingデモアプリ検証
7.Spark Streamingデモアプリ検証結果
8.まとめ

Sparkは、進化のスピードが速く、この検証中にもDataFrameを目玉とする「バージョン1.3」が公開されました。今後も、継続的にSparkエコシステムのウォッチを続けていくとともに、弊社でも導入を計画していきたいと考えています。

次回は、実際にSparkはどのような活用ができるのか、という検証の一環で、デモアプリケーションを作成しましたので、そちらの記事をアップします！


このページをシェアする

コピー
しました

この記事に関する
お問い合わせはこちら

あなたにオススメの記事

人気タグから探す

人気記事ランキング

あなたにおすすめの記事

Recommended Articles

株式会社ブレインパッドについて

2004年の創業以来、「データ活用の促進を通じて持続可能な未来をつくる」をミッションに掲げ、データの可能性をまっすぐに信じてきたブレインパッドは、データ活用を核としたDX実践経験により、あらゆる社会課題や業界、企業の課題解決に貢献してきました。 そのため、「DXの核心はデータ活用」にあり、日々蓄積されるデータをうまく活用し、データドリブン経営に舵を切ることであると私達は考えています。

株式会社ブレインパッド
についてはこちら

メールマガジン

Mail Magazine