データエンジニアリング
For achieving success of digital transformation
拡張性のある持続可能な分析エコシステムには、信頼性の高いデータエンジニアリングが不可欠です。AURIQはデータレイクソフトウェア「essentia」の利活用を支援するデータエンジニアリングサービスを提供しています。お客様のビジネス課題を理解した経験豊富なコンサルタントが、業務運用を踏まえた実務的なデータ活用を適切な規模感でご提案いたします。
企業によるデータ活用の促進を人的にサポートするサービスのため、新たなサイロを生み出すような冗長なシステムはご提案いたしません。すでにお持ちのアセットは有効に活用し、データ処理、データ分析の要件に見合った機能をessentiaおよび最新のテクノロジーを駆使し、高いコストメリットでご提供いたします。
顧客課題と解決策
提供例
- ◆バッチやリアルタイムストリーミングを含むすべてのデータソースの統合
- ◆ETLなどの事前データ処理
- ◆多数のデータソースと多数のキーを用いた複雑な名寄せ処理
- ◆分析の前段階としてのデータアセスメントの提供
- ◆データサイエンスを用いたデータの探査
- ◆最適なアルゴリズムやモデルを使用したデータ処理やアナリティクス
- ◆特徴量エンジニアリングを用いた予測精度向上
- ◆超大規模データのリアルタイムのデータ処理および他システムとのデータ連携
- ◆持続的でかつスケーラブルな分散型エコシステムの提供
- ◆取り扱うデータのレベルに応じた適切なデータセキュリティの提供
データエンジニアリングによってできること
複数のCookie値を一意の会員IDに名寄せする
ユーザー判定テーブルデータ処理例
- N回目訪問で、cookie: xxとログインID(uid1)を取得。ユーザ判定テーブルに記録。
- N+1回目訪問で、cookie: xxを記録。ユーザ判定テーブルを参照し、会員IDはuid1と判明。uid1のログインなし訪問として処理。
- 次の訪問で、uid1がcookie: aaの端末でアクセスし、ログイン、会員IDはuid1と判明。cookie: aaをuid1のユーザ判定テーブルに追記。
- 更に次の訪問で、uid1がcookie: aaの端末でアクセス。ログインしなかったが、ユーザ判定テーブルのuid1の情報と照合し、uid1のログインなしの訪問として記録。
デジタルチャネルシフトに向けた顧客接点強化
顧客接点強化に向けたデータエンジニアリング
タッチポイントの統合で見えてくる顧客体験イメージ
Data Engineering
CASE STUDY
CASE STUDY1 複数のサービスでそれぞれに付与されているIDを集約し、集合IDを付与
【データ処理概要】
STEP1 IDの値が入っているデータと入っていないデータを分離
STEP2 空のカラムには他と重複しない番号を付番、集合IDを付与
STEP3 処理対象のデータが同一の値で集合IDが異なる場合は集約
STEP4 元データの集合IDをSTEP3の値に修正
STEP5 同様の処理をIDごとに繰り返し実行し、最終的な集合IDのリストをアウトプット
CASE STUDY2
オンライン購入者の予測
~特徴量エンジニアリング
CASE STUDY3 IoTデータ ~ジオフェンスを用いた行動分析
今日からはじめてみませんか?
AURIQの製品・ソリューションの
資料をお配りしています。
お電話でも承ります。お気軽にご相談ください。