ページを読み込み中…
ページを読み込み中…
3件の記事
Pinterest が、ユーザーの質問に答えて商品を探す実験的な AI ショッピングアプリ「Ask Pinterest」を発表した。
Pinterest Engineeringは、監視性の向上、設定調整、自動メモリ再試行を導入し、Apache Sparkのメモリ不足障害を96%削減した。段階的導入とダッシュボードにより、データパイプラインが安定化し、手動介入と運用負荷が軽減された。
PinterestはKafka、Flink、Spark、Icebergを使用した次世代CDCベースデータベース取り込みフレームワークを導入し、データ利用可能時間を24時間以上から15分に短縮し、変更レコードのみ処理、増分更新・削除をサポート、ペタバイトレベルのデータ処理を実現した。