NVIDIA cuDF 加速了谷歌云上的 Apache Spark 應用,幫助 Snap 工程師更快地測試和部署新功能,同時大幅節省成本。
![]()
上圖由 Snap 提供,展示了其地圖功能的 A/B 測試。
Snapchat 等社交媒體應用的功能幾乎與流行趨勢一樣,發展日新月異。為了跟上步伐,其母公司 Snap 在谷歌云服務上采用了 NVIDIA 的開放數據處理庫來加速開發。
Snap 每天早上在 3 小時的窗口期內使用 Apache Spark 分布式框架處理超過 10 PB 的數據,每月運行數千個此類實驗。通過采用由 NVIDIA cuDF 加速的 Apache Spark,該公司使用 NVIDIA GPU 優化數據處理工作負載, 在相同數量的機器上實現 4 倍的運行速度提升,為擴展提供了一條經濟高效的路徑。
通過將 NVIDIA 的 GPU 優化軟件(包括 NVIDIA CUDA-X 庫)與谷歌的基礎設施管理服務(如 Google Kubernetes Engine)相結合,Snap 利用全棧平臺實現了大規模的數據處理。
以上為摘要內容,點擊鏈接閱讀完整內容:快速決策:加速數據處理的開放庫如何助力 Snapchat 進行 A/B 測試 | NVIDIA 英偉達博客
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.