色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

使用NVIDIA RAPIDS cuDF加速預處理工作流

NVIDIA英偉達 ? 來源:NVIDIA英偉達 ? 2024-11-19 15:58 ? 次閱讀

本文屬于《解碼 AI》系列欄目,該系列的目的是讓技術更加簡單易懂,從而解密 AI,同時向 RTX 工作站和 PC 用戶展示全新硬件、軟件、工具和加速特性。

AI 正幫助各行各業推動創新和提高效率,但要充分發揮其潛力,必須基于海量的高質量數據對各種模型進行訓練。數據科學家在準備這類數據方面發揮著關鍵作用,在專業數據(通常為專有數據)對于增強 AI 功能至關重要的特定領域尤其如此。

為了幫助數據科學家應對日益增長的工作負載需求,NVIDIA 發布了 RAPIDS cuDF 庫,以便用戶更輕松地處理數據,并且無需更改代碼即可加速 pandas 軟件庫。Pandas 是面向 Python 的一個靈活、功能強大的熱門數據分析和處理庫。借助 cuDF,數據科學家現在可以在他們首選的代碼庫上全速運行數據處理。

NVIDIA RTX AI 硬件和技術也可以加速數據處理。這包括強大的 GPU,可提供在各個層面快速高效地加速 AI 所需的計算性能 — 從數據科學工作流到 PC 和工作站上的模型訓練和定制。

數據科學的瓶頸

最常用的數據格式是按行和列組織的表格數據。小型數據集可以使用 Excel 等電子表格工具進行管理,但是,包含數千萬行的數據集和建模工作流通常依賴于采用了例如 Python 等編程語言的 DataFrame 程序庫。

Python 是進行數據分析時的熱門選擇,主要是因為 pandas 庫采用易于使用的應用編程接口(API)。然而,隨著數據集的規模不斷增長,pandas 在純 CPU 系統中難以實現理想的處理速度和效率。該庫在處理文本密集型數據集時的性能也為人所詬病,而對大語言模型來說,這是一種重要的數據類型。

當數據需求超出 pandas 的能力時,數據科學家會面臨兩難境地:要么忍受緩慢的處理速度,要么采取復雜且成本高昂的措施,即轉而采用更高效但對用戶不夠友好的工具。

使用 RAPIDS cuDF加速預處理工作流

RAPIDS cuDF 配合 RTX AI PC 和工作站,可為熱門的 pandas 軟件庫提供最高達 100 倍加速

借助 RAPIDS cuDF,數據科學家現在可以在他們首選的代碼庫上全速運行數據處理。RAPIDS 是一套開源 GPU 加速的 Python 庫,旨在改進數據科學和分析工作流。cuDF 是一個 GPU DataFrame 庫,可提供類似于 pandas 的 API 來加載、過濾和操作數據。

使用 cuDF 的“pandas 加速器模式”,數據科學家可以在 GPU 上運行現有的 pandas 代碼,充分利用強大的并行處理功能,并可放心的將代碼在必要時移植到 CPU 上。這種互通性提供了出色、可靠的性能。

最新版本的 cuDF 支持更大規模的數據集和數十億行的表格文本數據。這樣,數據科學家就能夠使用 pandas 代碼來預處理生成式 AI 的數據。

在 NVIDIA RTX 加持的 AI 工作站

和 PC 上加速數據科學

最近的一項研究表明,57% 的數據科學家使用 PC、臺式機或工作站等本地資源來執行數據科學任務。

從 NVIDIA GeForce RTX 4090 GPU 開始,數據科學家可以實現顯著的速度提升。隨著數據集規模不斷增長,處理工作占用更多內存,相比于基于傳統 CPU 的解決方案,在工作站中配合使用 cuDF 和 NVIDIA RTX 5880 Ada 架構 GPU,可以將性能提升多達 100 倍。

ea062c2c-9ffd-11ef-93f3-92fbcf53809c.png

y 軸表示兩種常見的數據科學操作—“join”和“groupby”,而 x 軸顯示運行每項操作所需的時間

數據科學家可以在 NVIDIA AI Workbench 上輕松開始使用 RAPIDS cuDF。利用這個基于容器的免費開發者環境管理器,數據科學家和開發者可以跨 GPU 系統創建、遷移 AI 和數據科學工作負載并進行協作。用戶可以從 NVIDIA GitHub 倉庫中提供的幾個示例項目開始,例如 cuDF AI Workbench 項目。

HP AI Studio 也默認支持 cuDF,這是一個集中式數據科學平臺,旨在幫助 AI 開發者將其開發環境從工作站無縫復制到云端。這便于他們創建、開發項目并進行協作,而無需管理多個環境。

在 RTX 加持的 AI PC 和工作站上,cuDF 的優勢并不僅限于提升原始性能。還包括:

在強大的 GPU 上進行固定成本的本地開發,并可以無縫復制到本地部署的服務器或云實例,從而節省時間和支出。

加快數據處理以實現更快迭代,以便數據科學家以交互式的速度進行實驗、優化并從數據集中產生洞察。

實現更有效的數據處理,以在后續工作流獲得更好的模型結果。

數據科學的新時代

隨著 AI 和數據科學的不斷發展,快速處理和分析大量數據集的能力將成為各行業實現突破的關鍵差異化因素。無論是開發復雜的機器學習模型、執行復雜的統計分析還是探索生成式 AI,RAPIDS cuDF 都可為新一代數據處理奠定基礎。

NVIDIA 正通過增加對最熱門的 DataFrame 工具的支持來鞏固這一基礎,其中包括 Polars,它是增長最快的 Python 庫之一,與其他開箱即用的純 CPU 工具相比,可幫助顯著加速數據處理。

Polars 本月宣布推出由 RAPIDS cuDF 提供支持的 Polars GPU 引擎公開測試版。Polars 用戶現在可以將本已極快的 DataFrame 庫性能提升多達 13 倍。

RTX AI 為未來的工程師創造無限可能

無論在大學數據中心、GeForce RTX 筆記本電腦還是 NVIDIA RTX 工作站上運行,NVIDIA GPU 都可加速學習過程。數據科學領域及其他領域的學生將增強其學習體驗,并通過廣泛應用于現實世界應用的硬件獲得實戰經驗。

生成式 AI 正在深入改變游戲、視頻會議和各種交互體驗。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • NVIDIA
    +關注

    關注

    14

    文章

    4981

    瀏覽量

    102994
  • AI
    AI
    +關注

    關注

    87

    文章

    30757

    瀏覽量

    268902
  • 工作流
    +關注

    關注

    0

    文章

    44

    瀏覽量

    12421

原文標題:解密 AI 如何加速數據科學工作流

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    NVIDIA助力西門子醫療加速醫學影像AI部署

    MONAI 集成現已上線西門子醫療 Digital Marketplace,加速 AI 在臨床工作流中的應用落地。
    的頭像 發表于 12-06 11:51 ?281次閱讀

    數據科學工作流原理

    數據科學工作流包括數據收集、數據預處理、數據探索與可視化、特征選擇與工程、模型選擇與訓練、模型評估與優化、結果解釋與報告、部署與監控等環節。
    的頭像 發表于 11-20 10:36 ?185次閱讀

    NVIDIA加速計算引入Polars

    Polars 近日發布了一款由 RAPIDS cuDF 驅動的全新 GPU 引擎,該引擎可將 NVIDIA GPU 上的 Polars 工作流速度最高提速 13 倍,使數據科學家僅在一
    的頭像 發表于 11-20 10:03 ?197次閱讀
    將<b class='flag-5'>NVIDIA</b><b class='flag-5'>加速</b>計算引入Polars

    RAPIDS cuDF將pandas提速近150倍

    NVIDIA GTC 2024 上,NVIDIA 宣布,RAPIDS cuDF 當前已能夠為 950 萬 pandas 用戶帶來 GPU 加速
    的頭像 發表于 11-20 09:52 ?165次閱讀
    <b class='flag-5'>RAPIDS</b> <b class='flag-5'>cuDF</b>將pandas提速近150倍

    NVIDIA發布全新AI和仿真工具以及工作流

    NVIDIA 在本周于德國慕尼黑舉行的機器人學習大會(CoRL)上發布了全新 AI 和仿真工具以及工作流。機器人開發者可以使用這些工具和工作流,大大加快 AI 機器人(包括人形機器人)的開發
    的頭像 發表于 11-09 11:52 ?264次閱讀

    全新NVIDIA AI工作流可檢測信用卡欺詐交易

    工作流由 AWS 上 的 NVIDIA AI 平臺驅動,可幫助金融服務機構節省資金并降低風險。
    的頭像 發表于 10-30 11:41 ?458次閱讀

    利用NVIDIA RAPIDS加速DolphinDB Shark平臺提升計算性能

    DolphinDB 是一家高性能數據庫研發企業,也是 NVIDIA 初創加速計劃成員,其開發的產品基于高性能分布式時序數據庫,是支持復雜計算和數據分析的實時計算平臺,適用于金融、電力、物聯網和零售等行業。
    的頭像 發表于 09-09 09:57 ?453次閱讀
    利用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>RAPIDS</b><b class='flag-5'>加速</b>DolphinDB Shark平臺提升計算性能

    行云流水線 滿足你對工作流編排的一切幻想~skr

    的核心組成部分,旨在加速軟件交付、提高質量和實現持續改進。流水線的核心是流水線模型,是實現工作流編排,執行的重要基石,一個優秀的流水線模型可以覆蓋用戶更多的實踐場景,按照用戶的所思所想支持編排相應的工作流程,通過模型的分層設計,
    的頭像 發表于 08-05 13:42 ?266次閱讀

    電子制造商采用NVIDIA AI和 Omniverse助力工廠提高運營效率并降低成本

    。 ? NVIDIA 宣布,各大電子制造商正在使用 NVIDIA 的技術并借助新的參考工作流將其工廠改造成具有更高自主化水平的設施。該工作流結合了
    的頭像 發表于 06-04 10:22 ?606次閱讀

    信號的預處理包括哪些環節

    信號預處理是信號處理的一個重要環節,它對信號進行一系列的操作,以便于后續的分析和處理。信號預處理的目的是提高信號的質量,減少噪聲,保留有用的信息,以及滿足后續
    的頭像 發表于 06-03 10:35 ?2937次閱讀

    MathWorks 與 NVIDIA 聯手加速醫療技術領域中軟件定義工作流的開發

    到 GPU?加速NVIDIA Holoscan?算子中以進行實時數據處理和推斷,從而加速數據分析和可視化應用程序的開發與部署。 醫療設
    的頭像 發表于 05-17 10:36 ?360次閱讀
    MathWorks 與 <b class='flag-5'>NVIDIA</b> 聯手<b class='flag-5'>加速</b>醫療技術領域中軟件定義<b class='flag-5'>工作流</b>的開發

    MathWorks與NVIDIA攜手革新醫療技術工作流

    在醫療科技領域,軟件定義工作流正迎來新的突破。全球知名的數學計算軟件巨頭MathWorks與圖形處理器領導者NVIDIA近日宣布達成深度合作,將MATLAB?軟件成功集成至NVIDIA
    的頭像 發表于 05-11 10:17 ?371次閱讀

    MathWorks聯手NVIDIA加速醫療技術領域中軟件定義工作流的開發

    先的數學計算軟件開發商 MathWorks 宣布,MATLAB 已成功集成到 NVIDIA Holoscan 平臺。
    的頭像 發表于 05-09 11:45 ?1759次閱讀
    MathWorks聯手<b class='flag-5'>NVIDIA</b><b class='flag-5'>加速</b>醫療技術領域中軟件定義<b class='flag-5'>工作流</b>的開發

    全新NVIDIA Omniverse Cloud API有何亮點?

    NVIDIA Omniverse Cloud API 使開發者能夠將 Omniverse 技術集成到其設計與仿真工具和工作流中。
    的頭像 發表于 03-20 13:42 ?466次閱讀

    NVIDIA宣布將以API形式提供Omniverse? Cloud

    NVIDIA Omniverse Cloud API 使開發者能夠將 Omniverse 技術集成到其設計與仿真工具和工作流中。
    的頭像 發表于 03-20 09:45 ?455次閱讀
    主站蜘蛛池模板: 成人免费精品视频| 东京热影院| 国产精品婷婷久青青原| 簧片在线观看| 秋霞网在线伦理免费| 亚洲爆乳无码精品AAA片蜜桃| 最近免费视频中文2019完整版| xxxx免费观看| 九九热伊人| 日韩精品一区VR观看| 尹人综合网| 91久久偷偷做嫩草影院免| yellow在线观看免费直播| 精品人妻无码一区二区三区蜜桃臀| 美丽的姑娘BD在线观看| 午夜在线播放免费人成无| 97蜜桃网123.com| 国产一级毛片在线| 日本久久频这里精品99| 在线亚洲精品福利网址导航| 国产 亚洲 另类 欧美 在线| 美国一级黄色| 在教室伦流澡到高潮H女攻视频| 大桥未久电影在线| 免费观看成人毛片| 野花日本大全免费观看3中文版| 国产成人一区二区三区在线观看| 免费A级毛片无码无遮挡| 一本道色播| 好男人资源免费观看1| 武汉美女洗澡| 国产精品嫩草99AV在线| 日韩AV爽爽爽久久久久久| 99国产在线精品视频| 美女动态图真人后进式| 在线 中文字幕| 久久香蕉电影| 中字幕久久久人妻熟女天美传媒| 久久国产伦子伦精品| 印度学生xxxxx性14一16| 久久成人伊人欧洲精品AV|