在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

優步有開源光纖,一個新的庫

倩倩 ? 來源:互聯網分析沙龍 ? 2020-04-19 09:55 ? 次閱讀

優步有開源光纖,一個新的庫,旨在授權用戶在計算機集群上實現大規模的機器學習計算。 庫的主要目標是利用異構計算硬件,動態規模算法,并減輕工程師在集群上實現復雜算法的負擔。.

對于機器學習框架來說,保持足夠的靈活性來支持強化學習(RL)和基于人口的算法以及其他啟發式算法(如深度學習)是一個挑戰,因為需求可能會有很大的變化。

雖然TensorFlow和Py Torch等已建立的框架涵蓋了大多數常見機器學習方法的分布式培訓設置,但這些框架不太適合基于RL和基于人口的方法,這往往需要與模擬器頻繁交互以及復雜和動態的縮放策略。 光纖為其分布式計算框架提供了統一的Python用戶界面,以支持這些新需求。

與Fiber一起發表的研究論文詳細介紹了用于評估框架開銷、進化策略和近端策略優化(PPO)庫的實驗。 研究人員比較了Fiber與IPy并行(iPython用于并行計算)、Spark和標準python多處理庫在框架開銷上的性能,發現Fiber在任務持續時間較短時優于iPy并行和Spark,這是處理模擬器時要理解的重要指標。

與Atari基準中關于Breakout的多處理實現相比,Fiber啟用的PPO分布式版本的性能表明,Fiber可以將RL算法擴展到本地機器之外。

光纖分成API層,后端層,簇層。. API層與標準Python多處理模塊具有相似的要求和語義,但擴展到分布式環境中工作。

后端層可以處理多個不同集群管理器的任務通信。 最后,聚類層包含Kubernetes和Peloton等集群管理器。

光纖引入了一個新的概念,稱為工作支持過程。 當啟動其中一個進程時,將創建一個在當前集群上帶有Fiber后端的新作業。 父容器在使用相同的容器映像啟動子進程之前封裝所需的文件、輸入數據和該作業的任何其他依賴項,以保證一致的運行環境。 下圖更詳細地說明了這一架構:

纖維和谷歌新的分布式強化學習庫種子RL的發布表明,大科技公司的目標是既降低成本,又簡化培訓尖端機器學習算法的過程。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 光纖
    +關注

    關注

    19

    文章

    3942

    瀏覽量

    73420
  • 算法
    +關注

    關注

    23

    文章

    4625

    瀏覽量

    93129
  • 機器學習
    +關注

    關注

    66

    文章

    8430

    瀏覽量

    132856
收藏 人收藏

    評論

    相關推薦

    開源AI模型是干嘛的

    開源AI模型是指那些公開源代碼、允許自由訪問和使用的AI模型集合。這些模型通常經過訓練,能夠執行特定的任務。以下,是對開源AI模型的詳細
    的頭像 發表于 12-14 10:33 ?231次閱讀

    芯原股份與開源圖形LVGL達成戰略合作

    為廣泛的嵌入式應用提供優化和擴展的圖形處理能力。作為首批為LVGL生態系統提供3D GPU技術支持的提供商之,芯原將助力進一步提升LVGL圖形的3D圖形渲染能力。
    的頭像 發表于 11-29 09:20 ?392次閱讀

    PingCAP推出TiDB開源分布式數據

    “作為款PingCAP自主研發、面向全球用戶的開源數據,TiDB走在了技術的前沿。得益于第四代英特爾 至強 可擴展處理器卓越的代際性能提升,以及其搭載的多種硬件加速器,我們進一步
    的頭像 發表于 11-24 11:26 ?507次閱讀
    PingCAP推出TiDB<b class='flag-5'>開源</b>分布式數據<b class='flag-5'>庫</b>

    分享嵌入式通用FIFO環形緩沖區實現

    開源項目ringbuff ,是款通用FIFO環形緩沖區實現的開源,作者MaJerle,遵循 MIT 開源許可協議。
    的頭像 發表于 10-23 16:20 ?484次閱讀
    分享<b class='flag-5'>一</b><b class='flag-5'>個</b>嵌入式通用FIFO環形緩沖區實現<b class='flag-5'>庫</b>

    保偏光纖和普通光纖的區別是什么

    可能具有定的吸收能力,能夠吸收掉光信號中不需要的偏振分量,進一步增強光信號的偏振效果。 部分保偏光纖(如SMA905光纖)在纖芯和包層之間
    的頭像 發表于 10-16 10:10 ?837次閱讀

    加速電氣化進程,電動汽車超18萬輛

    美國打車軟件巨頭近日宣布,其正在加速推進電氣化措施,以實現零排放平臺的目標。據CEO達拉·科斯羅薩西(Dara Khosrowshahi)透露,目前
    的頭像 發表于 10-11 17:49 ?493次閱讀

    對Wayve進行戰略投資

    英國自動駕駛領域的創新先鋒Wayve公司近期宣布與全球出行巨頭(Uber)攜手,共同開啟自動駕駛技術的新篇章。此次合作中,不僅成為Wayve的重要戰略合作伙伴,還宣布對其進行戰
    的頭像 發表于 08-30 16:12 ?903次閱讀

    恒訊科技分析:跨境電商網站哪些數據系統是推薦使用的?

    對于跨境電商網站,數據系統的選擇非常關鍵,以下是些推薦使用的數據系統: 1、MySQL:MySQL是流行的
    的頭像 發表于 08-12 15:01 ?415次閱讀

    光纖多少芯

    光纖的芯數并不是固定的,它可以根據不同的應用需求和設計要求而有所不同。光纖的芯數指的是光纖內部所含的玻璃纖維的數量,常見的光纖芯數包括1
    的頭像 發表于 08-06 09:35 ?2863次閱讀

    比亞迪攜手引進10萬輛電動汽車,致力共同研發自動駕駛技術

    7月31日,來自科技公司和比亞迪股份有限公司的喜訊傳來,兩家企業聯手正式達成了長期戰略性合作伙伴關系。此次合作的重點內容是,將有大約十萬輛比亞迪電動汽車在全球范圍內多個平臺上亮
    的頭像 發表于 08-02 16:56 ?1249次閱讀

    阿里云與中興通訊達成開源數據合作

    近日,阿里云與中興通訊宣布達成開源數據領域的深度合作。中興通訊正式加入PolarDB開源社區,并榮任首屆理事會成員單位,這舉措標志著兩大科技巨頭在數據
    的頭像 發表于 05-17 10:47 ?596次閱讀

    阿里云與中興通訊達成開源數據合作,助推國產數據發展

    據悉,阿里云與中興通訊于5月16日公布了開源數據合作事宜。中興通訊正式宣布加入PolarDB開源社區,并擔任首屆理事會成員單位。
    的頭像 發表于 05-16 16:34 ?498次閱讀

    單模光纖:下一個趨勢是什么?

    隨著對高速、可靠網絡的需求不斷增長,單模光纖電纜 (OS2) 作為面向未來的解決方案越來越受歡迎。隨著這趨勢的繼續,新的數據中心將發現 OS2 光纖
    的頭像 發表于 04-10 10:53 ?391次閱讀
    單模<b class='flag-5'>光纖</b>:下<b class='flag-5'>一個</b>趨勢是什么?

    24芯預端接光纜接頭和2接頭啥區別

    24芯預端接光纜接頭和兩接頭的區別主要表現在芯數和性能上。 對于芯數,接頭指的是單芯,光纖
    的頭像 發表于 03-06 10:37 ?780次閱讀

    光纖耦合器分單模和多模嗎 光纖分路器和光纖耦合器何不同

    光纖耦合器分單模和多模嗎 光纖分路器和光纖耦合器何不同 光纖耦合器分單模和多模,具體來說,光纖
    的頭像 發表于 02-20 14:11 ?1789次閱讀
    主站蜘蛛池模板: 国产日本在线播放| 日本不卡视频一区二区| 男人的天堂视频在线| 成人网中文字幕色| 啪啪国产视频| 欧美成人三级网站| 伊人天天操| 国产综合图片| 欧美高清成人videosex| 天堂在线www| 色多多福利网站| 国产高清在线免费| 久久婷婷色一区二区三区| 日本黄色片www| 天堂tv在线观看| 人人人人凹人人爽人人澡| 久久婷婷国产综合精品| 成年人黄色大片大全| 国产精品一区二区三区四区五区 | 国产成人在线影院| 视频在线精品| 午夜亚洲国产精品福利| 51久久| 成人亚洲综合| 大香伊人网| 天天搞天天爽| 三级成人网| 在线视频永久在线视频| 999久久久国产精品| 国产大片免费观看中文字幕| 黄色网址 在线播放| 69日本人xxxxxxxx色| 免费国产h视频在线观看| 日本不卡高清视频| 好爽好深太大了再快一点| 色吧色吧色吧网| 五月婷婷色| 色伊人久久| 人人插97| 又黄又粗暴的120秒免费gif视频 | 成人一二|