DeepMind寻找减少AI训练能量消耗的方法

發布日期:

AI概念股 AI Stock 科技股 Tech Stock


2023年10月12日金融快讯Market Briefing
谷歌(GOOG)的人工智慧部门近几个月提交了一项专利申请,该系统在人工智慧训练过程中在模型大小和训练资料之间分配计算资源。从本质上讲,DeepMind 的工具可以帮助开发人员预算电力和培训资源。

它的工作原理如下:首先,该系统会获得一个“计算预算”,即用户在训练人工智慧模型来完成特定任务时愿意消耗的资源量。然后,系统会经历一个称为分配映射的过程,本质上是在训练模型时将某些资源分配给不同的任务。文件指出,该映射透过测量不同条件下模型的预测性能来考虑不同的试验分配。

因此,该系统会输出两个关键资讯:在给定预算下您的模型可以有多大,以及实现它需要多少训练资料。此系统给出的目标模型大小可以指导决策,例如使用多少参数,或建立神经网路的层数或神经元数量。 DeepMind 的方法最后是根据系统参数实例」机器学习模型,这只是测试它的工作效果。 该公司指出,该系统预计将“优化机器学习模型在机器学习任务上的性能”,因为它只占用其确切需要的培训资源。

微软和英特尔等科技公司一直在寻找人工智慧耗能问题的答案。 DeepMind 的母公司Google也一直在寻找一种扩散模型的专利,以提高准确性并减少计算资源的消耗。

但根据阿姆斯特丹自由大学商业与经济学院博士生分析,到2027 年,用于人工智慧开发的伺服器每年可能会消耗85 至134 太瓦时,即0.5占全球年度能源使用量的百分比,与几个国家持平。人工智慧资料中心消耗的能源如此之多,以至于公用事业公司正在背弃绿色能源承诺来满足需求。

谷歌花费了大量的精力,无论是字面上的还是像征意义上的跻身人工智慧领域的顶尖企业之列。该公司不断申请与人工智慧相关的专利,将人工智慧整合到其工作空间套件中,向Anthropic和Hugging Face等新创公司投入资金,并与晶片巨头Nvidia合作。

但如此规模的建设是有代价的。人工智慧训练引擎ThirdAI的产品主管表示,虽然这项技术不会减缓谷歌或DeepMind 人工智慧开发的步伐,但它肯定有助于减少过度消耗。该系统对于像谷歌这样同时建立和训练大量模型的大型组织特别有帮助。人工智慧开发的真正问题在于用于开发人工智慧的GPU,它比CPU 等其他硬体消耗一个数量级的能量。

在如此动荡的金融市场中,你会选择怎样投资?
一起深入了解资深投资者的美股交易策略。在投入股市之前,多认识美股市场,才可提高投资回报率。关注狂呼“个股分析”栏目,紧密跟踪美股走势,寻找更多投资机会。

点击此处了解更多

免责声明:本文章提供的信息仅供一般信息目的,并不应被视为投资建议。

返回博客
1 / 8
  • SiPhox開發微型硅光芯片血液檢測系統,創新性實現在家驗血

    SiPhox开发微型硅光芯片血液检测系统,创新性实现在家验血

    SiPhox Health正在通过一种创新的基于硅光子芯片的血液检测技术,帮助慢性病患者在家中便捷地管理病情。该设备大小类似于一台咖啡机,能够精确检测20种不同的生物标志物,极大简化了检测流程,使患者无需离开家门便可完成检测。

    SiPhox开发微型硅光芯片血液检测系统,创新性实现在家验血

    SiPhox Health正在通过一种创新的基于硅光子芯片的血液检测技术,帮助慢性病患者在家中便捷地管理病情。该设备大小类似于一台咖啡机,能够精确检测20种不同的生物标志物,极大简化了检测流程,使患者无需离开家门便可完成检测。

  • AI與量子計算:誰將引領未來科技?

    AI与量子计算:谁将引领未来科技?

    多年来,科技公司多年投入数十亿美元于量子计算机,寄希望于它们能在金融、药物研发、物流等多个领域带来颠覆性变革,尤其是在物理和化学领域,这种期待更为强烈,因为量子力学的独特效应在这些领域中发挥着重要作用。

    AI与量子计算:谁将引领未来科技?

    多年来,科技公司多年投入数十亿美元于量子计算机,寄希望于它们能在金融、药物研发、物流等多个领域带来颠覆性变革,尤其是在物理和化学领域,这种期待更为强烈,因为量子力学的独特效应在这些领域中发挥着重要作用。

  • 金剛石晶片的崛起,或引發全球AI半導體競爭新角逐

    金刚石晶片的崛起,或引发全球AI半导体竞争新角逐

    全球各国都在积极加快金刚石在半导体领域的研发步伐,并将其视为未来科技创新的关键材料。从高效能晶片散热解决方案到量子计算和光电应用,金刚石的潜力被各大研究机构和企业广泛看好。

    金刚石晶片的崛起,或引发全球AI半导体竞争新角逐

    全球各国都在积极加快金刚石在半导体领域的研发步伐,并将其视为未来科技创新的关键材料。从高效能晶片散热解决方案到量子计算和光电应用,金刚石的潜力被各大研究机构和企业广泛看好。

  • “微塑膠”成科學界關注焦點,或對人體健康造成潛在威脅

    “微塑胶”成科学界关注焦点,或对人体健康造成潜在威胁

    许多工业生产过程中,尤其是涉及塑胶制造、加工和拆卸的行业,都会产生大量的塑胶废料。这些废料往往被不当处置或遗弃,经过时间的推移,这些废弃塑胶在风力、雨水等自然条件下分解成微塑胶颗粒,进入土壤和水体。

    “微塑胶”成科学界关注焦点,或对人体健康造成潜在威胁

    许多工业生产过程中,尤其是涉及塑胶制造、加工和拆卸的行业,都会产生大量的塑胶废料。这些废料往往被不当处置或遗弃,经过时间的推移,这些废弃塑胶在风力、雨水等自然条件下分解成微塑胶颗粒,进入土壤和水体。

1 / 4
1 / 4
  • 在變革中的抉擇:當今大環境下如何實現職業規劃與人生價值?

    在变革中的抉择:当今大环境下如何实现职业规划与人生价值?

    随着时代的变迁,人生价值的内涵也变得更加多样化和个性化。每个人对于“成功”和“幸福”的理解不同,有些人追求的是即时的快乐和成就感,而有些人则看重长期的进步和自我超越。

    在变革中的抉择:当今大环境下如何实现职业规划与人生价值?

    随着时代的变迁,人生价值的内涵也变得更加多样化和个性化。每个人对于“成功”和“幸福”的理解不同,有些人追求的是即时的快乐和成就感,而有些人则看重长期的进步和自我超越。

  • 再見愛人:探索現代婚姻中的情感困境

    再见爱人:探索现代婚姻中的情感困境

    芒果TV婚姻纪实观察节目“再见爱人4”邀请黄圣依、杨子,麦琳、李行亮,葛夕、刘爽三对情感关系10年以上的夫妻,以“婚姻纪实观察”为切口,呈现出不同婚姻样本在亲密关系中的挣扎与甜蜜、桎梏与觉醒。

    再见爱人:探索现代婚姻中的情感困境

    芒果TV婚姻纪实观察节目“再见爱人4”邀请黄圣依、杨子,麦琳、李行亮,葛夕、刘爽三对情感关系10年以上的夫妻,以“婚姻纪实观察”为切口,呈现出不同婚姻样本在亲密关系中的挣扎与甜蜜、桎梏与觉醒。

  • 抖音短劇新風潮:中老年人成為新的增長點?

    抖音短剧新风潮:中老年人成为新的增长点?

    近日,不少以老年人为主角的抖音短剧“闪婚五十岁”、“金榜题名之母凭子贵”、“人到五十,闪婚霸总”等等登上热度榜单。老年人的婚姻、情感以及生活故事,成了当下短剧创作的“新流量密码”。

    抖音短剧新风潮:中老年人成为新的增长点?

    近日,不少以老年人为主角的抖音短剧“闪婚五十岁”、“金榜题名之母凭子贵”、“人到五十,闪婚霸总”等等登上热度榜单。老年人的婚姻、情感以及生活故事,成了当下短剧创作的“新流量密码”。

  • 京東楊笠事件背后:愚昧的社會何去何從?

    京东杨笠事件背后:愚昧的社会何去何从?

    临近双十一,没想到第一场公关战就炸在了京东身上。而更万万没想到的是,翻车的点不是价格,也不是带货主播,而是更尖锐更为敏感的“男女性别”话题,还把脱口秀演员杨笠推向了风口浪尖。

    京东杨笠事件背后:愚昧的社会何去何从?

    临近双十一,没想到第一场公关战就炸在了京东身上。而更万万没想到的是,翻车的点不是价格,也不是带货主播,而是更尖锐更为敏感的“男女性别”话题,还把脱口秀演员杨笠推向了风口浪尖。

1 / 4