亚马逊使用新的内置算法和Git集成更新SageMaker
2018-11-22 09:45:12AI云资讯1439

“机器学习是一个高度协作的过程 - 将领域经验与技术技能相结合是成功的基石,通常需要多次迭代和不同数据集和功能的实验,”学习和人工智能(AI)总经理Matt Wood博士在亚马逊网络服务公司的一篇博文中写道。“培训一个成功的模型几乎从来就不是一个一体的,所以能够跟踪重要的决策,重播成功的部分,重用有效的部分,并获得没有的东西的帮助是很重要的。我们正在引入新功能,使这些迭代更易于管理,重复和共享。“
首先列出的是Sagemaker Search,它使AWS客户能够找到使用数据集,算法和参数的独特组合执行的AI模型训练运行。它可以从SageMaker控制台访问。
在新功能列表中加入Sagemaker Search是步骤功能,它跨多个服务协调完成机器学习工作流程所需的步骤。还新的?与Apache Airflow集成,Apache Airflow是一个用于创作,调度和监控工作流的开源框架。
Step Functions和Apache Flow将于下个月开始提供。
“[使用Step Functions,你]可以自动将数据集发布到Amazon S3,使用SageMaker训练数据的ML模型,并部署模型进行预测,”Wood博士写道。“[它会]监视SageMaker(和Glue)作业,直到它们成功或失败,并转换到工作流程的下一步或重试作业。它包括内置的错误处理,参数传递,状态管理和可视控制台,可让您在运行时监控ML工作流程。“
这些改进与添加三个新的内置算法相吻合 - 一个用于可疑IP地址(IP Insights),用于高维对象的低维嵌入(Object2Vec)和无监督分组(K-means聚类) - SageMaker和AWS'对于谷歌Tensorflow的优步开源深度学习框架Horovod的新发现支持;软件机器学习库scikit-learn;和Spark MLeap。
整体升级还包括可视化和与版本控制系统Git的集成,这有助于跟踪和协调文件中的更改。现在,开发人员可以将GitHub,AWS CodeCommit或自托管Git存储库与SageMaker笔记本链接,以便克隆公共和私有存储库,或使用IAM,LDAP和AWS Secrets Manager在Amazon SageMaker中存储存储库信息。
最后,在安全方面,SageMaker现在符合亚马逊的系统和组织控制(SOC)1级,2级和3级审核。
“这些新功能,算法和认证将有助于为更多开发人员带来更多的机器学习工作负载。通过几乎完全专注于客户的要求,我们正在通过亚马逊SageMaker在现实世界中使机器学习变得有用和可用方面取得了实际进展,“Wood博士写道。“在人工智能方面,认证,实验和自动化并不总是你能想到的第一件事,但我们的客户告诉我们,这些功能可以进一步缩短构建,培训和部署模型所需的时间。不需要研发部门。“
相关文章
- 金牌护航 智领出海——拓威天海亮相2025亚马逊全球开店跨境峰会,以定制化服务引爆跨境物流热潮
- 涂鸦智能荣膺亚马逊云科技2025年合作伙伴奖项
- 伊克罗德信息蝉联2025亚马逊云科技中国区年度创新合作伙伴奖,以AI深耕云端未来
- 聚焦亚马逊峰会:获官方推荐合作伙伴PartnerBoost,展位洽谈热度持续攀升
- 亚马逊要求Perplexity停止用AI浏览器智能体为用户代购商品
- OpenAI与亚马逊达成380亿美元AI训练合作协议
- 受人工智能技术的影响,亚马逊宣布裁撤14000个工作岗位
- 奈飞、亚马逊和苹果均有意收购华纳兄弟
- 希箭智能马桶为何常年霸榜亚马逊热销榜?揭秘海外 “圈粉” 密码
- Aqara 携手西门子西碳迹SiTANJI,发布亚马逊 CPF 绿标解决方案标杆案例
- 店匠科技登榜 2025 AI Cloud 100 China,携手亚马逊云科技加速 AI 场景化落地
- 从“烟囱式监控”到观测云平台:2025 亚马逊云科技峰会专访
- 亚马逊云科技宣布中国企业出海业务战略升级
- 亚马逊云科技Amazon SageMaker Unified Studio现已可用,加速数据分析和人工智能创新
- 亚马逊首款量子计算芯片Ocelot亮相,微软/谷歌/微美全息竞逐加速量子行业成熟
- 涂鸦智能宣布与亚马逊云科技IoT集成,增强智能家居连接能力









