云架构中加入生成式AI的几点建议
旺道一键推广 -> 最新发布

图片


作者 | David Linthicum

策划 | 言征

 

从数据可用性、安全性到模型选择和监控,生成式AI的加入便意味着要重新审视云架构。

 

所以,如果在构建一个云架构同时也在设计生成式AI驱动的系统。你需要做哪些不一样的改变?还需要做什么?目前出现了哪些最佳做法?

 

结合过去20年的经验,以下是作者给出的一些建议,整理如下,望诸位有所启发。

 

图片

理解你的用例

 

明确定义云架构中生成人工智能的目的和目标。如果我反复看到任何错误,那就是没有理解商业系统中生成人工智能的含义。了解您的目标是实现什么,无论是内容生成、推荐系统还是其他应用程序。这意味着写下内容,并就目标、如何实现目标以及最重要的是如何定义成功达成共识。这对于生成人工智能来说并不新鲜;这是赢得每一次迁移和构建在云中的全新系统的一步。

 

我看到许多云中的整个生成AI项目都以失败告终,因为它们没有很好地理解业务用例。公司制造了一个很酷的东西,但不会给业务带来任何价值。这是行不通的。

图片

图片

数据来源和质量是关键

 

识别生成人工智能模型训练和推理所需的数据源。数据必须是可访问的、高质量的,并经过仔细管理。您还必须确保云存储解决方案的可用性和兼容性。生成型人工智能系统高度以数据为中心。我称之为面向数据的系统;数据是推动生成性人工智能系统产生结果的燃料。垃圾进,垃圾出。

 

因此,将数据可访问性作为云架构的主要驱动因素是有帮助的。您需要将大多数相关数据作为训练数据进行访问,通常将其保留在现有位置,而不是将其迁移到单个物理实体。否则,你最终会得到多余的数据,没有单一的真相来源。

 

在将数据输入人工智能模型之前,考虑高效的数据管道来预处理和清理数据。这样可以确保数据质量和模型性能。这大约是使用生成人工智能的云架构成功率的80%。然而,这一点最容易被忽视,因为云架构师更多地关注生成人工智能系统的处理,而不是为这些系统提供数据。数据就是一切。


图片

数据安全和隐私

 

正如数据很重要一样,应用于数据的安全性和隐私性也很重要。人工智能的生成处理可以将看似毫无意义的数据转化为可以暴露敏感信息的数据。


实施强有力的数据安全措施、加密和访问控制,以保护生成人工智能使用的敏感数据以及生成人工智能可能产生的新数据。至少要遵守相关的数据隐私法规。这并不意味着在你的架构上安装一些安全系统作为最后一步;安全性必须在每一步都融入到系统中。


图片

可扩展性和推理资源

 

规划可扩展的云资源,以适应不同的工作负载和数据处理需求。大多数公司都考虑自动扩展和负载平衡解决方案。我看到的一个更重大的错误是构建规模良好但成本高昂的系统。


最好平衡可扩展性和成本效率,这是可以做到的,但需要良好的架构和finops实践。此外,检查训练和推理资源。我想你已经注意到,云会议上的许多话题都围绕着这个话题,这是有充分理由的。选择具有GPU或TPU的适当云实例进行模型训练和推理。再次,优化资源分配以提高成本效率。


图片

考虑模型的选型

 

根据您的具体用例和需求,选择示例性的生成AI架构(通用对抗性网络、转换器等)。考虑用于模型培训的云服务,如AWS SageMaker和其他服务,并找到优化的解决方案。这也意味着要理解你可能有许多相互关联的模型,这将是常态。

 

实施稳健的模型部署策略,包括版本控制和容器化,使AI模型可供云架构中的应用程序和服务访问。


图片

监控和日志记录


设置监控和日志系统以跟踪AI模型性能、资源利用率和潜在问题不是可选的。建立异常警报机制,以及为处理云中生成人工智能而构建的可观察性系统。

 

此外,持续监控和优化云资源成本,因为生成式人工智能可能是资源密集型的。使用云成本管理工具和实践。这意味着让finops监控部署的各个方面——最低限度的运营成本效率和评估架构是否最佳的架构效率。大多数体系结构都需要调整和持续改进。 


图片

其他考虑

 

需要故障切换和冗余来确保高可用性,灾难恢复计划可以在系统故障时最大限度地减少停机时间和数据丢失。必要时实施冗余。此外,定期审计和评估云基础设施内生成人工智能系统的安全性。解决漏洞并保持合规性。

 

制定人工智能道德使用指南是个好主意,尤其是在生成内容或做出影响用户的决策时。因此,需要解决偏见和公平问题。目前有关于人工智能和公平的诉讼,你需要确保你做的是正确的事情。持续评估用户体验,以确保人工智能生成的内容符合用户期望,并提高参与度。

 

无论你是否使用生成人工智能,云计算架构的其他方面都是一样的。关键是要意识到,有些事情要重要得多,需要更加严格,而且总有改进的空间。

 

参考链接:

https://www.infoworld.com/article/3706094/adding-generative-ai-systems-may-change-your-cloud-architecture.html

 

 ——好文推荐——


终于决定了!知名IDE JetBrains宣布重仓这款Linux桌面服务器 !

TypeScript被放弃!又一知名前端利器决意转回JS,社区不满:这在开倒车!


图片

教育培训机构-如何策划节日招生?
做教育培训,最重要的事情莫过于招生了。面对不同的学员,招生方…于招生。目标不同,活动策划也会不一样。② 活动主题要鲜明不仅主题要鲜明,主题之间要有连续性。就像看连续剧一样,一集接一集,一环扣一环。策划好一系列活动,一个接一个来,从多个角度延续活动的宣传,突出主题,引起关注度。常用的招生方式有:体验课招…-------------想要获得更多运营技巧、doc文案,
教育培训:如何提高满班率和续班率
什么是满班率?就是实际人数除以计划招生人数,这个值就是满班率…员有流失是正常的,但要保证一个概率。在保障老学员续期的基础上,我们也要大胆创新,开设网络课程,拓宽招生区域。实地课程录制后,进一步发行到商弈云课上,通过商弈云课系统转成真实流量,网上有人点击观看,点赞,可以按点播量分佣金。助你在日常的营销推…-----------------------想要获得更多运
培训机构难盈利的问题出在哪里,如何实现盈利?
竞争白热化实地培训班、托管辅导班竞争白热化了,利润越来越稀薄…现没有多少盈利。还有一部分负责人在刚招生时,掌握了不少资金,开始盲目扩张,盲目做课程推广,以期待获得更多生源和收费,从而使培训班陷入了这种恶性循环的陷阱里。其实这些到手的钱,并不是你的利润,而是你未来要支出的钱。如遇到行业快速发展时期,或者…-----想要获得更多运营技巧、doc文件,请“关注”并“转
“差异化”经营是网络培训赚钱的关键所在
“差异化经营”这个词,相信大多数人都耳熟能详,但要做到的却是…。在现有的基础上更新升级或者资源整合就是对现有的产品或者技术,进行升级版本,或者通过一些资源整合,成一个项目。你的技能以前是用来生产或制造产品,现在是把技能升级成知识培训,转换云课堂。直白一点就是可以让老师自行录好课程并上传到学校的商弈云课…在着缺点和不足之处。在创新改革时,要从功能、服务、价格等方面
教育培训行业是如何运作的?
以前读书时,学校附近有个小摊卖鸡蛋灌饼。刚开始的时候只有一家….%,剩下的一对一和多人大班其实市场份额都很小。家长报培训班,是希望孩子能够学到知识。老师通过课上教学和课后辅导来满足孩子的需求,达到成绩提高的目标。我见过上百人的大培训班,为什么一个班这么多人?因为是名师讲课,但人太多坐后面,基本听不到重…是你的核心竞争力。想要得到用户的认同,你就必须做到产品质量好
旺道:实体店怎么做网络营销?
年纪大了,体力不好了,便赚不了什么钱了。所以,一定要在年轻的…写文案都是非常头痛的事情,那么下面我会给大家提供一个解决方案。在互联网营销系统里面有很多细节营销,软文营销就是其中一种,但好多小白头痛写文章,所以可以用这个方法也一样可以植入广告语,或者是图片广告,轮显切换广告,使用 旺道营销系统,也就是每…以帮你吸引海量精准粉丝。有了粉丝,你通过广告、产品、服务就可
旺道:圈里圈外,铁饭碗距离瓷饭碗究竟有多远?
中国人爱混圈子,从线下一直混到线上,各种奇形怪状的圈子勾勒出…不能推则敷衍了事,盼着混到主任科员退休;一种是老黄牛式,踏踏实实、兢兢业业工作,但拙于人际关系,活干得最多,但依旧不见晋升迹象;还有一种是提线木偶式,你扯一下线他动一下,好像脑子和身体是分离的。我突然一拍脑袋,这是提前衰老的迹象啊,工作内容…即使选择留在铁饭碗圈里,也应保有随时离开的思想警惕和进行必要
旺道:微信要双开了,朋友圈推广更好做了
现在手机只能登一个微信,如两个,三个微信的小伙伴们就只能退出…动推广工具、 设置头像点击头像图标,点“+”选择图片,可以上传你的企业,个人头像,产品服务等。旺道微信朋友圈广告免费朋友圈广告-旺道、 设置推广主题点“广告”,再点“+”设置推广的主题(类别),填好中文主题,以及你的网址。教你不花一分钱做朋…简直就是一劳永逸哟。如果你点开发布的文章看不到广告,那就是你
旺道:如何能让网站多个关键词排名百度首页?
最近接了一个单,做婴儿游泳馆加盟的。优化推广范围是全国,但是…泳馆加盟哪家好”、“婴儿游泳加盟多少钱”这类与我息息相关的词。如何能让网站多个关键词排名百度首页?但客户并不认同,客户说这个词指数低,或者说搜的人不多。是,这是一方面原因。但是,指数低有什么关系,你是卖产品还是卖指数。搜的人不多有什么关系,…实现广告效果最大化,来满足大众化的广告需求。对于这样的四两拔
旺道:如何成为网络营销达人?这个技能帮你节省80%的时间
在某次名师讲坛上,听到了一个让人警醒的故事。说有个村子缺水,…准的产品。现在已经不是新鲜事物,好多企业因为百度竞价的高额费用,头疼不已,所以做网站关键词优化排名,成为了企业必选的推广项目。做优化也要做到有成效,不然就是一分钱也是昂贵的。用 旺道智能机器人 就可以持续代替人工去做,它非常聪明,只要你够耐…手,设备先进,你多努力奔跑也于事无补。简单说,要去一个地方,

此文章来源来互联网,如果你有任何版权冲突,可以联络我们,微信号:WANCOME,QQ:1444641。加我们时,请说明来意,我们将优先处理你的问题。




商弈云推  | 圈广告  | 跨圈推  | 圈推广  | 圈营销
粤ICP备10213132号
旺道商标注册证号:8608864
Copyright © 2016 环企网络信息科技有限公司 版权所有