Agent 在传统企业的尝试与阻碍

23 小时 56 分钟前
 magicfield

因为领导层反复强调和要求推进 AI 相关的工作,近期也试了不少方案。 目前是做了两个实验性的 Agent:

1 、各种技术资料的检索 Agent ,效果一般般,但勉强能用。

2 、对某个特定平台,报错后,对各类历史问题的处理方案自动检索 Agent ,方便用户自行解决。

都是用 Elastic + Dify 简单做的。

目前就是感觉 Agent 的效果还是没达到能大规模实际投入生产的程度。主要几个问题:

1 、数据保密问题,也是最主要的问题,由于厂内对信息保密的要求比较高,不允许使用外部大模型 API 。虽然采购了一些卡部署了 deepseek 开源模型,但速度方面感觉很难满足大规模使用,我算了下只能满足 20 个并发左右。

2 、传统企业数字化程度不足的问题,文档格式非常混乱,虽然数字化已经推进了好几年,但资料还是不太行(还有部门之间的问题,数据上下游配合一直都挺困难的)。

感觉一种现在各种企业都想强推 AI ,但基础又很难执行。

有相关经验的大佬也可以分享下你们的经历。

1618 次点击
所在节点    程序员
14 条回复
chen11
23 小时 22 分钟前
领导就是傻逼,我们也是有信息安全要求,只能本地部署,然后卡还不够用。最后的结果就是开发了一半的项目直接干掉,压根用不了。
bixinhaner
22 小时 57 分钟前
dirty data 、dirty work 、dirty security 。各种非技术大山阻碍
xFrye
22 小时 44 分钟前
按你说的,目前公司里数字化推进都这么难,ai 就更不用想了
Ketteiron
22 小时 9 分钟前
良好的数字化是 AI 落地的前提,Garbage In, Garbage Out 是永恒不变的真理。
dingawm
20 小时 17 分钟前
现在的模型,文档格式应该不太会影响一般的问答吧?是不是文档内容本身也不太行?
SakurajimaMa
18 小时 23 分钟前
目前遇到同样的问题
jinlong
17 小时 42 分钟前
只要有数据和数据字段描述,文档格式在 AI 下根本不是问题。你的问题核心是数据涉密、本地部署成本,天文数字。
YanSeven
17 小时 37 分钟前
除非是 BAT ,不然内部部署的大模型,大概率没啥用。以后可能会有 LLM 的私有云部署服务。
DefoliationM
17 小时 32 分钟前
自己部署是差很多,搞个差不多的凑合就行了。我司也是,用的 vllm+qwen ,开源里都算好的了,还是各种不遵守指令,还不如 chatgpt 网页上免费的模型。
roygong
17 小时 6 分钟前
@YanSeven 目前 LLM 私有部署成本极高,200B 模型部署下来一个月租金可以雇一个大厂程序员了
Kakarrot
6 小时 27 分钟前
还是成本问题不是技术问题
Hyvi
6 小时 4 分钟前
@chen11 用外部的开源模型
Hyvi
6 小时 3 分钟前
本地部署的根本就不太行,效果非常差,用了一次再也不想用了
uxstone
5 小时 54 分钟前
传统企业的 IT 不是应该躺平当甲方吗?

苦活脏活都扔给乙方外包去做。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://study.congcong.us/t/1196366

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX