js3845金沙线路|-中国官方IOS/安卓APP下载

垂询热线:010-62984434

产品资讯

案例|研华AIR-520服务器以GenAI和LLM为引擎,提升市民服务效率

发布时间:2024-12-27浏览次数:
\


        当市政府推出一项新政策时,通常需要许多客户服务代表了解政策的具体情况,以解决公众咨询。在公民服务热线中部署生成式AI支持的人机协作系统可以显著提高效率、可用性、准确性并进一步实现服务个性化。

       AI客服技术简化了资源分配,可扩展以应对不断增长的需求,并通过数据分析提供有价值的见解。因此,它增强了公民的整体体验,确保他们收到及时准确的信息,同时让客服代表腾出时间专注于更复杂的工作任务。

 

项目挑战

市政府在采用人工智能技术时面临着以下几个困难:

• 缺乏技术基础设施和专业知识: 实施人工智能需要先进的技术基础设施和技术熟练的人员,而获取和维护这些设施和人员的成本可能很高,且具有挑战性。

• 反应偏差:LLMs 可能会从其训练数据中继承偏差,从而导致有偏差或歧视性的答案反馈。这可能导致误解和公民投诉,损害信任和信誉。

• 持续训练和更新: 法律顾问需要定期更新和再训练,以跟上新的政策、法规和新出现的问题。这需要对数据收集和模型改进进行持续投资。

 

研华解决方案

为了克服这些挑战,客户选择了 AIR-520 LLM 微调解决方案,其中包括以下组件:

• 配备 aiDAPTIV+ ai100 AI 固态硬盘的 AIR-520 边缘 AI 服务器系统: 这款服务器级系统配备了 ai100 固态硬盘和专利中间件,为内部模型训练和微调提供了简单而经济高效的解决方案。

• 用于模型微调的无代码图形用户界面: 用户友好的无代码图形用户界面(GUI)使客户能够利用本地数据集对人工智能模型进行微调,从而提高生成内容的质量和准确性。

• ISV 合作实现定制化内部部署 LLM:结合 ISV 合作伙伴提供的定制化 LLM 服务,研华通过提供全面的软件包,帮助客户消除技术障碍,使其能够快速进入市场,而不会出现兼容性或集成问题。集成解决方案实现了训练流程自动化,加快了部署速度,并通过在边缘收集历史问答和内容更正,不断提高服

\
 



方案优势


通过采用研华解决方案,可以给客户带来:

• 释放 80% 的人力资源:通过处理日常查询,LLMs让人工客户服务代表能够专注于需要人工判断和需要换位思考的更复杂、高优先级的案例。

• 7 x 24小时可用性: 在 AIR-520 上运行的 LLM 提供全天候支持,确保公民可以随时获得帮助,即使是在正常办公时间之外。这提高了可访问性和响应速度。

• 经过验证的打包解决方案:研华和 ISV 提供了一个集成的端到端解决方案,以确保顺利开发、部署和持续改进。

 

       本地大型语言模型(LLM)边缘AI服务器AIR-520,以其创新的设计理念,提供了一个既经济又高效的解决方案。该方案不仅支持大型语言模型的微调训练,而且无需专用机房,可以直接部署在部门使用,大幅降低了企业引入AI技术的门槛。

Baidu
sogou