4日10日 OFweek 2025(第十四届)中国机器人产业大会
立即报名 >>>
7.30-8.1 全数会2025(第六届)机器人及智能工厂展
火热报名中>>
研华推出GenAI Studio边缘AI软件平台 助力本地端大语言模型开发,推动边缘AI创新
2025年初,全球AIoT平台与服务提供商研华科技宣布推出一款新的软件产品——GenAI Studio,该产品是研华Edge AI SDK的一部分,主要目标是为了满足对成本效益高、本地部署的大语言模型(LLM)解决方案日益增长的需求。
加速人工智能发展,应对行业挑战
作为研华边缘AI软件开发工具包(Edge AI SDK)的一部分,GenAI Studio致力于解决行业痛点,例如缩短工厂操作员等待关键信息的时间,减轻医疗专业人员的文档工作负担。其无代码、成本效益高的平台简化了大语言模型(LLM)的采用,使企业能够快速高效地部署AI解决方案,从而提高生产力和运营效率。
GenAI Studio为研华Edge AI SDK构建,凭借其多功能的LLM平台,具备出色的本地和云端LLM集成能力,支持包括OpenAI、Gemini、Anthropic和Ollama在内的多种LLM。此外,它还引入了全参数微调功能,针对GPU资源有限的环境进行了优化,实现了更广泛的可访问性和性能提升。
GenAI Studio为大语言模型(LLM)开发提供了一整套全面的工具:
首先是集成微调与推理服务:GenAI Studio将微调与推理功能相结合,最大化硬件利用率,实现资源的更灵活、高效分配。
再次,该平台具备高级GPU资源管理与任务调度的能力:这些功能使用户能够优化AI硬件性能,提升高价值设备的成本效益。
随着AI的迅猛发展,对易于获取的大语言模型解决方案的需求日益凸显,但许多公司因资源有限而受阻。研华边缘AI软件开发工具包(Edge AI SDK)通过提供一套工具来应对这一挑战,该工具能够高效地评估、开发和部署边缘AI应用。例如,传统上需要超过30个、每个拥有48GB内存的GPU来微调一个700亿参数的大语言模型,而使用研华Edge AI SDK,仅需4个GPU即可完成。这代表着资源需求减少了87%,显著降低了成本,使大语言模型解决方案更加触手可及。
借助研华的GenAI Studio和边缘AI服务器AIR-520,赋能AI创新
为与GenAI Studio相辅相成,研华的AIR - 520边缘AI服务器提供了一个强大的硬件平台,配备了NVIDIA RTX GPU和Phison AI SSD。这种整合交付了可靠、高效的计算能力,旨在满足制造业、医疗保健、零售等行业的AI应用需求。
研华Edge AI SDK软件开发工具包:从模型微调到部署简化工作流程
研华Edge AI SDK软件开发工具包是一个为无缝边缘AI开发设计的全集成平台。凭借预配置的硬件和优化调整的软件,它提供了即插即用的体验,能够实现成本效益高的大语言模型定制、无缝工具包兼容以及大规模边缘部署的轻松管理。研华边缘AI软件开发工具包以可靠性、可扩展性和用户友好性为设计理念,简化了通往AI创新的道路。它现在包括三个核心组件:
- GenAI Studio:便于在本地以成本效益高的方式创建、评估和集成定制的大语言模型。
- 推理套件:能够快速优化和评估与嵌入式操作系统兼容的高效AI运行时。
- 操作平台:为大规模边缘部署中的AI模型和应用更新提供高效管理,整合MLOps以简化操作。
(图:研华GenAI Studio操作界面)
研华通过其Edge AI SDK软件开发工具包以及新增的GenAI Studio软件模块,提升了企业更高效、更低成本地开发和部署AI解决方案的能力。
原文标题 : 研华推出GenAI Studio边缘AI软件平台 助力本地端大语言模型开发,推动边缘AI创新

图片新闻
技术文库
最新活动更多
-
即日-3.21立即报名 >> 【深圳 IEAE】2025 消费新场景创新与实践论坛
-
即日-3.25立即报名 >>> 【在线会议】医疗设备的无线共存、高速数字与射频测试
-
即日-3.27立即报名>> 【在线直播】解密行业检测流量密码——电子与半导体行业
-
3月27日立即报名>> 【工程师系列】汽车电子技术在线大会
-
即日-3.28立即报名>>> 【在线会议】汽车检测的最佳选择看这里
-
即日-3.31立即报名>>> 【在线会议】AI加速卡中村田元器件产品的技术创新探讨
推荐专题
发表评论
请输入评论内容...
请输入评论/评论长度6~500个字
暂无评论
暂无评论