• 我的订阅
  • 科技

AMD带来本地运行LLM,可构建专属AI聊天机器人

类别:科技 发布时间:2024-03-10 18:22:00 来源:卓越科技

继英伟达发布ChatwithRTX以后,AMD现在也为用户带来了可以本地化运行基于GPT的大语言模型(LLM),用户可以此构建专属的AI聊天机器人,可以在具有XDNANPU的Ryzen7000/8000系列及内置AI加速核心的RadeonRX7000系列GPU设备上运行,需要下载对应版本的LMStudio。

AMD带来本地运行LLM,可构建专属AI聊天机器人

AMD表示,人工智能助手正迅速成为帮助提高生产力、效率甚至集思广益的重要来源。在用户自己设备的本地AI聊天机器人不仅不需要互联网连接,而且对话可以保留在本地系统上。

AMD在博客文章中提供了完整的运行步骤,并有具体的用例说明:如果想运行Mistral7b,搜索“TheBloke/OpenHermes-2.5-Mistral-7B-GGUF”,例子中使用的是Mistral;如果想运行LLAMAv27b,搜索“TheBloke/Llama-2-7B-Chat-GGUF”,并从左侧结果中选择,通常是第一个结果。

AMD带来本地运行LLM,可构建专属AI聊天机器人

AMD带来本地运行LLM,可构建专属AI聊天机器人

AMD带来本地运行LLM,可构建专属AI聊天机器人

AMD带来本地运行LLM,可构建专属AI聊天机器人

感兴趣的AMD用户,如果有使用相应的CPU或GPU,可以参照原文进一步了解,按照相应的说明进行操作。竞争对手英伟达是在上个月发布了ChatwithRTX,作为一个技术演示应用,可以让用户以自己的内容定制一个聊天机器人,结合了检索增强生成、TensorRT-LLM和NVIDIARTX加速技术。用户可以把PC上的本地文件作为数据集连接到开源的LLM,比如Mistral或Llama2上,支持.txt,.pdf,.doc/docx,.xml等多种文件类型,只需要给出文件夹路径,AI就会在数秒内把它们加载到库中。

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2024-03-10 21:45:04

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

amd公司:用户可本地化运行llm和ai聊天机器人
...运行基于GPT的大语言模型(LLM),从而构建专属的AI聊天机器人。AMD表示用户可以在包括采用AMD新XDNANPU的Ryzen7000和Ryzen8000系列APU
2024-03-08 01:21:00
英伟达旗下聊天机器人chatrtx发布0.3版本更新
5月1日消息,英伟达旗下聊天机器人ChatRTX今日发布了0.3版本更新,带来了包括照片搜索、AI驱动的语音识别等一系列新增功能
2024-05-02 10:43:00
老黄祭出史上最强 AI 芯片B200!30倍性能提升,AI 迎来新摩尔定律时代|钛媒体AGI
...务软件NIM,下一代AI超级计算机、英伟达Project GR00T 人形机器人基础模型,并宣布扩大与比亚迪等中国车企合作
2024-03-19 13:00:00
黄仁勋对话扎克伯格:下一波AI浪潮是机器人,开源大模型将赢得胜利?
...AI发展中的重要性。对话下半场,他们围AR/VR计算平台和机器人浪潮等展开了讨论,指出下一波AI浪潮是机器人,而AR眼镜未来或替代智能手机。炉边谈话接近尾声时,黄仁勋和扎克伯
2024-07-31 13:51:00
GTC对话黄仁勋:我眼中的GPU,和别人有很大差别
...Blackwell 平台;NIMS;NEMO 和 NVIDIA AI Foundry;Omniverse 和 ISAAC 机器人
2024-03-22 08:00:00
英伟达最新自主移动机器人可支持二次开发,其移动底盘来自九号公司
...多个平台,其中可供第三方进行二次开发的全新自主移动机器人平台Isaac AMR(Autonomous Mobile Robot)相当吸睛
2023-06-01 12:00:00
英伟达最强芯片量产,暴打摩尔定律!人形机器人也来了?
...潮——物理AI,或者说是具身AI,就是我们平常说的人形机器人。它们不仅需要有超高的认知能力,可以理解人类、理解物理世界,还要有极致的行动力,完成各种现实任务。 想象一下这个
2024-06-11 14:07:00
黄仁勋:五年前我做了一个关乎英伟达命运的决策——转向 AI
...非常有趣的说法,\"(未来)整个工厂都将是软件定义的机器人,他们制造的汽车本身也将是机器人。这意味着,机器人设计的机器人去制造机器人。\"来源:财联社返回搜狐,查看更多责任编
2023-08-09 19:01:00
英伟达领投机器人公司;传微软即将发布 AI 芯片;日本对华水产出口大跌 65%
...何获得法律豁免等问题。(来源:界面新闻)英伟达领投机器人公司 Machina Labs10 月 7 日消息,当地时间 10 月 6 日
2023-10-08 13:42:00
更多关于科技的资讯: