GPU
GPU
图形处理器(英语:Graphics Processing Unit,缩写:GPU),又称显示核心、视觉处理器、显示芯片,是一种专门在个人电脑、工作站、游戏机和一些移动设备(如平板电脑、智能手机等)上图像运算工作的微处理器。
图形处理器(英语:Graphics Processing Unit,缩写:GPU),又称显示核心、视觉处理器、显示芯片,是一种专门在个人电脑、工作站、游戏机和一些移动设备(如平板电脑、智能手机等)上图像运算工作的微处理器。

热点

大语言模型·2024-05-23
仙守 · 苏宁易购 擅长领域:人工智能, 大语言模型, 机器学习
大模型应用广泛,但存在框架局限、数据需求大等问题。未来发展方向包括小型化、专业化等。大模型将成为各行业的落地利器,开源大模型能提高社区追随度和模型完善度,闭源大模型则能形成技术先发优势。...(more)
专栏: 趋势观点
浏览2215
虚拟化·2024-05-16
Steven课题专家组 · steven 擅长领域:云计算, 容器, 容器云
77 会员关注
GPU虚拟化和共享需求迫在眉睫,PCIe直通、SR-IOV、MPT等方案可实现GPU设备虚拟化,vGPU、MIG、MPS、rCUDA等方案可实现GPU虚拟化和共享,MIG支持裸机和容器,GPU算力池化可解决GPU使用效率低和弹性扩展差的问题,算力隔离、故障隔离是关键,API转发的多任务GPU时间分片的实现模式相对...(more)
浏览2586
评论7
银行大语言模型·2023-07-12
wangshanshan · NVIDIA英伟达 擅长领域:人工智能, 服务器, GPU
6 会员关注
1)GPU如何加速后台的模型学习训练过程? 大模型训练由于模型参数尺寸很大,很难在一块GPU上进行训练,所以采用模型并行和数据并行的方式进行训练,具体可以参考英伟达megatron-lm或megatron-deepspeed。2)在模型应用过程中,GPU是否也能起到加速作用? 不知道您是不是指大模型推理阶段...
大语言模型·2023-07-19
dengjf99课题专家组 · 某股份制银行 擅长领域:人工智能, 大语言模型, 服务器
16 会员关注
银行业可利用大语言模型优化智能客服,需考虑硬件、数据、人力、安全、成本等因素。训练数据需涵盖各种问题和答案,建立数据安全和隐私保护机制。持续优化和改进需定期评估和改进模型,收集和分析客户反馈。需注意模型可能出现过拟合或欠拟合等问题,解决方法包括建立合适的训练...(more)
浏览4193
银行大语言模型·2023-07-05
wangshanshan · NVIDIA英伟达 擅长领域:人工智能, 服务器, GPU
6 会员关注
如果计算资源比较少,可以相对应训练模型参数大小不会太大,比如训练 6B,8B 参数并不需要一千片计算卡
银行大语言模型·2023-07-06
匿名用户
不可以直接购买,可以曲线 库存,新采购目前比较困难
银行大语言模型·2023-07-06
dengjf99课题专家组 · 某股份制银行 擅长领域:人工智能, 大语言模型, 服务器
16 会员关注
作为起步资源来说,可以先购置若干台中高配的AI芯片服务器作为训练或推理服务器,英伟达或国产AI芯片的都可以,大概30-100w一台。更简便的方法是使用大厂的云服务,现在逐渐完善大模型的云服务,再使用脱敏后数据做些微调训练,然后把模型拿回行内部署。...
银行大语言模型·2023-06-27
jillme课题专家组 · 某大型银行 擅长领域:数据库, 国产数据库, 人工智能
17 会员关注
隐私与安全,与大模型没有关系,更多是数据采集和法律合规的使用。在数据采集前签订相关授权,在使用过程中做好保护和权限隔离措施。在应用中,明确数据提供方和数据应用方双授权机制,就能最大限度规避。至于GPU算力问题,可以考虑用更多的CPU实现;或者分布式计算,将计算分布到每个连...
证券大语言模型·2023-06-27
acbogeh联盟成员 · 富国基金 擅长领域:人工智能, 云计算, 大语言模型
2 会员关注
目前小型公司的算力只能用于推理,训练基本只够7B-13B范畴。希望组件行业级别算力池用于租赁。

描述

图形处理器(英语:Graphics Processing Unit,缩写:GPU),又称显示核心、视觉处理器、显示芯片,是一种专门在个人电脑、工作站、游戏机和一些移动设备(如平板电脑、智能手机等)上图像运算工作的微处理器。
图形处理器(英语:Graphics Processing Unit,缩写:GPU),又称显示核心、视觉处理器、显示芯片,是一种专门在个人电脑、工作站、游戏机和一些移动设备(如平板电脑、智能手机等)上图像运算工作的微处理器。

相关企业云社区

  • NVIDIA英伟达

    主题声望 726

  • X社区推广
  • 提问题