标签:GPU
GPU,一统天下
本文详细回顾了图形处理单元(GPU)的发展历程,从最初仅用于加速2D图形绘制的辅助设备,到成为当今高性能计算和机器学习领域不可或缺的核心技术。文章从20世...
超越英伟达!字节跳动MegaScale如何实现大规模GPU的高效利用?
在2024年2月,字帖跳动发布了一篇关于大语言模型训练框架的论文《MegaScale: Scaling Large Language Model Training to More Than 10,000 GPUs》。MegaScale...
老黄最新专访:芯片短缺难以结束,下个Transformer已经出现
英伟达创始人黄仁勋在接受WIED专访时分享了他对公司未来的想法和预测,以及对过去问题的再思考。黄仁勋强调了英伟达在AI芯片市场的领导地位,以及他对AI技术...
字节万卡集群技术细节公开:2天搞定GPT-3训练,算力利用率超英伟达Megatron-LM
字节跳动与北京大学合作的一篇新论文揭示了AI基础设施的重要性,并介绍了字节搭建的万卡集群,该集群能在1.75天内完成GPT-3规模模型(175B)的训练。字节提出...
老黄祭出全新RTX 500 GPU,AIGC性能狂飙14倍!AI应用的门槛彻底被打下来了
在2024年的世界移动大会上,英伟达发布了其移动工作站GPU产品线的最后两款产品:RTX 500 Ada和RTX 1000 Ada。这两款入门级移动工作站GPU的发布,标志着英伟达...
突发!黄仁勋扔重磅“核弹”,全新英伟达RTX 500显卡AIGC性能提升高达1400%,AI PC时代真要来了|钛媒体AGI
英伟达(NVIDIA)宣布推出全新的NVIDIA RTX 500 和 1000 Ada一代消费级GPU加速芯片,这些芯片将支持在移动设备上运行生成式AI(AIGC)软件。黄仁勋院士的这一...
奥特曼遭黄仁勋讽刺:7万亿可以买光所有GPU
黄仁勋在迪拜峰会上对OpenAI创始人提出的数学观点进行了质疑,认为7万亿美元改造芯片制造成本夸大。他强调英伟达的GPU适用性,指出公司将适应新技术。黄仁勋...
Meta第二代自研AI芯投产,摆脱英伟达依赖!为买H100小扎狂砸数百亿美元
Meta正式投产其第二代自研AI芯片Artemis,旨在为AI提供算力,减少对英伟达GPU的依赖。这款新芯片将主要用于数据中心的推理任务,并计划与英伟达等供应商的GPU...