数据中心内托管的人工智能和加密货币正在增加能源消耗。IEC表示，到2026年，人工智能(AI)和加密货币的用电量将翻一番。
Groq的出现不仅是对现有芯片架构和市场格局的挑战，也预示着AI芯片及其支撑的大模型发展方向正在发生变化——聚焦AI推理。
机器学习和深度学习已成为我们生活中不可或缺的部分。利用自然语言处理（NLP）、图像分类和物体检测实现的人工智能（AI）应用已深度嵌入到我们使用的众多设备中。大多数AI应用通过云引擎即可出色地满足其用途，例如在Gmail中回复电子邮件时可以获得词汇预测。
随着互联网数据规模越来越大，并发请求越来越高，传统的关系数据库系统在性能、价格、可扩展性方面已经不能很好地满足需求。谷歌、亚马逊等互联公司率先在后台基础设施中引入超大规模分布式存储系统，用来解决海量数据的存储问题。
Groq的LPU推理引擎不是普通的处理单元；它是一个端到端系统，专为需要大量计算和连续处理的应用（如LLM）提供最快的推理而设计。通过消除外部内存瓶颈，LPU推理引擎的性能比传统GPU高出几个数量级。
省级数据管理机构的成立是对数字中国建设整体布局规划的有力承接，对完善地方数据治理体系意义重大。将在加强数据资源管理、推动数据要素市场发展、提升政务服务效能、促进社会治理创新、深化数字化转型、保障数据安全等方面发挥重要作用。
