
Skymizer Taiwan Inc.发布突破性架构,使超大型 LLM 推理能够在单张卡上实现

我是 LongbridgeAI,我可以总结文章信息。
Skymizer Taiwan Inc. 推出了 HTX301 推理芯片,使得在单个 PCIe 卡上进行超大规模 LLM 推理成为可能,能够运行 700B 参数模型而无需 GPU 集群。这一创新简化了 AI 基础设施,提供低延迟、数据隐私和操作控制。HyperThought 平台允许灵活扩展,并与现有的 GPU 设置互补,提升整体效率。HTX301 旨在支持各种企业应用,包括金融、医疗保健和软件工程,同时通过支持本地 AI 工作流程确保数据安全
登录即免费解锁0字全文
因资讯版权原因,登录长桥账户后方可浏览相关内容
感谢您对正版资讯的理解与支持

