IT之家 11 月 15 日消息，据韩媒 Etnews 今天报道，韩国电信运营商 LG U+ 将于明年进军 AI Token 业务，利用自主…
据介绍，这项服务拥有用于设计 Agent 任务执行路径的“Harness Engineering”、根据问题类型分配模型的“智能路由”，以及为优化推理过程而采用异构半导体的“芯片组合”三项技术。
IT之家从原报道获悉，LG U+ 将减少 AI Agent 执行任务时不必要的重复搜索和验证，并根据任务难度匹配最合适的模型。同时结合模型轻量化和推理技术，该公司的自研端侧 AI 模型在体积缩小三分之一的情况下，性能仍达到通用云端模型的 95% 以上。通过让小模型快速生成答案、再由大模型进行验证的技术，Token 生成速度提升两倍以上。
基础设施方面，LG U+ 采用芯片组合策略，将英伟达、AMD GPU 与韩国本土企业 FuriosaAI 的神经网络处理器（NPU）结合使用，分别处理问题分析（Prefill）和答案生成（Decode）任务。通过将需要大规模计算的任务与对内存带宽要求较高的任务分开处理，降低基础设施成本。
LG U+ 将同时采用与合作伙伴联合提供服务和自主建设两种方式，从明年开始全面进军 B2B AI Token 市场。随着 LG U+ 加入，韩国三大电信运营商将全部进入 Token 经济领域。
信息来源
来源媒体：IT之家
原文链接：https://www.ithome.com/1/027/262.htm
本文由「天坠之家」自动编辑整理，内容仅代表原媒体观点，版权归原作者所有；如有侵权请联系删除。
