7月13日,京东言犀大模型在2023京东全球科技探索者大会暨京东云峰会上推出。与通用大模型相比,京东言犀大模型融合70%通用数据与30%数智供应链原生数据,致力于深入零售、物流、金融、健康、政务等知识密集型、任务型产业场景,解决真实产业问题。
此外,京东还发布了两大服务平台,包括全新升级的优加DaaS和言犀智能服务平台,以及面向零售、金融、城市、健康、物流五大领域的行业解决方案。
京东集团CEO许冉表示:“京东的大模型技术演进,遵循了京东的技术追求:成本、效率、体验、可信、普惠、突破。成本、效率和体验是从京东的经营理念传承而来,也是零售的第一性原理。可信、普惠和突破则是技术服务于产业和社会的承诺。”
京东集团CEO许冉演讲
用产业数据和Know-how创造价值
“大模型真正实现自己的价值,一定是在产业应用中。”许冉表示,大模型的价值=算法×算力×数据×产业厚度的平方。“前三个指标固然重要,但技术在产业场景落地应用,创造实际价值才是关键。当产业效率和产业的边界拓展得到质的提升以后,大模型才有了更重要的实际价值和意义,这将不亚于又一次工业革命。”
“从产业端切入大模型,如同从北坡攀登技术珠峰,道路虽然更加艰难,却有更波澜壮阔的风景。”许冉说。
京东集团CEO许冉演讲
京东每年有数百亿条优质交互数据,训练言犀大模型的数据库,就由70%通用数据和30%供应链原生数据组成。深厚的产业数据积累,以及千行百业Know-How,成为京东布局大模型的核心优势,训练出的大模型天然具备“产业基因”。
“数智供应链训练了产业大模型,而大模型则依托供应链深入产业”,京东集团技术委员会主席、京东云事业部总裁曹鹏如是说。
京东集团技术委员会主席、京东云事业部总裁曹鹏演讲
对于大模型的应用实践,京东也有明确的“三步走”规划。目前,京东云已经基于内部实践构建了通用大模型;到今年年底这段时间,京东将经由高复杂场景大规模锤炼,迭代出扎实的产业服务;预计在2024年初,会将大模型能力向外部严肃商业场景开放。目前,京东已经走到第二步,并在内部取得了丰富的实践成果。
“某种意义上,我们的大模型相当于既做了通识教育,又读了四年专业性的本科教育”,京东探索研究院院长、京东科技智能服务与产品部总裁何晓冬博士表示。大模型的难点不在技术追赶,而是产业突破。京东言犀大模型的产业实践,是京东非常关注的部分。
京东探索研究院院长、京东科技智能服务与产品部总裁何晓冬博士演讲
构建大模型“训练营”和“弹药库”
京东从很早就开始布局大模型。2021年,京东就推出十亿级模型K-PLUG,2022年推出百亿级模型Vega,本次大会则展示了千亿级模型。
在大会现场,京东演示了将通用大模型转化为健康产业大模型的操作。通常,客户完成这套流程,从数据准备、模型训练到模型部署,需要10余名科学家花费一周时间。但利用言犀AI开发计算平台,只需要1-2名算法人员,在数分钟就能完成。通过平台模型加速工具的优化,还能节省90%的推理成本。
京东健康发布的京医千询大模型,就是建立在京东言犀通用大模型基础之上,能快速完成在医疗健康领域各个场景的迁移和学习,从而实现产品和解决方案的全面AI化部署,能为远程医疗服务提供坚实的技术底座。
京东集团副总裁、京东健康技术产品部总经理李欣演讲
此外,京东还展示了金融领域AI营销运营平台。使用者通过简单的对话,就能一站式生成营销活动,覆盖运营策略制定、营销人物调度编排、搭建活动页面、批量生成营销文案和素材、数字化投放等方面。过去这套流程需要产品、研发、算法、设计、分析师5类职能人员,如今减少到1人;过去流程需要2000次人机交互,也减少到少于50次。在大模型能力的加持下,营销方案的生产效率有了百倍提高。
如果说言犀AI开发计算平台是大模型的“训练营”,向量数据库则是大模型的“弹药库”,是大模型使用数据的桥梁。京东从2019年开始研发向量数据库,历经电商大促场景磨练,向量数据库Vearch已经能支撑百亿级高性能检索,延时降低到毫秒级,可用性达到99.99%,已经服务超过100家大中型企业用户。京东将向量数据库用于大模型预训练,将推理成本降低了80%。
京东云的三个核心产品,此次也迎来升级:全新升级的混合多云操作系统云舰,将GPU/NPU的资源成本降低50%,并提供行业最高的业务连续性承诺。高性能存储平台云海,将单集群每秒读写性能提升5倍,达到千万级;时延降低50%,达到百微秒级;使用成本则降低30%。软硬一体的虚拟化引擎京刚,将虚拟化卸载到智能网卡中,虚拟化损耗降至0,网络性能提升高达4倍,并支持100Gb VPC网络,云硬盘单实例性能突破百万IOPS。
技术创新让产业受益
伴随技术进步,产业应用已经从流程驱动和数据驱动,进化到知识驱动阶段。京东也升级了两个能够积累高质量行业数据的平台:全新的优加DaaS和言犀智能服务,来支撑产业应用对数据的新需求。
新升级的优加DaaS具备三个优势:更多维,既包括企业自身的数据,也能实现企业和京东及生态数据的安全互通和融合;更易用,大幅提高交互体验、降低使用门槛,用简单描述即可生成答案;更简单,串联数据开发平台、数据服务平台、数据可视化平台等的原子能力,将原本复杂系统间的操作简化。
言犀智能服务升级后,也具备了更丰富的交互渠道,覆盖从智能客服到直播间,从移动终端到线下智能端;更生动的交互效果,支持语音、视频、文字等方式;更专业的交互内容,生成的专业领域交互内容,更加可控、可用。目前,它已经服务于12345热线、银行数字员工、专家诊断场景等严肃场景。
“智能化优先在数字化领先的行业发生”,京东集团副总裁、京东科技产品与解决方案总裁高礼强表示。在零售、金融、城市、物流等多个场景,京东都发布了全新的智能化解决方案,借助大模型能力实现服务能力的升级。
京东集团副总裁、京东科技产品与解决方案总裁高礼强演讲
“转载请注明出处”
杨柳