用才云+Azure Batch AI 降本增效 唯品会 5 分钟搞定 100 万张图片

随着“中国制造”的雄起以及“一带一路”等利好政策的大力支持,越来越多的中国企业正在积极布局海外市场,将中国的创新和影响力传播到世界各地。

作为中国第三大电商品牌和全球最大的特卖电商之一的唯品会,是最早投入跨境业务的电商平台之一。面对“走出去”的发展机遇,唯品会正在积极构建一个覆盖全球市场的电商平台,将采办自中国及全球优质产地的商品销往世界各地。未来十年,唯品会将持续开拓美国、英国、俄罗斯、西班牙、东南亚等国家和地区的市场。

“在全球化发展的过程中,电商企业有各自的优势。对于唯品会来说,我们选择的路线是以优质产品和技术创新驱动。”唯品会海外出口事业部总经理钟卫介绍说,“多年以来,唯品会已经在海外市场的仓储、采办、物流等领域积累了丰富的经验和资源。当前,我们正与微软及其合作伙伴才云科技积极开展云计算与人工智能方向的深度合作,以‘新技术驱动轻运营’的方式对现有资源进行整合、管理和优化,以快速、高效、适应性强、可复制的技术平台加速面向全球的市场布局。”

唯品会及才云科技在微软全球顶级技术峰会 BUILD 2018 上向全球介绍其 AI 创新

唯品会:关注核心业务,用 AI 降本增效

竞争激烈的电商行业向来是技术创新的最前沿,基于大数据与人工智能的用户画像与商品推荐系统并非新鲜事物,甚至已经成为行业标配。通过这些最新的技术,用户可以获得更个性化与精准的内容与服务。

“当我们走向海外拓展全球市场时,业务对AI系统的要求与经典电商有非常大的差异。我们会面临很多独特的挑战” 唯品会海外出口事业部总经理钟卫介绍到:“通常我们希望技术平台能深度理解用户的需求,同时对商品与内容快速充分解构。这种对用户的理解与供给的解构需要是多维度的,例如我们每个人在不同的场合与场景有非常不同的需求;同时覆盖超广范围,并提供超精准的描述。”

然而,在面对陌生而全新的海外市场时,由于语言、环境、生活方式、消费习惯、文化背景与商品系统等诸多方面的巨大差异,所有数字化精准营销系统中的标签、画像、推荐算法,都必须要根据当地市场的实际情况进行重新筛选、跟踪和定制。

另一方面,面向不同区域市场,电商平台的商品布局也有着天壤之别:瑞士的奶酪与韩国的辣白菜在欧洲和东南亚市场上显然占有截然不同的权重。因此,面向全球各地市场,平台需要分门别类地对各地上架商品的每一张图片信息进行识别和标签登记,确保消费者能够准确、快速地检索到真正满足自己需要的商品。

“无论在中国还是海外市场,推荐算法都是用来确保电商平台高效运营,以及良好用户体验的核心业务系统,是我们进军海外的重中之重。”唯品会钟卫介绍说,“这其中涉及到极大的数据处理量和很多重复性的筛选工作,因此我们希望能够交给云计算和人工智能来完成,并且要求解决方案能够具有面向各地市场的灵活适应能力,可以将一次开发的成果复制到全球各地。”

才云科技:让天下没有难用的 AI

最终承接唯品会全球化 AI 项目的团队,是微软合作伙伴才云科技。才云科技成立于 2015 年,虽然成立不久,但其核心团队在人工智能领域有着深厚的技术积累与国际影响力。才云科技的核心创始团队的六名成员有的出自卡耐基梅隆大学,有的曾在谷歌、亚马逊一线从事人工智能、容器、云计算研究。现在,才云科技是微软合作伙伴,目前服务的客户也是清一色的“500 强”企业。

“我们的志向是让天下没有难用的 AI。”才云科技 CEO 张鑫介绍说,“我们开发的算法,能够将企业数据中的价值发掘出来,以人工智能推动企业的数字化转型。”

微软全球执行副总裁沈向洋博士将促成今天人工智能爆发式发展的三大因素归纳为:丰富的数据积累、大规模的云计算基础设施,以及强大的算法。

张鑫分析说:“唯品会本身的业务都在线上,已经积累了非常丰富的数据金矿;微软的 Azure 云服务提供了覆盖全球,特别是针对 AI 优化的人工智能服务和工具;而我们所做的,就是发挥我们的技术优势,打造出满足唯品会业务需求的人工智能算法, 打通将 AI 技术送达业务场景的‘最后一公里’。”

毕业于卡耐基梅隆的张鑫博士介绍说:”才云的长项是容器化AI技术,底层容器化的微服务平台产品是才云 Compass;其上是我们企业级AI平台 Clever;而我们将其与 Microsoft Azure 深度整合,整体为唯品会全球化项目提供了坚实的基础。”

“唯品会全球化 AI 系统开发中有很多独特的挑战,结合才云在 AI 算法与产品上的积累与微软开放高效的最新技术 Azure Batch AI,我们最终满足了唯品会全部四项核心需求”才云科技 AI 解决方案负责人李一帆介绍道: ”全球化业务需要AI系统对超大数据量进行极快速处理。即以之前百分之一的时间,处理数十倍的数据,而这些数据的来源与最终精炼的结果针对每个国家与地区都不同;很高兴能结合微软 Azure 与 Azure Batch AI 技术,经过六个月的艰苦开发,我们最终满足了唯品会的需求。”

Azure Batch AI:以极简方式提高算力

实现人工智能的基础是对于大量数据的机器学习,为了实现更高的效率和更低的成本,唯品会和才云科技选择了微软智能云 Azure 作为运行平台。

唯品会早在 2016 年就已经与微软达成战略合作,利用微软智能云 Azure 的 PaaS 级数据库服务、大数据服务、CDN 服务和虚拟机支持其电商业务在国内的运行。面对唯品会进军全球市场的需要,微软智能云 Azure 广泛覆盖全球 52 个区域、并且能够实现技术平台无缝衔接的种种优势再次体现了出来。

唯品会海外出口事业部总经理钟卫介绍说:“在进军海外的过程中选择微软智能云 Azure 来部署人工智能解决方案几乎是个必然的选择。举例来说,如果我选择自建数据中心的方式进行部署,首先就涉及到采购设备和人员的大笔开销。比如说购能买 3 台服务器、按照每台机器 5 个虚机计算,那么同时只能有 15 个并行任务,而且到第二年,硬件升级、机器折价,硬件亏损就是很大的成本。而现在采用 Azure Batch AI 服务,只需按照用量付费,以很低的成本就可以选择配置最好、最新的 GPU 资源,只要有需要,我随时可以调用上千个 GPU 的资源,何乐而不为呢?”

“Azure Batch AI 服务是微软智能云上的一项托管服务,允许数据科学家和人工智能开发者以极简方式利用包括 GPU 在内的 Azure 算力资源对人工智能模型进行训练。数据科学家可以专注于算法,而对于算力调用只需明确任务需求,输入、存储、输出等设置,其它所有与基础设施管理、规模缩放、批量工作任务等等繁杂的后台工作都能可以交给 Azure Batch AI 自动完成。”微软公司工程团队首席项目经理 Alex Sutton 介绍说。

“从我们的实际操作感受来看,我们的人员只懂业务,并不需要去关心和管理配置多少台虚机、如何搭建容器这样的细节,系统会根据我们的工作负载自动部署、自动缩放来完成我们的训练任务。” 钟卫介绍说。

而对于必须要关注底层方案的才云科技来说,他们对于 Azure Batch AI 的好感度更高:“影响AI的速度其实来自三个方面:运算速度、网络速度、存储速度。我们自己的平台也可以通过部署 GPU 加速运算,但我们发现最后的瓶颈出现在网络上。在分布式计算中,瓶颈变成了带宽而不是处理器。虽然我们将网卡升级到千兆、万兆,但最后发现,还是 Azure Batch AI 更好用,因为它在网络和存储方面做了很多真正有技术含量的底层优化,不仅是提升了处理速度,更确保了综合性能,这样的优势是无可替代的。”

通过在 Azure Batch AI 服务上运行才云科技的容器化AI解决方案,如今唯品会的海外业务团队效率提升了 85%;系统对 100 万张图片进行分析标签化处理,耗时缩短到之前的 1%;而才云科技在开发算法模型上通常需要耗时 2 个月完成的深度学习训练,现在只要1周就能完成,AI 系统的迭代速度获得了极大的提升。

“Azure 的云平台、Azure Batch AI 服务与我们开发的系统之间都有非常清晰的 API 接口、SDK 接口,让我们可以像搭积木一样构建定制化的人工智能解决方案,方便高效地满足用户的需求。”才云科技张鑫说。

与微软合作,开源和时差都不是障碍

张鑫领导的才云科技从骨子里是一支热爱开源的顶级极客创业团队,但在唯品会项目的合作中,他们却实现了与微软这家软件巨头的无障碍沟通和业务的无缝衔接。

唯品会海外项目始于 2017 年 10 月,微软中国负责合作伙伴的 OCP ( One Commercial Partner)团队经过多番权衡,向唯品会推荐了其合作伙伴才云科技。在过去的几个月中,唯品会、才云科技,微软中国 OCP 团队及微软总部 Azure Batch AI 产品组专家进行了频繁的技术沟通。

为了尽快将各方需求和技术能力统一起来,在解决方案上达成一致,微软中国 OCP 团队,唯品会、才云科技派出最好的工程师团队,前往美国雷德蒙德的微软总部,与 Azure Batch AI 产品组顶尖科学家一起,进行了整整三天的 Hackfest 骇客聚会。在不断的相互挑战与合作中,在一行行的代码开发与验证中,这些来自全球最顶尖的数据科学家彻夜不停的研究。“那天我们从微软 Building 11 出来已经是雷德蒙德凌晨 3 点,在那个时刻,我们与客户唯品会及合作伙伴才云科技相互敬佩,惺惺相惜,难忘我们同心协力找到解决项目核心挑战的方案。”来自微软 Azure Batch AI 的李笠博士介绍说。

唯品会、才云科技与微软开展 Hackfest 至凌晨三点

“这个项目能够取得今天的进展,是各方共同努力的结果,包括作为客户的唯品会的大力支持,钟卫作为负责人也和微软在美国的技术团队我们一起熬夜到了凌晨。”张鑫总结说,“就像华山论剑,高手过招,如此开诚布公的讨论与合作,让我们各方都能真诚相待,同舟共济。这次合作彻底改变了我们传统观念中对微软的认识。”

作为特别演讲嘉宾,飞往美国参加微软年度全球技术盛宴 BUILD 2018 的路上。张鑫博士读了微软 CEO Satya Nadella 的新书《Hit Refresh》 – “今日的微软如此开放,让我们印象深刻。以唯品会的合作为起点,我们期待与微软不断加强了解与合作,为更多客户提供更好的服务。” – 天下没有难用的 AI。

相关文章