品玩

科技创新者的每日必读

打开APP
关闭
TensorFlow

闲鱼如何玩转TensorFlow

TensorFlow 最大的意义在于降低了深度学习的门槛,帮助人们可以用好AI尽可能的发挥自己的潜能。

玄宁

发布于 2019年3月15日

在未来的某一天,当人们回顾人工智能这项技术的发展历程时,除了会想起1956年8月1日科学家们首次聚在一起讨论人工智能的达特茅斯会议、1997年5月11日“深蓝”战胜卡斯帕罗夫、2016年3月15日AlphaGo战胜李世石等万众瞩目的时刻外,也一定不会忘记2015年11月9日这一天。

这一天,Google 首次对外开源了它的机器学习框架 TensorFlow,尽管它在当时并没掀起巨大波澜,但在它发布后至今的3年多的时光里,它已经逐渐发展成为完整的端到端的机器学习生态系统 —— 下载次数超过4100万次、代码更新的提交次数超过5万次,而且这些数据还在高速增长。

它被不同体量不同领域的各种公司应用在各式各样的场景中,帮助人们与“AI触手可及”的状态越来越近。

3月6日 TensorFlow 2019年开发者大会举办,发布 TensorFlow 2.0 Alpha版
3月6日 TensorFlow 2019年开发者大会举办,发布 TensorFlow 2.0 Alpha版

在许多我们日常生活必备的手机应用背后,其实都有基于 TensorFlow 框架开发的 AI 功能的身影。

TensorFlow降低了AI开发的门槛

“TensorFlow 最大的意义在于降低了深度学习的门槛。”闲鱼技术负责人、阿里巴巴资深技术专家酒丐对PingWest品玩说。这款GMV已经超过1000亿的二手闲置交易社区,正在尝试利用 TensorFlow 来解决各种业务场景中遇到的问题。据中国互联网经济研究院去年九月的数据显示,我国闲置物品交易规模已经达到5000亿元,在这样的交易规模下,对技术上的需求也是越来越复杂。

“闲鱼其实是一个非常难做的业务,因为每个人拿着自己的东西来这里出售的时候,他们拿的都是独特的东西,不是标准品。”闲鱼互动技术团队leader上叶说。“因此,在交易过程中整个链路会非常复杂,技术的作用就十分重要。”

闲鱼的技术团队发现,其中很多问题其实最适合用深度学习的方法来解决。于是,闲鱼互动技术团队使用TensorFlow框架在很多业务场景做了很多有益的尝试。“TensorFlow 的完整性、易用性等非常符合闲鱼技术团队的需求。Google 提供了很多的 API。你想在上面做什么都能找到方法来支撑。这是很棒的一件事。因为对于程序员来说,其实我们最怕的就是你给我一个黑盒。”上叶说。

这样一只“小而美”的团队,从2017年底第一次接触 TensorFlow 到使用它开发出能够识别出视频中的小汽车的AI模型,只花了不到3天时间。这之后,他们开发了越来越多的功能,其中包括大量原创功能。这很好的印证了酒丐关于人工智能“门槛降低”的说法。

据酒丐介绍,过去,一个希望利用机器学习技术完成某些开发的公司,首先需要先招募一批具备深度学习知识的算法工程师。而随着像 TensorFlow 这样的机器学习开源框架诞生和流行,开发者不再需要花大量时间在研究底层技术上。

“TensorFlow 的底层就已经提供了很多深度学习最基础的元素,比如卷积等。在此之上,在顶层还提供了大量封装好的 API。对于那些‘新手’工程师们来说,你不再需要太过关心底层技术,只需要使用顶层的东西就可以完成相关工作,并可以花更多时间在创新上。而当你对整个背景很了解,你又可以使用 TensorFlow 提供的这些原料来搭建自定义的功能。”闲鱼工程师、UI2Code项目成员深宇对PingWest品玩介绍。

TensorFlow 的这种简单和容易上手的特征,是他吸引开发者之处。作为一个开源框架,TensorFlow 还提供了简洁直观的可视化操作界面 TensorBoard。另外,在效率上,它还支持多GPU训练,有助于提升训练效率。

TensorBoard 页面
TensorBoard 页面

TensorFlow Lite 打通AI到端上的路径

而且,在 TensorFlow 的基础上,Google 还推出了更加适合移动端的 TensorFlow Lite,实现了更轻的体验。“以前这种模型还是太大了,放到端上会受不了。当时都是放到服务端,做一个API再进行调用。”酒丐说。“而 Lite 推出后就可以直接打通了到端上的这条路。”

在不断的熟悉之后,闲鱼将许多基于 TensorFlow Lite 开发的功能推出到生产环境。“TensorFlow 的低门槛和易用性以及相对可靠和稳定的优点,让我们能够快速在实际场景中来实现和检测我们的一个想法,也可以快速完成试错。”酒丐说。

比如,当你打开闲鱼搜索信息时,你看到的那些描述产品的文字标签,有许多就是靠基于 TensorFlow 的技术生成。“当想要出租房屋的用户上传了一张房间的照片,或者视频,我们就可以应用 TensorFlow 提供的最基本的模型来获得这个房间里面的相关的信息。”上叶介绍。“我们可以获得房间是否有电视机、沙发、电器等一些相关信息,借此来补充我们这个商品的内容信息。”

同时,对于这些用户上传的视频,闲鱼也使用机器学习技术来对他们进行质量评价。“我们选取了几个维度,会通过机器学习来自动评判他们的客观度等。”酒丐说。

这样的应用还是 TensorFlow 的较常见使用案例,闲鱼团队在越来越了解TensorFlow之后,开始不断创新,“脑洞大开”设计出许多自创的新功能。

在去年的 Google 开发者大会上,上叶就分享了一项原创性十足的黑科技:UI2Code。这个项目可以让开发者仅仅从一张图片,就直接生成对应的UI代码。

闲鱼团队在Google开发者大会上做展示
闲鱼团队在Google开发者大会上做展示

“图片可以是设计师的视觉产出,也可以是手机上随便打开一个软件然后截图得到。”上叶在当时的活动上分享。据他介绍,UI2Code 关注的是1比1像素级别的精确还原,目的是为了节省开发人员重复机械的视觉还原工作,将没有创造性的重复性工作交给机器,这样开发人员就可以去关注更重要的逻辑性问题。生成的UI代码是“接近”生产可用的,开发人员只要做一些数据绑定或者细微的调整即可。

在开发 UI2Code 这个复杂的工作流程过程中,闲鱼团队正是使用了TensorFlow Lite 来完成其中的深度学习任务。

此外,闲鱼团队还使用TensorFlow 设计出一个通过识别视频中的音频,来为视频进行分类的模型。团队使用深度学习模型,将视频中提取出的音频进行向量化处理,生成图片,之后对这些矢量图进行分析比对,从而判断出音频是男声、女声或是其他声音,据此完成分类。

“整个过程我们只用了3周时间。”上叶介绍说。“目前我们的识别率已经达到86%。这已经是蛮高的水平了。”

机器学习技术发展的关键在开源

据 Google 对 PingWest品玩介绍,在中国像闲鱼这样的 TensorFlow 开发者正在变得越来越多,到去年9月,TensorFlow在中国已有200万的下载次数。

而像闲鱼这样的开发者们,也开始积极参加到推进整个TensorFlow 以及机器学习开源技术的生态建设中去。据闲鱼介绍,他们计划将UI2Code 开源给更多的开发者,因为深度学习最重要的还是海量的训练数据,开源后可以吸引更多的参与者来一同推进这项技术的进步,提高它从不同图像转换成代码的精确度。

“机器学习如今有些进入一个瓶颈期。”闲鱼AI团队的一名成员对PingWest品玩表示。“一方面是由于近几年没有新的网络出现,大家还是依靠过去那几种。另一方面,更主要的则是因为数据水平的问题。要推进深度学习技术的进步,就必须靠开源来吸引更多的开发者参与进来。”

所以,如果你也有自己的 TensorFlow 使用案例,非常欢迎你点击以下链接与我们分享,让世界看见你的创新: http://services.google.cn/fb/forms/TFCS/

下载品玩App,比99.9%的人更先知道关于「TensorFlow」的新故事

下载品玩App

比99.9%的人更先知道关于「TensorFlow」的新故事

iOS版本 Android版本
立即下载
玄宁

品玩资深作者,关注商业世界里钱的流动、公司的变革和人的故事。联系邮箱:wangzhaoyang@pingwest.com

取消 发布
AI阅读助手
以下有两点提示,请您注意:
1. 请避免输入违反公序良俗、不安全或敏感的内容,模型可能无法回答不合适的问题。
2. 我们致力于提供高质量的大模型问答服务,但无法保证回答的准确性、时效性、全面性或适用性。在使用本服务时,您需要自行判断并承担风险;
感谢您的理解与配合
该功能目前正处于内测阶段,尚未对所有用户开放。如果您想快人一步体验产品的新功能,欢迎点击下面的按钮申请参与内测 申请内测