科百科
当前位置: 首页 范文大全

尬舞机 程序(尬舞机背后的黑科技)

时间:2023-06-18 作者: 小编 阅读量: 2 栏目名: 范文大全

而登顶之后,也并未迅速跌落,即使到了今天,抖音在AppStore上仍仅次于支付宝和微信,位列第三。尬舞机研发上的技术支持来自今日头条人工智能实验室。我们的人体关键点模型是业界领先的水平。从实现效果来看,我们在国内首次把检测范围扩大到了全身。发布各大自媒体平台,覆盖百万读者。

抖音尬舞机诞生记

在刚刚过去的 2017 年里,如果要盘点整个互联网行业最引人瞩目的产品,抖音无论如何都会榜上有名。

从 3 月爆发起,抖音全年保持了令人震惊的增长态势,以至于此前所有关于他将会昙花一现的预言统统落空。就在 12 月的月末,抖音更是实现了一波强劲地增长,顺利登顶中国 App store 的免费榜。

事实上,早在 9 月,抖音就已经进入了位居 App Store 摄影与录像分榜第一,并进入总榜前十。而登顶之后,也并未迅速跌落,即使到了今天,抖音在 App Store 上仍仅次于支付宝和微信,位列第三。

(抖音 3 月以来的百度指数)

那么,抖音是如何能在 2017 年一路势如破竹,甚至在年末战胜微信、支付宝这样巨头登顶 App Store 的呢?

和外界大多数所分析推演的不同,来自抖音内部的结论是,新技术新功能的不断开发迭代是产品能够持续走高的重中之重。

以岁末的这次登顶为例,抖音内部归功于产品新推出的功能玩法。12 月 21 日,抖音的新版本上线了名为「尬舞机」的功能,上线的第二天,抖音就成功登顶。

是什么让抖音在 2017 年实现了现象级的表现?如同尬舞机这样为抖音带来质的变化的功能又有哪些?其中如尬舞机这样的技术功能又贡献几何?这些功能又有什么特殊之处?

带着这些问题,我们采访了抖音产品负责人王晓蔚,以下是采访内容实录:

Q:抖音年末的这波爆发真的是因为新功能「尬舞机」吗?它是如何做到的,从产品表现来看怎么样?能详细介绍一下这个功能吗?

抖音:其实在封闭开发的时候我们就有这样的期待(登顶),毕竟从 9 月开始抖音就稳定在 App Store 前十。所以开发的时候项目组的同学都憋着一口气,想要把这个功能做爆炸,最后也确实实现了。

尬舞机研发上的技术支持来自今日头条人工智能实验室(简称 AI lab)。它其实是人体关键点检测技术的应用。依靠这项技术,我们能够检测到图像中所包含人体的各个关键点的位置,从而实现从用户姿态到目标姿态的准确匹配。简单来说是把就把跳舞机、kinect 这样的体感游戏搬到了手机上。体感类游戏之前受技术条件的限制,大家只能借助特定硬件设备才能玩。尬舞机的出现标志着,凭借先进的深度学习技术的支持,我们已经能够让我们的手机实时,精准地「读懂」人体的姿态和动作,让普通用户随时随地能够体验这种游戏形式。

上午新版本放出以后,就有很多用户参与进来了。因为尬舞机玩起来没什么门槛,效果又很「尬」,玩的好的会很酷,玩的不好也会显得蠢萌蠢萌的,用户把视频分享到 social 渠道不会有什么负担。事后来看尬舞机视频的站外分享量都非常高。其实到了当天半夜,我们就已经 App Store 登顶了,也就不到 20 个小时吧,那个时候我们原定的推广活动都还没开始。

Q:我们看到近期一些其他产品也推出了类似的功能,从结果上来看,都没有尬舞机对抖音的贡献那么直接明显,这是否说明产品的增长其实不完全是新功能的作用?

抖音:很多看上去相似的功能,因为工程能力的不同,在实现效果上会有很大差异。以尬舞机为例,动作识别准确率高,用户才能玩起来,否则只会让人反感。

而要想做好这个功能,需要解决两个难题。第一,人体的形变范围比较大,受衣服变化、物体遮挡等影响严重,在日常场景下准确地检测人体关键点一直是计算机视觉领域中的一个热点问题。第二个难点是,要实现精准检测,需要耗费高昂的计算资源,无法在手机端实现日常场景应用。

由于这两个难点的存在,市面上很多产品的类似功能只能实现半身检测,甚至人脸检测。这样功能的实现效果上会大打折扣,玩法上也会有很多限制。

对此,头条 AI lab 的同事创新了技术方案。相比于业界流行的自顶向下(Top-Down)的方案,我们采用的是自底向上(Bottom-Up)的方案。核心是我们针对移动端设备自研的网络结构,极大地减少计算量,同时让准确率大幅提升,实现了在移动端的实时无损运行。

我们的人体关键点模型是业界领先的水平。从实现效果来看,我们在国内首次把检测范围扩大到了全身。而对于更简单,也更广泛实用化的人脸关键点检测技术,可以对视频进行实时检测。也积累了很大的人脸库,可以很准确的识别人脸。

Q:所以尬舞机是抖音的「大招」吗?最开始立项要做的原因是什么?

抖音:整个功能前后封闭开发了一个多月,内部确实对尬舞机的效果是有期待的。但不是以憋大招的心态去做的,像尬舞机这样玩起来更简单,效果更酷炫的功能这一年来抖音一直在做。包括背景分割、音乐滤镜、AR 贴纸等等,都是基于我们的 AI 技术开发的特效功能。只不过这次登顶了所以大家都关注到了。

之所以做这些还是跟我们的初心有关,当初我们做抖音的时候就觉得应该有一个适合中国年轻人的音乐短视频社区产品。这个产品要年轻人喜欢玩,能轻松自在表达自己,展现自我,要有意思。所有的功能设置都是围绕这个目标展开的,中国年轻人的歌舞基础很弱,想要更多的人能够参与表达,就要在产品层面做更好的引导,降低他们表达的门槛,让他们更容易变酷。

这也是为什么抖音的滤镜和特效会受到追捧,因为我们确实在这方面投入了很多心血去做好它。说一个挺有意思的事,最近「国民闺女」关晓彤也开始玩抖音了。看上去她玩的还是挺开心的,最近我们发现她把个性签名改成了「这里的滤镜和美颜让我无法自拔」,这也算是对我们的特效功能的一种认可吧。

Q:所以抖音的滤镜和特效的不同之处是什么呢?

抖音:还是我们的技术。背后的很多「黑科技」让我们的特效不仅仅停留于其他平台的卖萌贴纸。

举个例子,抖音有一个「实时染发」的特效,即能在手机上实时改变头发颜色,模拟现实生活中的染发效果。这个功能是站内最受欢迎的特效之一,别的平台还没有办法实现。

(实时染发特效)

其中的难点是头发的分割。因为头发非常细,边缘部分的识别和分割非常难。我们专门针对头发做了识别优化。基于自研的网络,我们的头发分割能达到发丝级的精度。我们通过头发追踪技术和自研着色技术,估计头发的反射率,能够在不同的原始发色和光照条件下渲染大多数颜色。

Q:这些「黑科技」对于抖音这一年的增长到底起了哪些作用?

抖音:这么讲吧,基本上每次有新玩法新功能出现,都能在数据上获得直观的体现。不仅是尬舞机,「单身狗」、「大脸怪」、「憨厚」等,我们这些在社交网络受到广泛喜爱的特效,都为我们吸引来了很多新用户,并形成了很好的品牌效应。

Q:对于这些新功能新玩法,抖音内部有一套运作机制来持续地开发吗?

抖音:谈不上什么固定的机制,其实冒出来的想法远多于最终能够落地实现的。这些想法一方面来自我们自己产品运营同学的脑洞,另一方面,我们也会从用户那里汲取灵感,有些想法是用户直接反馈给我们,有些则是我们从用户的视频里发现,通过技术手段来实现。

前不久,今日头条与北京大学共同完成的「互联网信息摘要与机器写稿关键技术及应用」项目获得了吴文俊人工智能技术发明奖。吴文俊奖被外界誉为「中国智能科学科技最高奖」。

背后有头条 AI lab 的支持,也是抖音比较幸运的地方,这让我们的很多想法有机会落地。这可能也是我们相对于其他同类产品的优势。反过来包括抖音在内头条的众多产品业务线,为 lab 前沿的 AI 技术研究提供了应用的场景。

——————————————————————————————————

微信关注公众号“懂懂笔记”每天第一时间为您奉上最新最热的科技圈资讯~

多年财经媒体经历,业内资深分析人士,圈中好友众多,信息丰富,观点独到。

发布各大自媒体平台,覆盖百万读者。

《小米生态链战地笔记》、《微信思维》、《微信力量》三本畅销书的作者。

    推荐阅读
  • 秋天的怀念第二段蕴含了作者怎样的思想感情(词:(秋天的怀念第二段的思想感情)

    秋天的怀念第二段蕴含了作者怎样的思想感情?正是这种厚重的意蕴,使它超越了一般怀念文章的悲悼、痛惜的情感而升华到一种崇高、壮美的境界。母爱是人类的天性,是社会中普遍存在的一种伟大的感情。但远远不是任何一个承受母爱的儿女都能一样深切地感受到的。不能感受爱的心灵一定不会去爱,能感受爱的心灵在感受的同时就是一种对爱的回报。史铁生正是以诉说母亲对自己的爱而诉说了自己对母亲的爱。

  • 可可托海的牧羊人歌意思(可可托海的牧羊人歌的含义是什么)

    可可托海的牧羊人歌意思这是一个可可托海地区关于牧羊人和养蜂女的故事,男主人公以追逐草场的更替赶着羊群草场为家,女主人公追随着花开花落驼队驼着蜂箱哪里开花哪里就是家。在这个花开草长的季节,两颗漂泊的心也渐渐互生了爱意!她没有忘记她是两个孩子的母亲,她不想拖累这个男人。当她听说牧场的草都黄了,牧羊人还没离开,说要等她回去时,她哭了,她托人带来了消息,告诉牧羊人说她嫁人了!牧羊人心痛了唱出了这首歌。

  • 6道实惠又下饭的菜(最应该吃的一个菜)

    龙须菜是一种外表与龙须十分相似的绿色蔬菜,色泽嫩绿,口感鲜嫩,营养价值高,深受百姓的喜爱。我们家每到冬季隔三岔五吃一次龙须菜,美味可口超级下饭。凉拌龙须菜配料:龙须菜500克、小米椒6根、独头蒜1头、盐1勺、五香粉1/2勺、白糖1勺、生抽2勺、陈醋3勺烹饪步骤:1.龙须菜500克,小米椒6根,独头蒜1头。

  • 会计考证审核通过可以重新报名吗(成绩取消证书白考了)

    近日,各地政府部门陆续公布异地“挂证”存疑名单。名单直接公布的注册人员共有20050人。无论是哪个市的通知名单中,基本上大部分人员涉及到异地社保不一致或重复缴纳问题,这已经说明有关部门早就掌握了查处异地挂证的手段。由于五人的严重不负责任,致使XXX以他们的名义为某些企业出具了虚假的审计报告,给国家造成严重经济损失。与2018年的报名公告一致,预示着2019年上述各地会继续要求社保记录。

  • a开头的姓氏(a开头的姓氏有哪些)

    跟着小编一起来看一看吧!a开头的姓氏a开头的拼音的姓氏:阿、爱、艾、安、奥、鳌、敖、爱新觉罗。姓者,统其祖考之所自出;氏者,别其子孙之所自分;“姓氏者,标示家族血缘之符号也”。据研究,中华古姓来源于图腾崇拜,系氏族徽号或标志。中华古姓的最初来源,是基于“天道”的原始宗教崇拜、图腾崇拜与祖先崇拜。大量古代文献佐证了这一观点。

  • 战神4幽灵支线任务怎么做(战神4幽灵支线任务怎么做不了)

    战神4幽灵任务攻略要点死亡货船从被遗忘的洞穴南边码头上岸,点燃火盆和幽魂对话,清理掉附近的敌人即可完成任务。希望解剖学来到渡鸦断崖北边的码头,和幽魂对话,找到三块骨头即可完成任务。未了之事九界之湖周围一共有4处可以开启此任务的地点,分别为渡鸦断崖、死亡小岛、铁湾和被遗忘的洞穴。这些地方会生成一个幽魂+一波敌人,完成这四处地方的任务即可。

  • 力度伸维c泡腾片肾结石能吃吗(把维C泡腾片当水喝)

    把维C泡腾片当水喝来源:新闻晨报综合报道每天泡维C泡腾片当水喝,后果是什么?武汉市中心医院提醒,维生素C预防新冠肺炎不可信,补多了有患结石的风险@武汉中心医院微博截图疫情期间,一位五旬男子在网上看到“吃维生素C可预防新。

  • 高密星月菩提怎么盘好(高密星月菩提的盘玩技巧)

    高密星月菩提怎么盘好去生、挂瓷,新入手的籽都有生性。所以到手的星月不要急着上手去盘玩,可以戴上比较粗糙的鹿皮手套或者是搓澡巾来撸星月,目的是清洁、去生和抛光。具体时间自己掌握,盘到表面干净,去掉车痕为止。接着再戴比较光滑的棉布手套再撸一段时间,目的就是精抛光,这一步持续一个月左右,初步挂瓷就完成了。上色,挂瓷后的星月上色慢,也不容易盘花。

  • 微信怎么保存图片(微信保存图片的方法)

    以下内容希望对你有帮助!微信怎么保存图片微信保存图片的方法:首先打开手机里面的微信app,并登录上自己的微信账号。然后点击打开微信好友的聊天窗口并点开想要保存的图片,可以看到图片右下角有一个箭头符号。

  • 山东有什么好玩的地方(分别有哪些)

    千佛山也是很好的选择,它是泰山的一部分,大明湖也是非常有名的,还珠格格中风靡一时的话,指的就是这里啦。如果是青岛便是对的选择。这也是一个有大海的城市,蓬莱大家都有听到吧,可以称为人间仙境。蓬莱有蓬莱阁,蓬莱阁与黄鹤楼,岳阳楼,滕王阁统称为中国四大明楼,八仙过海的故事海内外都非常有名,还有海市蜃楼的奇特景观更是让人向往。