登陆注册
9086800000192

第192章 人景分离

每一次挫折,都是一次新的机遇。

眼下的白垩纪正是如此,在吃瓜网民的注视下,白垩纪顺势发起对流量户的名誉权反诉讼,并借势开始招募线下加盟商,布局线下销售行业。

紧跟着,白垩纪发布了Android操作系统版本2.02,新的操作系统中剔除了企鹅的两款语音聊天工具,新加入了天猫商城APP。

企鹅立马发起了不正当竞争诉讼,白垩纪直接就发了声明:结束合作,赔钱退股!

反正就是不想跟你玩了。

(流量户这一设定参考腾百和几个手机的合作历史和诉讼史,我感觉我又走在了404的边缘,李飞飞千万保佑我……)

白垩纪下一代手机战略,在具体机型有了目标后,整体战略也多了一个目标:实现盈利,尤其是在高端手机上,增加差异化,提高利润比。

对高通的诉讼,一时半会儿也出不了什么结果,着急也没用。工作组来了几天,调查盘问了一些问题,又取走了一些资料,表示接下来还会对其他手机和生产单位调查取证,而后就走了。

即使知道工作组和国产手机在利益上是“一家人”,但是还是要有事实依据,最终拿证据说事的。

天网的开源计划定了,霍蓓蕾的“任性”是一方面,也有一些出于其他方面的考量。

随之而来的开发人员不足的问题,却是让人觉得头都大了几圈。

移动式机械手的研发还是要继续进行下去的,哪怕研发速度减缓,还是不能停,这关乎到天网的“饭碗”问题。

其他的许多动作,只能被迫停下来了,这里面就有关于连杆机械足的研发计划。

而保留下来的项目,除机械手外只有一个,仍然还是视觉领域的项目:人景分离。

再具体一点:视频场景的人景分离。

更具体一点:为新A站打造人景分离弹幕。

技术本身不复杂,仍然还是基于神经网络的深度学习。

一个完整的视频网站或者直播网站,其技术流程包含了采集、处理、编码、封装、推流……还需要了解RTMP等协议、H264等格式,掩码(mask)……

以上都是唬人玩的。

视频网站的真实开发场景就是客户端一套代码,服务端一套代码,按照规范和手册做下来即可。有些东西并不需要特别深究,是前人已经封装好的。保护脑细胞健康,从忽视原理开始。

卡住中小企业的关键问题之一仍然还是服务器架构问题,这里面cdn的运用和服务器分发规则等负载均衡问题算是个学问。

就视频本身而言,其本质仍然还是图片,以快速刷新屏幕的方式,欺骗人的视觉,让人以为视频中的人物和场景在移动,而直播则是被分割成的一个个短小视频的衔接。

视频中的每一张图片被称之为“帧”。

既然是图片,那么神经网络和深度学习这对组合,就能够派上用场了。

对大量包含人物的样本图片进行监督学习,可以得到关于人物轮廓的特征库以及语意库,作为分离标准。

对静动像素的神经网络进行算法分析,可以得到需要处理的目标区域。

此外还有远近景的区分等等,这又是一个长长的课题清单。

监督学习和深度学习不再表述,总之这就是个黑盒模式。黑盒就是人类看不懂也无法解释的意思,其过程是个有目的的随机碰撞的过程,依赖于高速GPU的计算能力。

静动分析更好说,如果图片四角是静止的,那么目标可能就是动的。如果图片四角是移动的,那么目标可能是静止的。

远近景就不说了,有些时候并不是所有图片中动的物体都需要切割。

这里面临一个问题:英伟达支持AI计算的显卡目前还没发布,所以这一项目想要实现,仍然还是依赖于服务器。

所以整个项目流程被定为,AI服务器从新A站服务器得到视频数据,将视频数据解码变为图片集,对像素进行标记,处理好的图片集再次打包成视频吐回服务器,视频网站设置对应的人、景、弹幕三者的z-index,在网站上和移动端把弹幕置于人景之间,最终呈现给用户的就是一个人景分离的弹幕了。

因为依赖于服务器的原因,算力是有限的,能从这一项目得到受惠的up主必然不会太多。因此这一成果将用于吸引优秀up主加入,作为优秀视频的奖励。

当然这些扯远了,眼下八字还没一撇。好端端的突然跳到这个科研树,原因是因为需要强化语意分割。

语意分割,其目标是知道图片中的物体是什么。

以微软识图为例,一张绿草如茵的图片,可能会被识别为“羊”。原因是,有关羊的训练库都和草地有关,所以看到草地,计算机就会自动认为这是“羊”。这就是无语意分割。

语意分割就是要搞清楚,“羊”是什么,“羊”长什么样,“羊”在哪。

机械手识别商品并进行抓取,用到是就是有语意分割的深度学习神经网络,但是存在着一些缺陷。

新开的这个项目就是为了强化语意分割的概念,进一步增加对图片的辨识度,并为图片中的物体赋予含义。

并不涉及到未知技术,叶晓奇也没打算插手。人景分离项目继天网课堂的人脸识别项目后,成为了新的可选实训项目。而人景分离,也将为天网课堂的考核教程提供素材。

叶晓奇点了一个人,做这个项目负责人,老实巴交的刘浩然,上一次刘浩然的展示给叶晓奇留下了深刻的印象。

校企合作那边也相应的提了要求,近期需要侧重提供包含人物的图片,以供学习。

(这个技术的灵感来源是b站的蒙版弹幕,早在蒙版弹幕出来的时候我就在搞这个玩了,FNC在这方面做的很好,再后来发现可以不用这么玩,谷歌在2月份发布了deeplabv3+可以直接做这个东西。这个技术真的很简单,当下的条件,一个人就能写了,只是跟团队比起来会有效率高低开发快慢的不同,具体用到的工具和库也会不一样,有几个库可供选择,效果也不一样。到目前为止,本书中出现过的东西,都是现实里已经有的。AI弹幕,按道理来说,其实早就应该有了,可能是研发AI的企业关注点都在别的方面,比如汽车和VR什么的,所以拖到2018年才有。未来,本书也许会略带科幻元素,原则仍然还是以现有技术能否实现为基准,不会科幻的很离谱。)

同类推荐
  • 华夏之我是最强佣兵

    华夏之我是最强佣兵

    非洲某地神秘掉落一块外星陨石,引得各国无数佣兵前往勘查,究竟是什么让各国派出如此之多的佣兵前往呢,请拭目以待!!!
  • 美女的无敌神医

    美女的无敌神医

    当个神医很烦恼,当个无敌的神医更烦恼,因为病人太多,唐钰实在是应付不过来呀!
  • 都市之最强杂兵

    都市之最强杂兵

    十年前,他被誉为最废杂兵。可就是顶着最废之名的他,却带出了一支让全世界为之闻风变色的队伍……十年前,他为活命,被逼得背井离乡,远走他国……十年后,他王者归来……谁无虎落平阳日,待我风云再起时。有朝一日龙得水,我叫长江水逆流。有朝一日虎归山,我将血染半边天。——慕云逸
  • 南海渔霸

    南海渔霸

    一个草根渔民捞到龙王老爷插花用的金瓶,然后发家致富迎娶白富美走上人生巅峰的老套故事。嗯,就是这样。
  • 低手不凡

    低手不凡

    少年自山上而来,拥有最神秘的体质,万千敌人在他面前如纸糊泡沫,一拳轰破。最霸道的功法,最神秘的职业,铁血少年征战不休,撑起都市至尊的封号,笑傲都市。
热门推荐
  • 一不小心进了怪女校

    一不小心进了怪女校

    一不小心被基友坑进了女校!坑进女校也就算了,…………但这算那门子女校?魔女,妖女,痴女,变态女什么的!通通到齐…………,这是要闹哪样?最让平一凡崩溃的还不只这些!这所学校每天晚上都会发生些鬼议的事情!本来想安安分分过完这三年的,没奈何!树欲静而风不止!他只能坦然面对!最终他将这一切因果谜团都解开了!但他却发现出现了一个更大的问题……
  • 撰集三藏及杂藏传

    撰集三藏及杂藏传

    本书为公版书,为不受著作权法限制的作家、艺术家及其它人士发布的作品,供广大读者阅读交流。汇聚授权电子版权。
  • 我的异界城主生活

    我的异界城主生活

    这是一篇种田文,主角在魔法世界点科技树,来建立自己的王国。当魔法与科技相撞,到底能擦出怎样的火花呢?
  • 穿书之前程似锦

    穿书之前程似锦

    毕业即失业的程锦一觉醒来,发现自己的手机上多了一个前程APP……好奇的她,随手点进去,发现这是一个可以收取or偷取‘前程值’的APP,有进度条,有荣誉值,还能兑换……而后,她被带到了一个个陌生的世界里。
  • 别惹四小姐(大结局)

    别惹四小姐(大结局)

    她是名遍黎国的笨蛋丑女!为她那位高权重的爹爹丢尽了脸面!那些自已为漂亮的兄弟姐妹个个嘲笑她!就连婢女下人都瞧不起她!没关系!我郁清(潘素素)忍!什么?她那个传说中的“花少”夫君居然退婚?好!没关系,正好我也不想嫁!哪个王八蛋半夜把她的头剪得乱七八糟?!哪个猪头在她碗里放辣椒?!哪个八婆传她脸上长疮身上长毒瘤?!呼...没关系!真的没关系!我忍!什么?外来使臣送来黄金万两珍奇异兽,只为见她这黎国传说中的第一丑女?!娘的!有钱没地方花啊!什么?举办选美大赛?!关我屁事!啊?让我去给她们做陪衬?!呼,没事没事我还可以忍!什么?让我学狗叫?MD!你们这帮食古不化的猿猴!不让你们见识见识现代人的魅力你们还真当老娘是笨蛋啊!哼!黎国第一美女又怎样?老娘照样鄙视!切!黎国第一才女又怎样?老娘照样踢!额...至于黎国第一美男...哎...啥?他就是那个传说中的“花少?!”
  • 苦涩纪年

    苦涩纪年

    谭二自小背负了家人、村人给予的种种压力,加之其自小聪慧敏感,在这种压力下逐渐养成孤僻自傲的性格。谭二参加完高考后那个的夏天,谭家村新搬入了一人家,有位妙龄女子叫许妍,谭二从她身上找到了山村里一直缺失的灵性和气质,他们互生情愫,等谭二踏上去大学的列车,这份情也被封存下来。穷人的孩子早当家,谭二在大学里用自己敏锐的观察和勤奋,几次险些完成挣大钱的梦想,但是因为各种原因最终都功败垂成。许妍随着打工大流南下广东,自此和谭二天各一方。当一件突如其来的事件打压到许妍身上时,许妍才知道自己是那么的弱不禁风,为了规避危险,许妍踏上了寻找谭二的路。许妍还是出了事情,谭二去寻找她时却遭遇车祸,他的心态发生改变,下了学,直接到北京闯荡,为了实现自己的愿望,他迎娶了北京女孩。许妍知道谭二结婚后,心灰之下嫁给了同村的一个男人,噩梦在新婚第二天就开始了。她最终只得再次踏上南下的列车。
  • 名人传记丛书:华兹华斯

    名人传记丛书:华兹华斯

    名人传记丛书——华兹华斯——一切知识的开始和终结,同人心一样不朽:“立足课本,超越课堂”,以提高中小学生的综合素质为目的,让中小学生从课内受益到课外,是一生的良师益友。
  • 成为主神前的试炼

    成为主神前的试炼

    “啥?你说何离把小米弄丢了?”听到这个消息,东方月初召出了灭妖神火,王权富贵拔出了鞘中的王权剑,一方通行展开了背后的六芒光翼,镜心默默地掏出了光势,阿尔泰尔开始查看森罗万象的新技能,逆回十六夜则是取下了耳机,涂山雅雅也放下了怀中的酒葫芦……何离看着这群磨刀霍霍向自己的队友,嘴角忍不住一阵抽搐,心中发慌得鸭匹:“那个,其实我可以解释的……”
  • 九章之孙悟空

    九章之孙悟空

    一个不一样的孙悟空,一个不一样的洪荒。魔族等将卷土重来,灵明石猴破石而出,他将如何带领族人带给洪荒和平?
  • 恶毒女配逍遥纪事

    恶毒女配逍遥纪事

    每一部苦恋情深的小说背后,都有一个心肠恶毒却对男主爱死爱活的女人,她曾是男主的前恋人,却眼睁睁看着男主爱上女主,没办法,谁叫她是女配呢。遇到变心的渣男,不是应该一脚踹开,祝他和女主百年好合么?但是她却处心积虑迫害女主,可每次都让女主化险为夷,没办法,谁叫她是女配呢,女配无人权啊!而苏剪剪,一个看小说总将自己带入女主的普通妹纸,却被迫穿越进小说中,成为衬托男女主角美好爱情的恶毒女配。而且,她还被要求不能改动剧情——臣妾做不到啊!