MSCBSC 移动通信论坛
搜索
登录注册
网络优化工程师招聘专栏 4G/LTE通信工程师最新职位列表 通信实习生/应届生招聘职位

  • 阅读:765
  • 回复:0
MIT与谷歌开发新系统 可以在手机上美化图片
mao_mao
论坛副管
鎵嬫満鍙风爜宸查獙璇


 发短消息    关注Ta 

C友·铁杆勋章   管理·勤奋勋章   C友·进步勋章   管理·优秀勋章   C友·贡献勋章   “灌水之王”   纪念勋章·七周年   管理·标兵勋章   活动·积极勋章   财富勋章·财运连连   财富勋章·大富豪   财富勋章·小财主   专家·终级勋章   财富勋章·神秘富豪   C友·登录达人   纪念勋章·五周年   财富勋章·富可敌国   财富勋章·财神   财富勋章·富甲一方   财富勋章·钻石王老五   活动·第二届通信技术杯   纪念勋章·六周年   活动·摄影达人   纪念勋章·八周年   纪念勋章·九周年   纪念勋章·十周年   C友·技术大神  
积分 428896
帖子 85070
威望 5043414 个
礼品券 5423 个
专家指数 3546
注册 2009-4-24
专业方向  移动通信
回答问题数 0
回答被采纳数 0
回答采纳率 0%
 
发表于 2017-08-02 20:24:01  只看楼主 

  新浪科技讯 北京时间8月2日消息,今天,数码相机捕捉的数据往往只是生成最终照片的原始数据。在我们将照片传到社交网络之前,即使只是普通的手机摄影师,也会花1分钟或者2分钟调节色彩和对比度,用图片处理软件处理,现在市场上有很多这样的软件。

  在本周举办的Siggraph会议上,麻省理工学院(MIT)计算机科学与AI实验室和谷歌的研究人员展示了一套新系统,它可以自动按专业摄像师的处理方式润饰图片。系统相当节能,可以在手机上运行,处理速度很快,可以实时显示润饰的图片,这样一来摄影师可以一边拍摄一边查看最终图像。

  MIT与谷歌合作

  不只如此,这套系统还可以让现有的图像处理算法加速运行。谷歌有一套算法可以生成HDR图像,在标准数字图片中有些色彩细节会丢失,谷歌算法却可以捕捉到细节,研究人员在测试中发现,新系统生成的图像与谷歌算法生成的图像很难区分,但所用的时间只有十分之一,速度足够快,完全可以实时显示。

  MIT与谷歌开发的系统是一套机器学习系统,也就是说它可以通过分析训练数据不断学习,提高完成任务的技能。在MIT系统中,每一次学习新任务都要用几千对图片进行训练,包括原始图片和润饰图片。

  系统是根据MIT研究人员之前从事的项目开发的,在之前的项目中,研究人员用手机将低分辨率图片发送到网络服务器,服务器发回“转化方案”,用它就可以在手机上对高清版本的图片进行润饰,这样就可以降低带宽要求。

  MIT电子工程、计算机科学研究生迈克尔·加哈比(Micha?l Gharbi)说:“谷歌听到了我们在做这样的研究,他们自己也跟着研究,我们见了面,将两套方案整合在一起。总的构想是这样的:要做我们之前所做的所有事,但是必须在云端处理一切,不断学习。学习的第一目标就是加快速度。”

  两种关键技术

  在新系统中,大量的图片处理任务是用低分辨率图片完成的,这样就可以大大缩短时间,降低能耗。采用新方法带来许多困难,因为机器学习系统输出的结果粗糙很多,新技术必须从粗糙结果推断出高清图像单个像素的颜色数值。

  以前,研究人员尝试让机器学习系统学会一门技巧:增强低分辨率图片,系统会猜测遗漏像素的数值,然后提升分辨率。在训练时,研究人员向系统输入低分辨率图片,最终输出的却是高分辨率图片。方法看起来很好,但在实际应用中效果不好,为什么?因为低分辨率图片丢掉太多的数据。

  加哈比与同事用两种技术解决此问题。首先,机器学习系统输出的结果不是图片,而是一组简单的公式,它可以对图片的像素色彩进行修改。在训练时,系统的性能如何由输出公式的表现来决定。

  如何将公式应用于高分辨率图片的单个像素?那就要靠第二项关键技术。研究系统输出的是3D网络,16x16x8。网络16x16的一面对应原图像的像素位置,上面会堆叠共8层,它们对应不同的像素强度。每个网格单元都会有一个公式,它决定如何对源图像的色彩数值进行修改。

  在网络16x16的一面有许多单元,每一个单元代表高清图片的几千个像素。假设每一组公式对应单元中央的一个位置,那么方块内每一个高清像素都是由四组公式决定的。

  简单来说,该像素的色彩数值如何修改由方块四角的公式组合之后决定,它会根据距离判断。网络的第三维也这是样判断的,也就是对应像素强度的那一面。

  速度大幅提升

  研究人员用Durand和Adobe的数据集训练系统。数据包括5000张图片,每一张都由5位摄像师润饰过。然后研究人员用几千张配对图片训练系统,这些图片是用流行图片处理算法生成的,比如当中有一套算法专门生成HDR图片。软件处理图片时占用的内存空间与一张数码照片差不多,因此我们可以将软件装进手机,用手机将图片处理成各种风格。

  最后,研究人员将还将自己的系统与其它机器学习系统对比,其它机器学习系统处理高分辨率图片,不是低分辨率。在处理过程中,全分辨率图片需要12GB的内存执行操作,而研究人员的新系统只要100MB左右,相当于1/100。全分辨率HDR系统的处理时间相当于原始算法的10倍,相当于MIT系统的100倍。(德克)


扫码关注5G通信官方公众号,免费领取以下5G精品资料
  • 1、回复“LTBPS”免费领取《《中国联通5G终端白皮书》
  • 2、回复“ZGDX”免费领取《中国电信5G NTN技术白皮书
  • 3、回复“TXSB”免费领取《通信设备安装工程施工工艺图解
  • 4、回复“YDSL”免费领取《中国移动算力并网白皮书
  • 5、回复“5GX3”免费领取《 R16 23501-g60 5G的系统架构1
  • 6、回复“iot6”免费领取《【8月30号登载】物联网创新技术与产业应用蓝皮书——物联网感知技术及系统应用
  • 7、回复“6G31”免费领取《基于云网融合的6G关键技术白皮书
  • 8、回复“IM6G”免费领取《6G典型场景和关键能力白皮书
  • 对本帖内容的看法? 我要点评

     
    [充值威望,立即自动到帐] [VIP贵宾权限+威望套餐] 另有大量优惠赠送活动,请光临充值中心
    充值拥有大量的威望和最高的下载权限,下载站内资料无忧

    快速回复主题    
    标题
    内容
     上传资料请点左侧【添加附件】

    当前时区 GMT+8, 现在时间是 2024-04-20 18:17:46
    渝ICP备11001752号  Copyright @ 2006-2016 mscbsc.com  本站统一服务邮箱:mscbsc@163.com

    Processed in 0.212814 second(s), 13 queries , Gzip enabled
    TOP
    清除 Cookies - 联系我们 - 移动通信网 - 移动通信论坛 - 通信招聘网 - Archiver