VR开发中的优化

VR开发中的优化

前言

大概做了大半年的VR开发,HTCVive上与room scale和手柄控制器、激光相关的开发做过,gearvr使用oculus sdk开发做过,使用Cardboard做普通vr app在android和ios上发布也做过。

vr设备呢,HTCVive和oculus搞过,gearvr和普通Cardboard类的手机vr搞过,LG的新的glass接过,露光严重,idealens、还有一大票的国产一体机,pico、小米,嗯做的好的目前的确还是那几个大厂的。

由于我参与的项目主要围绕视频播放的功能,所以大型3d场景接触的倒不多,然而还是有很多需要优化的点,为什么呢,因为做的视频播放本身就需要对大于1080p的视频做解码、在unity中渲染,对cpu和gpu消耗都很大,挤占了部分性能,所以对其他逻辑和渲染部分的性能要求更高。

VR开发中的优化主要围绕两部分吧,一部分是由于VR的特殊场景,双眼渲染,且对帧率要求高,所以对性能要求也高,还有vr场景下一些特殊要求。另一部分是传统unity性能优化部分,对程序和美术都有要求。unity相关的优化网上已经有很多优秀的文章了,我在这只根据VR开发与传统unity开发的区别,分享一些优化的建议。

欢迎下载我们的app

VR优化

先从VR帧率卡说起

因为HTCVive和gearvr做的开发比较多,先说说这两个设备卡的表现,对于HTCVive而言,如果程序执行时卡顿比如loading或者什么,一般会优雅的回到HTCVive的一个默认场景,对用户还算比较友好,而对于gearvr而言,如果卡顿影响了渲染或者帧率低,那么用户头转动的时候能明显看到周围来不及渲染的黑的地方,如果渲染卡死的话,只剩最后一帧渲染的画面,周围的空间都是黑的。

对于PC而言,我们配置的显卡至少也会是970+吧,性能都比较好,cpu、渲染、IO等性能都比较高,但是到了移动端,相应操作性能都会变差,之前对比过一些操作,比如图片动态加载,在editor下可能只要几毫秒最多20几毫秒,到了移动端可能都要几十毫秒甚至2-500毫秒的都有,那么帧率降低的简直不要不要的。所以对于unity而言,不光在editor下看性能指标,也要利用profiler观察在移动设备的性能。我们在开发过程中和测试中都要不断的进行性能优化。

VR和传统游戏卡的区别

传统游戏也会做很多的性能优化,但是却可以有很多常用的解决方案,例如为了解决资源包大的问题,将资源通过异步下载并动态加载,为了减少加载的损耗,那么大不了加一个loading画面,而loading时一般而言随便卡,不太需要关注操作的阻塞延迟和帧率,因为loading时无需响应用户操作。甚至有的游戏按一个按钮也会进行阻塞,大不了出个loading嘛反正用户也会等。

对于VR应用,用户都是可以自由操作转头的,一旦卡顿,影响帧率,直接会影响用户视野转动,影响体验,同时降低帧率刷新后,用户会有眩晕感,那么就很失败。

一般什么时候会发生卡顿呢,对于vr程序开发而言,往往出现在场景切换时资源加载初始化脚本逻辑执行,例如monobehaviour的awake和start里包含的大量的逻辑,甚至你以为使用了协程就没有问题,然而协程在首次执行时第一个yield前可能也包含了大量的逻辑。还有运行时动态资源加载以及常见的每帧处理事情过多导致降帧

性能优化工具

unity提供了一些性能指标查看工具,比如profiler和frame debug。

profiler

profiler可以看cpu、render、内存等性能消耗,一般可以看出每一帧哪些操作分别消耗了多少时间,找到瓶颈进行优化。例如我之前在pc上看性能貌似都还可以,但是在gearvr移动端就明显的看到像Resource.Load()这种操作过多的占用了时间于是优化掉。

另外注意不必要的log记得清理,否则在profiler里会占用很多时间。

profiler也可以实时查看unity程序在android和ios上运行时的性能表现。

framedebug

framedebug可以方便的查看一帧都进行了哪些渲染,可以用来优化drawcall,在做vr开发的时候,因为双眼渲染,所以drawcall比普通程序也会高很多,正常表现是2倍的drawcall,具体平台就算进行了一定的优化,看起来往往也要多50%以上的drawcall。

嗯具体优化drawcall的方式常规游戏中也有蛮多,我只说我们做的简单且立竿见影的优化,因为ugui用的多,那么用ugui的sprite pack之后drawcall可以直接ugui中大量sprite的drawcall,再加上双倍的渲染,drawcall的节约其实非常可观,而不用做太多事情。

一些优化的经验

场景异步加载

在切换场景的时候,使用异步接口进行load,还是之前说的,同步load会导致卡顿而影响渲染。通过异步加载场景,尽量减少阻塞的时间,因为场景加载完毕运行的时候,初始化相关例如awake和start还是会导致一定的卡顿,这个就要通过后面的方式来解决。

资源分散到每一帧加载

例如加载一些prefab等资源,很多想load就load,或者集中在某个函数里依次load好,但是这样其实还是会导致卡顿。所以可以考虑使用协程等将资源加载分散到每一帧进行加载,这样也可以很快的在几帧内加载完毕,同时帧率也几乎不会下降。

脚本分散到每一帧执行

做项目的时候,在通过profiler调查性能时,有发现某一帧干了很多事情,导致卡顿。例如通过for循环干什么事情再用协程加载10张图片,那么这些操作虽然单独一个操作只要2-3ms不影响帧率,但是多个累计起来可能就高达几十ms甚至更高,就会影响帧率。

另外如果开了10个协程加载10张图片,很有可能在图片下载ok之后,在同一帧之内多张图片同时转为texture,这个操作很耗时,于是会累计导致卡顿,所以我也封装了一个用来控制类似操作的协程,每一帧只会执行一次这种阻塞耗时操作。

(必杀)黑屏

如果实在没办法,那就在特殊阻塞操作之前给用户一个预期吧,同时渐变黑屏掉,这样全黑的情况下,就算渲染卡顿了,用户也看不出来。比如切换场景后开始的时候会比较卡,可能高达几百ms甚至1秒,那么我就给用户预期是loading切换场景,先切到黑屏再阻塞,然后渲染ok了再恢复渲染。我看了有的app也是这样做的。

一个图片处理优化的例子

对于vr视频播放app而言,显示各种网络上的图片是一个比较常见的事情,在vr场景下,图片分辨率不能太低,而恰巧我们服务器提供了一张分辨率较低的缩略图和分辨率较高的大图,使用小图呢,不够清晰,使用大图呢,过于清晰,会造成闪的效果,同时loading大图比较慢,不划算,所以希望得到一个适当尺寸的图。让服务器去多给张合适的图,是最快最方便的途径,然而~好吧还是希望在客户端处理一下。

unity实现

如果使用unity的texture相关函数,由于unity动态生成大texture比较慢,在pc上都要几十ms,如果到了移动端差不多要几百ms,而且是同步阻塞操作,这个完全不能接受。

如果使用unity多线程操作呢,然而unity多线程不能处理渲染相关的类例如texture。

或者使用基本c#实现,一般的处理方法是使用System.Drawing,但是也不跨平台,理论上应该有直接对图片数据处理的办法,但是当时也没有那么多精力去研究。

native实现

使用unity下载图片并缓存到本地,写个android的java插件,使用android多线程处理图片,然后回调unity(此处也可封装为协程),这样对unity而言就只剩下JNI的调用开销和load适当大小图片的开销了。当然对于iOS平台需要再写一个小插件。

Unity优化

使用unity做vr开发,那么优化很多也是基于传统unity游戏开发的优化经验。由于unity接触也不够深入,所以基本也是参考其他人的优化方法,逐渐去学习使用和深入了解。

举例参考
http://www.cnblogs.com/murongxiaopifu/p/4284988.html

等等,这个unity优化相关可以百度或者google到很多系统的文章,大同小异。优化之路漫漫。

结语

总之传统unity游戏开发有很多种途径进行优化,必要时也可以有很多种方式避免用户输入和感知卡顿,可以在某些情况下降帧,而VR开发由于双眼渲染、头部控制的存在,对性能要求更高,压榨帧率,需要降帧的时候也需要特殊处理(例如黑屏)。

我看HTCVive上有些app在配有980的相对配置较高的机器上也很卡顿,还是希望可以在细节处优化,在用户体验上可以流畅。

时间: 2024-09-19 23:56:04

VR开发中的优化的相关文章

Cocos开发中性能优化工具介绍之Visual Studio内存泄漏检测工具——Visual Leak Detector

那么在Windows下有什么好的内存泄漏检测工具呢微软提供Visual Studio开发工具本身没有什么太好的内存泄漏检测功能我们可以使用第三方工具Visual Leak Detector以下简称vld. vld工具是VC++环境下一款小巧易用.免费开源的内存泄漏检测工具vld可以显示导致内存泄漏的完整内存分配调用堆栈.vld的检测报告能够对每个内存泄漏点提供完整的堆栈跟踪并且包含其源文件及行号信息. 安装过程是先在到地址http://vld.codeplex.com/下载vld安装文件然后进行

Cocos开发中性能优化工具介绍之使用Windows任务管理器

说到Windows平台我们很快就想到了Visual Studio 2012然而Visual Studio 2012在这方面没有很好的工具.如果我们只是想知道大体上内存.CPU等在某一事件前后变化情况我们可以使用Windows任务管理器.Windows任务管理器对于很多用户都不陌生自从有Windows操作系统以来这个工具就伴随着Windows.打开任务管理器方法也有很多在Windows7和Windows8平台可以使用Ctrl+Shift+Esc 组合键调出也可通过Ctrl+Alt+Delete 组

Cocos开发中性能优化工具介绍之Xcode中Instruments工具使用

Instruments是动态分析工具它与Xcode集成在一起可以在Xcode中通过菜单Product→Profile启动.启动如图所示Instruments有很多跟踪模板可以动态分析和跟踪内存.CPU和文件系统. 每个跟踪模板都有不同的用途其中Leaks可以检测内存泄漏点Allocations跟踪模板可以查看内存的使用情况.下面我们通过一个实例介绍一些Instruments工具的使用我们来人为制造一个内存泄漏我们在HelloWorldScene.cpp中修改代码 bool HelloWorld:

Android应用开发中对Bitmap的内存优化

在Android应用里,最耗费内存的就是图片资源.而且在Android系统中,读取位图Bitmap时,分给虚拟机中的图片的堆栈大小只有8M,如果超出了,就会出现OutOfMemory异常.所以,对于图片的内存优化,是Android应用开发中比较重要的内容. 1) 要及时回收Bitmap的内存 Bitmap类有一个方法recycle(),从方法名可以看出意思是回收.这里就有疑问了,Android系统有自己的垃圾回收机制,可以不定期的回收掉不使用的内存空间,当然也包括Bitmap的空间.那为什么还需

Android 开发中利用异步来优化运行速度和性能

本文讲的是Android 开发中利用异步来优化运行速度和性能, 我们知道,在Android框架中提供了很多异步处理的工具类.然而,他们中大部分实现是通过提供单一的后台线程来处理任务队列的.如果我们需要更多的后台线程的时候该怎么办呢? 大家都知道Android的UI更新是在UI线程中进行的(也称之为主线程).所以如果我们在UI线程中编写耗时任务都可能会阻塞UI线程更新UI.为了避免这种情况我们可以使用 AsyncTask, IntentService和Threads.在之前我写的一篇文章介绍了An

Java开发中程序和代码性能优化

现在计算机的处理性能越来越好,加上JDK升级对一些代码的优化,在代码层针对一些细节进行调整可能看不到性能的明显提升,在开发中注意这些,更多的是可以保持一种性能优先的意识. 一 条件控制语句中的优化 1.在循环中应该避免使用复杂的表达式. 在循环中,循环条件会被反复计算,应该避免把一些计算放在循环进行的部分中,程序将会运行的更快.比如: for(int i=0;i<list.size();i++) 可以改为 //我的电脑上,测试数量级在10^7,速度提升一倍. for(int i=0,len=li

Android 游戏开发中 OnTouchEvent() 触屏事件的性能优化

  关于Android 游戏开发中 OnTouchEvent() 触屏事件的性能优化笔记! 原文地址:http://blog.csdn.net/xiaominghimi/archive/2011/01/10/6127578.aspx 先上一段代码大家来看一下: view plaincopy to clipboardprint? ·········10········20········30········40········50········60········70········80····

Android开发中的SQLite优化

关于SQLite的优化,首先是能用SQL语句批次处理的,就不要单笔操作,Cursor就更是能不用就不用.比如成批的DELETE/UPDATE,将条件组装到SQL语句,会比使用CURSOR一条条的查再删效率要高很多(若干年前就曾使用存储过程代替单笔操作,将一次批量计算时间从一天缩到了数分钟以内,参考).其次是对操作的优化:对于INSERT/UPDATE操作较多时使用事务,如果SELECT操作较多时,使用索引. 结合现在的工作,发现针对操作的优化,下面这篇文章可以翻译出来归档.以下为正文: SQLi

iOS开发中常见的项目文件与MVC结构优化思路解析_IOS

常见的项目文件介绍 一.项目文件结构示意图 二.文件介绍 1.products文件夹:主要用于mac电脑开发的可执行文件,ios开发用不到这个文件 2.frameworks文件夹主要用来放依赖的框架 3.test文件夹是用来做单元测试的 4.常用的文件夹(项目名称文件夹) (1)XXXinfo.plist文件(在该项目中为  01-常见文件-Info.plist) 1)简单说明 是配置文件,该文件对工程做一些运行期的配置,非常重要,不能删除. 在旧版本xcode创建的工程中,这个配置文件的名字就