Unity-Hololens-Vuforia开发(图片识别和模型识别)

Posted LOYUKI

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Unity-Hololens-Vuforia开发(图片识别和模型识别)相关的知识,希望对你有一定的参考价值。

Unity-Hololens-Vuforia开发(图片识别和模型识别)

有些东西纠结了许久,所以来记录一下

文章目录


环境

Hololens2
Unity 2020.3.16f1c1 (64-bit)
Visio Studio 2019 16.11.13
Vuforia 10.6.3


一、环境要求

MRTK正常运行要求Unity版本至少升级到2019.4,要求VS至少高于2019.16.8版本,除此以外注意一下Windows10 SDK的版本是否是最新的或者是适用的。
笔者这里的版本使用的是Windows 10 10.0.19041.0
要想部署到Hololens中,还需要额外确保Unity中安装了Windows Build Support(IL2CPP)和Universal Windows Platform Build Support

二、步骤

1.创建新的Unity工程

在File->Build Setting中切换平台至Universal Windows Platform,配置如下:

记得把Target Device改成HoloLens,Architecture应该是指从Unity导出之后是什么版本,这里选择x64或者ARM64应该都可以

2.导入Vuforia

在Vuforia官网下载SDK:Vuforia
版本如前述Vuforia 10.6.3
下载下来后是一个.unitypackage包,拖进Unity项目中,等待加载完毕。
如果弹出提示要求升级工程,点击“Update”即可。
到此即可在Hierarchy右键找到Vuforia引擎的选项了

添加ARCamera,在Hierarchy下删除原有MainCamera,在ARCamera的Inspector下选择Open Vuforia Engine configuration,添加License Key

回到Vuforia官网,在Develop→License Manager下申请新的License Key,Plan Type选择Basic即可。
复制Linces Key粘贴到ARCamera中

3.导入MRTK

下载MRTK管理工具,Mixed Reality Feature Tool:MRTK
管理工具下载好后打开如下:

点start选择要导入工程目录,目录是需要包含asset、package等的总目录
勾选如下:


Import加入工程,Approve确定,此时Unity中会自己读条导入Package

4.Player Setting设置

在File→Build Settings→Player Settings下,首先查看XR Plugin Management,如果还没有下载,就点“Install XR Plugin Management”
设置如下:

在player中,Resolution and Presentation设置如下,取消Run in Background的勾选,Orientation选择 Landscape Left

Other Setting中,设置Api Compatibility Level为.NET 4.x
设置Active Input Handing为Both

Publish Setting中,在Capabilities中勾选如下:
InternetClient
InternetClientServer
WebCam
Microphone
SpatialPerception
在Supported Device Families中勾选:
Holographic,以确保可以在Hololens中运行

为了运行顺利,可以在Quality中调整Levels为最低等级:

5.MRTK工程设置

将MRTK插入场景中,操作如图:

插入后,在Vuforia导入时已经建立的ARCamera会被移动到MixedRealityPlayspace下。(如果没有提前设置ARCamera,这里会是一个普通相机(MainCamera))
此后如果不进行修改,每次运行时,相机ClearFlags都会自动被改回天空盒,因此这里需要设置MRTK,选择MixedReality Toolkit,在Inspector中选择DefaultHoloLens2ConfigurationProfile,如图:

这时再运行相机,就能实时看到相机拍摄的画面了。

6.导入Vuforia图片识别、模型识别数据包

此处在Vuforia教程中较多,不多赘述,如果有不清楚的可以在评论或者私信提问。

7.测试

在Hierachy中右键建立Vuforia Image/Model Target,选择合适DataBase,添加识别后要显示的3D Object,先使用USB相机测试,当在USB相机下能成功识别后,再将项目build导出到hololens中。

8.Hololens打包

Unity中项目设置完成后,在Build Setting中点击Build选择合适文件夹导出即可。
在所建文件夹下,打开.sln文件。
在VS中设置为Release ARM64

Hololen与电脑的连接可以选择通过USB的有线连接和无线连接两种形式。
这里选择无线连接。在连接前需要保证Hololens和电脑处于同一局域网下,在Hololens网络中找到Hololens的ip地址。
在VS项目属性页中,将ip地址写入计算机名

第一次连接时候可能会要求输入hololens的pin码,在hololens系统设置中查看即可。也有可能会要求输入hololens用户名和密码,最好记得用户名和密码,如果忘了好像还挺麻烦的,可能要重装hololens系统什么的。
都设置好之后点击远程计算机部署,等它部署完成就能在hololense中运行查看啦!

说在最后

可能有很多不足没有顾及到的地方,仅仅是我在工程部署过程中遇到的一些问题和需要注意的重点。仍在不断努力中,共勉。

原生开发H5开发混合移动开发的优缺点

一、原生开发(Native App开发)

原生开发,是在Android、IOS等移动平台上利用官方提供的开发语言、开发类库、开发工具进行App开发。比如Android是利用Java、Eclipse、Android Studio;IOS是利用Objective-C和Xcode进行开发。

通俗点来讲,原生开发就像盖房子一样,先打地基然后浇地梁、房屋结构、一砖一瓦、钢筋水泥、电路走向等,都是经过精心的设计。

原生APP也一样:通过代码从每个页面、每个功能、每个效果、每个逻辑、每个步骤全部用代码写出来,一层层,一段段全用代码写出来。

优点:

1、可访问手机所有功能(如GPS、摄像头等),可实现功能最齐全;

2、运行速度快、性能高,绝佳的用户体验;

3、支持大量图形和动画,不卡顿,反应快;

4、兼容性高,每个代码都经过程序员精心设计,一般不会出现闪退的情况,还能防止病毒和漏洞的出现;

5、比较快捷地使用设备端提供的接口,处理速度上有优势。

缺点:

1、开发时间长,快则3个月左右完成,慢则五个月左右;

2、制作费用高昂,成本较高;

3、可移植性比较差,一款原生的App,Android和IOS都要各自开发,同样的逻辑、界面要写两套;

4、内容限制(App Store限制);

5、获得新版本时需重新下载应用更新。

二、H5开发(Web APP开发)

HTML5应用开发,是利用Web技术进行的App开发。Web技术本身需要浏览器的支持才能进行展示和用户交互,因此主要用到的技术是HTML5、Java、CSS等。

优点:

1、支持设备范围广,可以跨平台,编写的代码可以同时在Android、IOS、Windows上运行;

2、开发成本低、周期短;

3、无内容限制;

4、适合展示有大段文字(如新闻、攻略等),且格式比较丰富(如加粗,字体多样)的页面;

5、用户可以直接使用最新版本(自动更新,不需用户手动更新)。

缺点:

1、由于Web技术本身的限制,H5移动应用不能直接访问设备硬件和离线存储,所以在体验和性能上有很大的局限性;

2、对联网要求高,离线不能做任何操作;

3、功能有限;

4、APP反应速度慢,页面切换流畅性较差;

5、图片和动画支持性不高;

6、用户体验感较差;

7、无法调用手机硬件(摄像头、麦克风等)。

 

三、混合开发(Hybrid App开发)

混合开发(原生+H5),是指在开发一款App产品的时候,为了提高效率、节省成本而利用原生与H5的开发技术的混合应用。通俗点来说,这就是网页的模式,通常由“HTML5云网站+APP应用客户端”两部份构成。

混合开发是一种取长补短的开发模式,原生代码部分利用WebView插件或者其它框架为H5提供容器,程序主要的业务实现、界面展示都是利用与H5相关的Web技术进行实现的。

比如京东、淘宝、今日头条等APP都是利用混合开发模式而成的。

优点:

1、开发效率高,节约时间。同一套代码Android和IOS基本上都可使用;

2、更新和部署比较方便,每次升级版本只需要在服务器端升级即可,不再需要上传到App Store进行审核;

3、代码维护方便、版本更新快,节省产品成本;

4、比web版实现功能多;

5、可离线运行。

缺点:

1、功能/界面无法自定:所有内容都是固定的,不能换界面或增加功能;

2、加载缓慢/网络要求高:混合APP数据需要全部从服务器调取,每个页面都需要重新下载,因此打开速度慢,网络占用高,缓冲时间长,容易让用户反感;

3、安全性比较低:代码都是以前的老代码,不能很好地兼容最新手机系统,且安全性较低,网络发展这么快,病毒这么多,如果不实时更新,定期检查,容易产生漏洞,造成直接经济损失;

以上是关于Unity-Hololens-Vuforia开发(图片识别和模型识别)的主要内容,如果未能解决你的问题,请参考以下文章

麦吉丽小程序系统开发

APP原生开发与混合开发是啥意思

.NET开发是啥?需要用到哪些开发语言?

原生开发H5开发混合移动开发的优缺点

软件开发一般学啥?

小程序系统开发