12月
插曲:研究了一下……全息?
插曲:研究了一下……全息?
(基于POV技术的伪全息,手机拍不出效果,要人眼看)
经常被学校老师约谈,都是希望参加各种比赛项目,要不是去做AR就是去做VR,实际上我对AR、VR都不是很感兴趣,更喜欢全息技术一点,感觉这才是最贴近未来的方向,一旦技术成熟并普及化,AR、VR哪儿还有市场
正好之前有个方案,就直接在QQ上找团队老师,讲了一下我构思的人机交互式裸眼POV全息系统课题
- 效果:出现一个3D全息虚拟角色,会面朝用户,并能进行对话和交流
- 使用场景:商业展示、商业宣传、智能答疑
- 硬件:全息投影POV设备+信息处理终端(树莓派)+外接模块(广角摄像头、扬声器、麦克风、网卡、电源)
- 软件:数据传输WIfi/串口通信,UnityLWRP的渲染管线,次表面反射渲染皮肤,机器人ai接口(联网),语音转文字(讯飞),文字转语音(微软),语音转口型,情感识别(词法分析、语义分析器),口型表情渲染,动画渲染
老师听后也蛮感兴趣的,一边说硬件可以全报销,一边帮我联系身边的学长学姐们,希望能提供一些建议什么的。不过我琢磨着软件上问题倒是不大,关键还是硬件方面我太不熟悉了,这样搞下去心里也没有底……学长学姐也没帮上太多忙,不是戏谑地说这个东西太大了,就是对这方面一概不知…
好吧,那我还是先买设备吧。在逛遍淘宝后,基本上所有的店家都是不支持你二次开发的,他们不提供任何一个接口,我大概也猜到了,不过这构不成难题,不给我接口,那我就抓包吧,然后逆向分析,总能得出你的通信协议规则吧?想了一下,只要能实时显示,到时候再写个专门的适配程序就OK,只是不确定性能跟得上不…客服大抵也不懂技术,问一些参数方面的内容也是回答技术没给。想了想,先买个试试,不行抓紧时间退了。
设备到了之后,显示效果还蛮好的,就算是白天或者开灯,依旧能看清楚。但是略有失望的地方是,店家显然隐藏了太多不利的信息,比如说,所有格式都得转成专门的dat文件,一个普通的mp4文件,转码后体积大了不止10倍。用于操作设备的软件也是满满的bug,逆向之后,原本想优化一下他的转码算法,结果发现,所有内容都写在了一个类里,看到后面就不想看了……
“总之,还是解决问题吧”,我想,我开始了一系列的测试,但是发现网卡速率只有1MB/s,可是我流媒体24帧就算压缩后再转码体积每秒也有5MB,这可咋整?店家说的可以连接电脑来传输,开始我以为是能进行串口通讯,结果才知道,是把内存卡拔下来,插电脑上,把文件拷进去,再插回机器(好想打客服)。
“既然问题出现在硬件上,那就从硬件上解决吧”,我摇摇头,这可太难了。客服那边一点信息也不愿意多透露,我从他们给的说明书上,大概发现了一些线索,因为说明书截图的桌面上有一个“STM32H7单片机开发教程.pdf”,于是去找到了一些STM32H7单片机相关的东西,我开始想的是换个网卡,但是后来我感觉这个想法很危险,因为程序是已经烧录进单片机了的,如果换网卡,会不会出问题?我自己对单片机不是很了解,问了一下学校懂的同学,发现他们也不懂……想了下还是不动设备了,就这样退回去吧。
第一步就在硬件上卡死了,我直接放弃了这个课题,老师很惋惜,说要不然帮我再联系一下其他懂这方面的同学?我说算了,免得时间拖太久退不了货了。实际上我想的是其他同学应该解决不了这个问题,除非自己手动做一个这种设备,可惜我们学校应该没有这种人才。
十二月总结
十二月总结
本月并没用太多时间来开发,还在调整山上的场景,怎么摆放,都有种浓浓的廉价感,看起来完全不像一个追求画面的游戏。不过我也在想,这游戏主要还是着重于剧情上,场景真的那么重要吗?我是应该继续做后面的内容?还是把这个场景调整得更完美一些?
另外做了一段有峭壁的山路,对面有一个小的瀑布,然后又开始想,这个场景够真实吗?农村山上哪儿有这玩意儿?
怎么感觉这么丑,像极了CS1.6
目前来看,最大的问题依旧是剧情方面,还得改改改!
之前还在琢磨着要不要等多点内容再更新日志,还是说每个月更新一次显得“这个开发者还活着”……
暂无关于此日志的评论。