[10.5]VR视频透视服务器V1.4.2版（所有功能都已支持可拖动进度条的虚拟文件播放）

defalt456 · 发表于 2026-7-28 10:21:32

大佬，再推荐一个加速技术torch.compile，可与tensorrt配合使用加速，并且兼容oonx模型，在好多开源的实时2转3软件中例如Desktop2Stereo经常搭配使用，几乎可以做到0延迟的效果。另外sam3.1 onnx已经有人发布了，我在comfyui里使用对比起来sam3.1精度和速度确实提高了不少，这是作者的地址，https://modelscope.cn/profile/xiaoxiong233

defalt456 · 发表于 2026-7-28 10:33:20

zelefans 发表于 2026-7-21 14:33
小日子的片子MP4里不包含VR相关的头信息让播放器自动识别，所以只能用这种方式，我也烦透了每次片子还要 ...

大佬提个想法，要是dlna能像emby一样显示文件刮削封面会好很多，包括找文件上可以取代全部视频，因为视频太多肯定会卡，而且加载时间也很长，skybox的emby界面不知道是不是通过dlna实现的

zelefans · 发表于 2026-7-28 10:48:43

defalt456 发表于 2026-7-28 10:21
大佬，再推荐一个加速技术torch.compile，可与tensorrt配合使用加速，并且兼容oonx模型，在好多开源的实时2 ...

1、torch.compile是PyTorch的东西，我项目里没有用pytorch，下个版本有考虑还没确定。可以用tensorrt作为torch.compile的可选的backend后端，但并不可能能比单独用tensorrt更快。现在我当前项目中最大的FPS瓶颈是本身8K视频文件的处理，那个是硬门槛。模型用TensorRT加速后几乎到极限了。
2、SAM3.1的ONNX的确之前在huggingface没见到，但理论上只是比3.0增加了多个对象判断,而且是针对视频对象的跟踪的。对于单个图像的判断很有限的提升。ONNX不可能包括视频跟踪部分，而在我们当前项目中只能用ONNX，用SAM3只是单个图像判断。所以用3.1和3.0差别不大。

我大版本1.x -> 2.x的规划中，有考虑加上我VR视频工具箱CUDA版默认用的Pytorch，这样模型的选择可以多点。要么可以直接上SAM3.1原生实现多目标跟踪，要么可以尝试一些更有趣的视频相关的。现在手上压着一个改良一些的1.3版本，更多的在等新的实时去马赛克模型，那个验证了之后在从头训练一个更适合VR的版本，估计要一个月。我是计划和去马赛克功能一起发布2.0版本

defalt456 · 发表于 2026-7-28 22:40:50

defalt456 发表于 2026-7-28 10:33
大佬提个想法，要是dlna能像emby一样显示文件刮削封面会好很多，包括找文件上可以取代全部视频，因为视频 ...

不是刮削，只是文件夹显示封面，不过想想还是算了，感觉意义不大

gaofi · 发表于 2026-7-28 23:43:03

感谢大佬，我有个问题是用4xvr实时播放，但播了3-4分钟就重复片段，不会播下一个片段，是我播放设置问题还是实时模式只能手动播下一段？

zelefans · 发表于 2026-7-29 11:21:37

本帖最后由 zelefans 于 2026-7-29 11:32 编辑

gaofi 发表于 2026-7-28 23:43
感谢大佬，我有个问题是用4xvr实时播放，但播了3-4分钟就重复片段，不会播下一个片段，是我播放设置问题还 ...

设计上是会持续播放下去的，因为我用直播流(只能用直播流，因为是实时算的，不知道每一段文件多大），所以只是从某个点开始播放，并不是人为切块播放每一段。直播流是不知道会播放多久的，理论上不应该。除非有一种可能，你碰到了调进或拖动之类的操作，导致播放器找不到播放索引就这个直播流开头放了。

defalt456 · 发表于 2026-8-1 02:04:49

大佬，提个新的功能上的想法，现在av美颜很多，再加上之前见到过vr主播的美颜效果挺不错的，就想到有没有办法搞vr实时美颜来改善女主颜值，目前搜到两个播放器，SakuraAIPlayer和MottoMottoKawaii发现可以实时美颜，但可惜的都没有提到自己使用的美颜模型，问了deepseek也只给了三个方案FaceFusion，UniFace，InsightFace，也没别的多余信息

zelefans · 发表于 2026-8-1 10:42:59

defalt456 发表于 2026-8-1 02:04
大佬，提个新的功能上的想法，现在av美颜很多，再加上之前见到过vr主播的美颜效果挺不错的，就想到有没有办 ...

美颜免费用的似乎功能远不如美颜软件。
facefusion有点意思，但是用来换脸的，我试试看能不能做成实时的....离线功能法律风险太太高了

defalt456 · 发表于 2026-8-1 17:47:36

zelefans 发表于 2026-8-1 10:42
美颜免费用的似乎功能远不如美颜软件。
facefusion有点意思，但是用来换脸的，我试试看能不能做成实时的. ...

好像通过直播软件的效果是最好的，不过看看2d还可以，vr没有试过应该不行。美颜感觉在vr最重要的其实就是美白磨皮，特别是部分厂商还有调色问题

zelefans · 发表于 2026-8-1 21:21:02

本帖最后由 zelefans 于 2026-8-1 21:47 编辑

defalt456 发表于 2026-8-1 17:47
好像通过直播软件的效果是最好的，不过看看2d还可以，vr没有试过应该不行。美颜感觉在vr最重要的其实就是 ...

离线的做好了，抽出了FaceFusion中美颜的模型，用的是但第一个版本效率很差只有5FPS，看起来还行。接下去优化看看能否做成实时的，还要解决VR畸变的问题，否则瘦脸直接瘦没了

微信图片_2026-08-01_214530_171.png