Meta数字人2代来了！告别VR头显，iPhone一扫就行
Meta的逼真数字人2.0再次进化，现在可以用iPhone生成了，只要拿出手机扫一扫！早在2019年3月，Facebook就在活动上展示了第一代数字人形象（CodecAvatar1.0）。第一代数字人是利用多重神经网络，用132个摄像头的专用捕获装置生成的。一旦生成，在VR头显设备上的5个摄像头。每只眼部提供两个内部视角，脸部以下提供三个外部视角。就像下面这样。从那时开始，Facebook一直在不断改进这些虚拟形象的逼真度，比如只需麦克风和眼球追踪技术，就可以获得更逼真的形象。最终在2
Meta的逼真数字人2.0再次进化，现在可以用iPhone生成了，只要拿出手机扫一扫！
早在2019年3月，Facebook就在活动上展示了第一代数字人形象（Codec Avatar 1.0）。第一代数字人是利用多重神经网络，用 132 个摄像头的专用捕获装置生成的。
一旦生成，在VR头显设备上的5个摄像头。每只眼部提供两个内部视角，脸部以下提供三个外部视角。 就像下面这样。
从那时开始，Facebook一直在不断改进这些虚拟形象的逼真度，比如只需麦克风和眼球追踪技术，就可以获得更逼真的形象。最终在2020年8月进化为Codec Avatar 2.0版。 2.0版比1.0版最大的进步在于，摄像头不再需要扫描跟踪人脸，而是只要跟踪眼球的运动就行了。
新的神经网络将VR头显的眼动追踪数据与麦克风的音频馈送相融合，推断佩戴者可能的面部表情。 将声音模型和眼动模型数据反馈至混合模型，再经过融合模型计算处理，由渲染器输出Avatar形象。
今年5月，团队更进一步宣布，2.0版的Avatar彻底达成了「完全逼真」的效果。 「我想说的是，未来十年的一个重大挑战是，我们是否可以实现与面对面互动无法区分的远程Avatar互动。」该项目负责人之一的 Sheikh 说。
看看上面的对比，a为真人照片，e为最终渲染生成的虚拟人，看起来好像没有怎么吹牛？ 别急，上面这是实验中的比对结果，实际上应用场景下，目前Meta虚拟人的形象是这样的。
即使是最右边「最逼真」的形象，还是卡通形象，这离「完全逼真」怕是还有点远，不过Meta说的是十年，看看演示中的形象，这个目标实现的希望还是不小的。
而且，虚拟人技术的进步，也不仅仅体现在逼真度一个方向，大可不必沿着一条路一直走，Meta也在尝试着其他方向。 比如，摘掉VR头显？ 
以前，生成一个单独的Codec头像需要带一个名为「MUGSY」专门捕捉设备，上面有171个高分辨率摄像头，就是上图这个（密恐退散）。
Meta现在说，不用带这东西了，有个iPhone就行了！ 只要一台带正面深度传感器的智能手机（比如带FaceID功能的iPhone），直接扫一扫（确切地说，是好几十扫），就能生成逼真的虚拟人头像。
首先保持面无表情，扫描一次，然后做出各种不同的表情，最多支持65种不同表情。
Meta称，用手机完成表情扫描，平均大概需要3-4分钟。 当然这少不了算力的支持，最终生成的逼真虚拟人头像，在一台有四个高端GPU的机器上，大概需要6个小时。 当然，如果这个技术用在产品上，这些计算会交给云端GPU，无需用户自己的算力资源。 
那么，为什么之前需要100来个摄像头才能完成的事，现在只需一台手机就可以做到了呢？ 秘诀就是一种叫做Hypernetwork的通用模型。 这是一种神经网络，可以生成另一个神经网络的权值。在上面的例子中，就是生成特定人的Codec Avatar.
研究人员通过扫描255个不同的人脸来训练这个模型，使用的是一种先进的捕捉装置，很像MUGSY，但是只有90个摄像头。
虽说别的研究人员已经展示过用智能手机扫描生成的人像了，而且Meta表示，生成的结果是SOTA级别的。
然而，现在的系统还是不能应付眼镜和长头发。并且只能到头，身体的其它部位还不行。
当然了，Meta在达到这种保真度之前，还有很长的路要走。 现在Meta的人像都有种卡通风格。而那种逼真的感觉随着时间的推移慢慢降低了。 现在这种形象可能更适合用Quest 2玩儿Horizon Worlds的群体。
然而，Codec Avatar可能最终只会是一个单独的选项，而不是现在这种卡通风格的升级。 Meta的CEO扎克伯格是这么描述未来的：你可能会用一个充满表现主义的人像玩儿平常的游戏，而用一个更逼真的人像来参加工作会议什么的。
今年4月，负责Codec Avatar团队的Yaser Sheikh表示，「现在来预测Codec Avatar还有多久能投入使用是不太可能的。」 不过，他明确表示，他认为项目是有很大进步的。
Postman是一套面向API全生命周期的开发与测试平台，可在Mac上发送和调试多种协议请求，管理集合、环境及认证信息，并完成脚本测试、模拟服务、监控、文档发布和团队协作。它适合开发、测试及运维人员使用，提供个人免费方案。
Docker Desktop 是 Docker 官方为 Mac 提供的容器开发环境，集成 Docker Engine、命令行工具、Compose、Build、Kubernetes 与图形化管理界面。
Android Studio 是 Google 面向安卓应用开发提供的官方集成开发环境，基于 IntelliJ IDEA 构建。它整合智能代码编辑、Gradle 构建、界面预览、设备模拟、性能分析、调试测试及 APK 分析等工具。
Xcode 是苹果面向 Mac 提供的官方集成开发环境，将代码编辑、项目构建、SwiftUI 实时预览、设备模拟、自动化测试、断点调试、性能分析和应用分发整合在同一套工作流中，适合开发与维护 iPhone、iPad、Mac、Apple Wa
JetBrains WebStorm 是面向 JavaScript、TypeScript 和现代 Web 技术的专业集成开发环境，可智能理解项目结构，提供代码补全、重构、错误检查、运行调试、测试及 Git 工具。
PhpStorm 是 JetBrains 推出的专业 PHP 集成开发环境，可在 Mac 上完成代码编写、智能检查、重构、调试、测试和数据库管理。它支持主流 PHP 框架、Composer、Git、Docker 与远程解释器。
JetBrains PyCharm 是面向 Python 开发者的集成开发环境，提供智能补全、代码检查、重构、调试、测试、版本控制及虚拟环境管理功能。Mac 版兼容 Intel 与 Apple 芯片，核心功能可免费使用。
IntelliJ IDEA 是 JetBrains 推出的专业集成开发环境，重点服务于 Java、Kotlin 与 JVM 项目开发。软件集成代码补全、静态检查、重构、调试、测试、版本控制及构建工具，并可借助插件扩展语言和框架支持。
Visual Studio Code 是微软提供的免费代码编辑器，支持 macOS，并为 Intel 与 Apple 芯片 Mac 提供适配版本。软件集代码编辑、调试、Git 源代码管理、集成终端和扩展市场于一体。
REAPER是Cockos开发的数字音频工作站，提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片，支持AU、VST、VST3、CLAP等插件格式，并提供高度可定制的工作流程。
Adobe Audition 是面向播客、影视后期、音乐制作及内容创作者的专业音频工作站，提供波形精修、多轨录制与混音、频谱编辑、降噪修复、响度匹配和效果处理工具，并可与 Adobe Premiere 协同完成视频声音制作。
Pro Tools 是 Avid 推出的专业数字音频工作站，覆盖多轨录音、无损剪辑、MIDI 编曲、插件处理、自动化混音及声音与画面同步等工作。它拥有 Intro、Artist、Studio 和 Ultimate 等方案。
Postman 是面向 API 全生命周期的开发与协作平台。Windows 桌面版可用于构建和发送 HTTP、GraphQL、gRPC、WebSocket、MQTT 等请求，并提供环境变量、集合、脚本测试、模拟服务、监控、文档及团队工作区等
Docker Desktop 为 Windows 开发者提供集成式容器环境，内置 Docker Engine、命令行工具、Compose、Build 与 Kubernetes 等组件，可在本机完成镜像构建、容器运行、日志查看和资源管理。
Android Studio 是 Google 面向 Android 应用开发提供的官方集成开发环境，以 IntelliJ IDEA 为基础，集成智能代码编辑、Gradle 构建、设备模拟、界面预览、调试测试及性能分析工具，
WebStorm 是 JetBrains 面向 JavaScript、TypeScript 和现代 Web 技术打造的集成开发环境。它提供项目级代码分析、智能补全、安全重构、导航搜索，并集成调试、测试、终端、Git 与常用前端工具，
PhpStorm 是 JetBrains 面向 PHP 与现代 Web 开发打造的专业集成开发环境，提供代码补全、静态检查、重构、调试、测试、数据库、版本控制及前端语言支持。Windows 用户可直接下载安装程序，
PyCharm 是 JetBrains 推出的 Python 集成开发环境，提供智能代码补全、错误检查、重构、调试、测试、Git、终端及 Jupyter Notebook 支持。统一版安装后可体验 30 天 Pro 功能，
JetBrains IntelliJ IDEA 是以 Java、Kotlin 和 JVM 项目为核心的专业集成开发环境，提供智能补全、代码检查、安全重构、调试、测试、版本控制及构建工具集成。统一发行版的核心功能可免费用于商业和非商业项目，
Visual Studio Code 是微软推出的免费代码编辑器，Windows 版集成智能补全、代码导航、调试、终端和版本控制，并可通过扩展添加语言、格式化及远程开发能力。它启动较快、配置灵活，
REAPER 是 Cockos 推出的数字音频工作站，适用于录音、MIDI 编曲、音频编辑、混音、母带制作及声音设计。软件安装包小巧，支持多轨录制、灵活路由、自动化、第三方插件和脚本扩展，并提供完整功能的 60 天免费评估期。
Adobe Audition 是面向播客、影视后期、广播与音乐制作的专业音频工作站，提供波形编辑、多轨混音、频谱分析、录音、降噪修复和效果处理等功能。Windows 版通过 Adobe Creative Cloud 安装和管理，
Pro Tools 是 Avid 推出的专业数字音频工作站，提供多轨录音、音频剪辑、MIDI编曲、插件处理、自动化混音及影视声音制作能力。它适合音乐人、录音师、制作人和音频后期团队使用，并提供免费入门版、订阅方案及永久授权选择。
Cubase 是 Steinberg 推出的数字音频工作站，提供 MIDI 编曲、多轨录音、音频编辑、虚拟乐器、效果处理、自动化、混音和母带输出工具。其 Pro、Artist 与 Elements 版本面向不同预算和制作规模，