研究概述了为图像恢复个性化引导扩散模型的方法。Dual-Pivot Tuning技术包括两个步骤:基于文本的微调，将身份特定信息嵌入扩散先验中，以及模型中心的枢轴，将引导图像编码器与个性化先验协调一致。文本到图像扩散模型的个性化运算符被定义为通过枢轴微调模型以创建定制版本。该技术包括上下文文本枢轴，注入身份信息，然后是基于模型的枢轴，利用通用恢复在实现高保真度恢复的图像之前。
通过Dual-Pivot Tuning实现的个性化恢复技术在恢复图像中实现了高身份保真度和自然外观。实验证明，与盲目和少数样本的面部图像恢复的各种最先进替代方法相比，定制模型在个体身份方面表现更好，并且在一般图像质量方面优于通用先验。该方法对不同类型的降解是不可知的，并在保持身份的同时提供一致的恢复。
2. 斯坦福研究人员利用维基百科数据训练大模型WikiChat，成功减轻了幻觉问题，并在事实准确性和对话性方面超过了其他模型。
就目前而言，React Agent生成的代码还不够生产就绪，需要在合并到现有代码库之前进行大量调整。但总的来说，它提高了我的生产力。
1、清华、浙大等中国顶尖学府提供了性能优异的GPT-4V开源替代方案。