1.FSDR学习

第一次读外文文献还是比较吃力&＃xff0c;&＃xff08;好在有谷歌&＃xff0c;有道翻译&＃xff09;但是我还是会拿出我勉强过6级的英语水平去一个字一个字读完它。第一天读论文&＃xff0c;就先总览一下大致内容。
发现&＃xff1a;
图片表格公式非常多&＃xff08;和我的论文比较起来&＃xff09;&＃xff1b;排版像杂志&＃xff08;对半分&＃xff09;&＃xff1b;参考文献占了好多篇幅&＃xff08;窃喜&＃xff09;。
抱着一颗敬畏的心&＃xff08;头大&＃xff09;&＃xff0c;开始我的科研论文阅读之旅。
------------------------------------以上是废话---------------------------------------------------

一.标题解读

FSDR: Frequency Space Domain Randomization for Domain Generalization
用于域泛化的频域域随机化

此论文发表在CVPR2021&＃xff0c;它的归类为域泛化。
域泛化问题感觉是一个工业上很常见的问题。数据可能来自多个不同的数据源。或者说你的训练集是高清图像进行训练&＃xff0c;实际的测试集却是较为模糊的图片。很多情况会导致训练域与实际的测试域不匹配的问题。

Frequency Space&＃xff1a;频率空间
Domain&＃xff1a;领域
Randomization&＃xff1a;随机化
Domain Generalization&＃xff1a;领域泛化

近些年关于频域与深度学习结合的文章是比较火热的&＃xff0c;

二.作者学校简介

Jiaxing Huang, Dayan Guan, Aoran Xiao, Shijian Lu
最后一个是新加坡南洋理工大学计算机工程学院Shijian Lu教授&＃xff0c;其他的作者应该是博士。&＃xff08;网上相关资料比较少&＃xff09;

通常论文作者打星号代表的是通讯作者&＃xff0c;通讯作者还可以以致谢的形式标注&＃xff0c;通讯作者是论文的总负责人&＃xff0c;文章的成果是通讯作者的&＃xff0c;说明思路是通讯作者的&＃xff0c;而不是第一作者。
通讯作者一般承担课题的经费、设计、文章的书写等&＃xff0c;他也是文章和研究材料的联系人。最重要的是&＃xff0c;他担负着文章可靠性的责任。通讯作者的好处是能和外界建立更广泛的联系。

再介绍一下南阳理工大学&＃xff1a;

南洋理工大学&＃xff08;Nanyang Technological University&＃xff0c;简称&＃xff1a;NTU&＃xff09;&＃xff0c;是新加坡的一所研究型大学&＃xff0c;2020 QS世界大学排名第11名、2020、2021经济学人工商管理硕士&＃xff08;The Economist Global Full time MBA Ranking&＃xff09;亚洲第1名&＃xff1b;2021 US NEWS能源与燃料、纳米科学、材料科学学科世界排名第1。
计算机学院&＃xff1a;更偏向于那些喜欢开发、设计和实施人工智能系统的学生&＃xff0c;同时培养学生对人工智能在项目管理和决策方面的深刻理解。。核心课程以基础为重点&＃xff0c;侧重于人工智能知识的基础&＃xff0c;如机器学习和深度学习&＃xff0c;同时还有广泛的不同领域的选修课程&＃xff0c;如图像、视频、文本和物联网数据&＃xff0c;可以加深学生对AI理解和知识的拓展。

三.摘要解读

提取信息&＃xff1a;

将源图像转移到空间空间中的不同风格以学习领域无关的特征的领域随机化已经被广泛研究。

说明自己研究的领域之前有人涉及&＃xff0c;是一个热门的研究领域。

然而&＃xff0c;大多数现有的随机化使用通常缺乏控制的GANs&＃xff0c;甚至不希望地改变图像的语义结构。

解释GANs:(Generative Adversarial Nets)生成对抗网络 – GANs 是最近2年很热门的一种无监督算法&＃xff0c;他能生成出非常逼真的照片&＃xff0c;图像甚至视频。我们手机里的照片处理软件中就会使用到它。
指出之前的研究有不足之处&＃xff0c;引出自己的研究。&＃xff08;论文基本写作套路&＃xff09;

受将空间图像转换成多个频率分量的JPEG思想的启发,我们提出了频率空间域随机化(FSDR)&＃xff0c;它通过保持域不变频率分量&＃xff08;DIFs&＃xff09;和随机域可变频率分量(DVFs)来随机化频率空间中的图像。

核心思想&＃xff1a;保持域不变频率分量&＃xff08;DIFs&＃xff09;和随机域可变频率分量(DVFs)来随机化频率空间中的图像。
DIFs&＃xff1a;&＃xff08;Distributed Inter-frame Spacing&＃xff09;分布式帧间间隙&＃xff0c;在CSMA/CA中&＃xff0c;媒体空闲&＃xff0c;站点就在等待一个设定的时间即DIFS。
DVFs&＃xff1a;&＃xff08;Dynamic voltage and frequency scaling&＃xff09;动态电压频率调整。

FSDR有两个独特的特点:
1)它将图像分解为DIFs和DVFs&＃xff0c;允许对它们进行显式访问和操作&＃xff0c;以及更可控的随机化&＃xff1b;
2)对图像的语义结构和领域不变特征的影响最小。

我们统计检验了FCs的域方差和不变性&＃xff0c;并设计了一个通过迭代学习动态识别和融合DIFs和DVFs的网络。

迭代学习&＃xff1a;iterative learning

在多个领域泛化分割任务上的广泛实验表明&＃xff0c;FSDR实现了优越的分割&＃xff0c;并且其性能甚至与在训练中访问目标数据的领域自适应方法相当。

图一&＃xff1a;我们提出的频率-空间域随机化&＃xff08;FSDR&＃xff09;通过离散余弦变换&＃xff08;DCT&＃xff09;将图像转换为多个频率分量&＃xff08;FCs&＃xff09;&＃xff0c;并识别域可变FCs&＃xff08;DVF&＃xff09;和域不变FCs&＃xff08;DIF&＃xff09;。这种显式隔离允许它随机化DVF&＃xff0c;同时在训练中保持DIF不变&＃xff0c;这通常会导致更具普遍性的模型。传统的空间域随机化&＃xff08;SSDR&＃xff09;在不分离和保留域不变特征的情况下将图像作为一个整体进行随机化&＃xff0c;从而产生次优分割。绿色、蓝色和红色框分别表示DIF、DVF和随机化DVF

研究结果的图&＃xff0c;用虚线框分类显得清晰很有条理。这是一个图像处理的过程。读完摘要还是比较懵&＃xff0c;专业术语过多&＃xff0c;很多都是我不知道的领域。接下来我需要查阅更多资料&＃xff0c;对于术语缩写和陌生的专业术语需要进一步了解才能继续下一步的阅读。