10.2.4 跨媒体判别限定

10.2.4 跨媒体判别限定

基于生成对抗学习的跨媒体社交网络搜索算法(CMSAL)的跨媒体判别限定是实现跨媒体对抗学习的关键,它旨在区分关于同一话题社交网络内容重构特征的媒体形式,并结合媒体内和媒体间判别限定对跨媒体表示特征生成返回对抗信息来促使其重构符合限定的特征,从而实现准确的跨媒体搜索。跨媒体判别限定通过判别损失进行运算,计算方法如式(10-5)所示:

其中,mi是One-Hot形式的模态标签。函数是判别器映射函数,可将所生成的不同媒体形式的社交网络内容表示重构特征在参数矩阵θp下映射到媒体形式判别空间。区别于媒体内和媒体间判别限定,跨媒体判别限定间接促进了跨媒体表示特征生成过程。跨媒体表示重构特征生成通过参数优化和媒体内和媒体间判别限定以及跨媒体判别限定进行对抗学习,来输出更合适的结果以进行相应的跨媒体内容搜索。