当前位置: X-MOL 学术ACM Trans. Multimed. Comput. Commun. Appl. › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
Urban Perception: Sensing Cities via a Deep Interactive Multi-task Learning Framework
ACM Transactions on Multimedia Computing, Communications, and Applications ( IF 5.2 ) Pub Date : 2021-04-01 , DOI: 10.1145/3424115
Weili Guan 1 , Zhaozheng Chen 2 , Fuli Feng 3 , Weifeng Liu 4 , Liqiang Nie 5
Affiliation  

Social scientists have shown evidence that visual perceptions of urban attributes, such as safe, wealthy, and beautiful perspectives of the given cities, are highly correlated to the residents’ behaviors and quality of life. Despite their significance, measuring visual perceptions of urban attributes is challenging due to the following facts: (1) Visual perceptions are subjectively contradistinctive rather than absolute. (2) Perception comparisons between image pairs are usually conducted region by region, and highly related to the specific urban attributes. And (3) the urban attributes have both the shared and specific information. To address these problems, in this article, we present a Deep inteRActive Multi-task leArning scheme, DRAMA for short. DRAMA comparatively quantifies the perceptions of urban attributes by jointly integrating the pairwise comparisons, regional interactions, and urban attribute correlations within a unified deep scheme. In DRAMA, each urban attribute is treated as a task, whereby the task-sharing and the task-specific information is fully explored. By conducting extensive experiments over a public large-scale benchmark dataset, it is demonstrated that our proposed DRAMA scheme outperforms several state-of-the-art baselines. Meanwhile, we applied the pairwise comparisons of our DRAMA model to further quantify the urban attributes and hence rank cities with respect to the given urban attributes. As a byproduct, we have released the codes and parameter settings to facilitate other researches.

中文翻译:

城市感知:通过深度交互式多任务学习框架感知城市

社会科学家已经证明,对城市属性的视觉感知,例如给定城市的安全、富裕和美丽的视角,与居民的行为和生活质量高度相关。尽管具有重要意义,但由于以下事实,测量城市属性的视觉感知具有挑战性:(1)视觉感知在主观上是矛盾的,而不是绝对的。(2)图像对之间的感知比较通常是按区域进行的,并且与特定的城市属性高度相关。(3)城市属性既有共享信息又有特定信息。为了解决这些问题,在本文中,我们提出了一种深度交互多任务学习方案,简称 DRAMA。DRAMA 通过将成对比较、区域相互作用和城市属性相关性联合整合到一个统一的深度方案中,相对量化了城市属性的感知。在戏剧中,每个城市属性都被视为一项任务,从而充分挖掘任务共享和任务特定信息。通过对公共大规模基准数据集进行广泛的实验,证明我们提出的 DRAMA 方案优于几个最先进的基线。同时,我们应用我们的 DRAMA 模型的成对比较来进一步量化城市属性,从而根据给定的城市属性对城市进行排名。作为副产品,我们发布了代码和参数设置以方便其他研究。和统一的深度方案中的城市属性相关性。在戏剧中,每个城市属性都被视为一项任务,从而充分挖掘任务共享和任务特定信息。通过对公共大规模基准数据集进行广泛的实验,证明我们提出的 DRAMA 方案优于几个最先进的基线。同时,我们应用我们的 DRAMA 模型的成对比较来进一步量化城市属性,从而根据给定的城市属性对城市进行排名。作为副产品,我们发布了代码和参数设置以方便其他研究。和统一的深度方案中的城市属性相关性。在戏剧中,每个城市属性都被视为一项任务,从而充分挖掘任务共享和任务特定信息。通过对公共大规模基准数据集进行广泛的实验,证明我们提出的 DRAMA 方案优于几个最先进的基线。同时,我们应用我们的 DRAMA 模型的成对比较来进一步量化城市属性,从而根据给定的城市属性对城市进行排名。作为副产品,我们发布了代码和参数设置以方便其他研究。通过对公共大规模基准数据集进行广泛的实验,证明我们提出的 DRAMA 方案优于几个最先进的基线。同时,我们应用我们的 DRAMA 模型的成对比较来进一步量化城市属性,从而根据给定的城市属性对城市进行排名。作为副产品,我们发布了代码和参数设置以方便其他研究。通过对公共大规模基准数据集进行广泛的实验,证明我们提出的 DRAMA 方案优于几个最先进的基线。同时,我们应用我们的 DRAMA 模型的成对比较来进一步量化城市属性,从而根据给定的城市属性对城市进行排名。作为副产品,我们发布了代码和参数设置以方便其他研究。
更新日期:2021-04-01
down
wechat
bug