QY
Qinghao Yu
Author with expertise in Automatic Video Summarization and Analysis
Achievements
This user has not unlocked any achievements yet.
Key Stats
Upvotes received:
0
Publications:
1
(0% Open Access)
Cited by:
1
h-index:
2
/
i10-index:
1
Reputation
Biology
< 1%
Chemistry
< 1%
Economics
< 1%
Show more
How is this calculated?
Publications
0

Video Summarization Using U-shaped Non-local Network

Shasha Zang et al.Jun 26, 2024
Article Video Summarization Using U-shaped Non-local Network Shasha Zang 1, Haodong Jin 1,*, Qinghao Yu 1, Sunjie Zhang 1, and Hui Yu 2 1 School of Control Engineering, University of Shanghai for Science and Technology, Shanghai, China 2 School of Creative Technologies, University of Portsmouth, Portsmouth, United Kingdom * Correspondence: hui.yu@port.ac.uk, 231260086@st.usst.edu.cn Received: 22 November 2023 Accepted: 5 March 2024 Published: 26 June 2024 Abstract: Video summarization (VS) refers to extraction of key clips with important information from long videos to compose the short videos. The video summaries are derived by capturing a variable range of time dependencies between video frames. A large body of works on VS have been proposed in recent years, but how to effectively select the key frames is still a changing issue. To this end, this paper presents a novel U-shaped non-local network for evaluating the probability of each frame selected as a summary from the original video. We exploit a reinforcement learning framework to enable unsupervised summarization of videos. Frames with high probability scores are included into a generated summary. Furthermore, a reward function is defined that encourages the network to select more representative and diverse video frames. Experiments conducted on two benchmark datasets with standard, enhanced and transmission settings demonstrate that the proposed approach outperforms the state-of-the-art unsupervised methods.