学生のZHANGさんがCGIP2024においてBest Presentation Awardを受賞
学生のZHANG, Tianyuさん(博士後期課程1年、創造社会デザイン研究領域、謝研究室)が2024 2nd International Conference on Computer Graphics and Image Processing (CGIP2024)においてBest Presentation Awardを受賞しました。
CGIP2024は、世界中から第一線の研究者、技術者、科学者が一堂に会し、コンピュータグラフィックスと画像処理の分野における新たな進歩や研究成果を発表する国際会議で、東海大学が主催し、令和6年1月12日~15日にかけて京都大学にて開催されました。同会議はコンピュータグラフィックスと画像処理に関する理論的・実用的なあらゆる側面を網羅した幅広い研究トピックを提供しています。
※参考:CGIP2024
■受賞年月日
令和6年1月14日
■研究題目
Sketch-Guided Text-to-Image Generation with Spatial Control
■研究者
Tianyu Zhang, Haoran Xie
■受賞対象となった研究の内容
Recent text-to-image generation models can produce high-quality images from textual prompts. However, it isn't easy to correctly interpret instructions specifying the complex images with multiple objects using only texts. To solve this issue, we propose a sketch-guided spatial control for text-to-image diffusion models. In the feature extraction stage of the proposed framework, sketch inputs are segmented into individual objects using the image segmentation approach. The obtained bounding boxes and labels are used as spatial-guided inputs into the attention layers of the diffusion model. The proposed model utilizes a pretrained text-to-image diffusion model as the image generator for the image generation stage. We assess the proposed method through quantitative and qualitative evaluations, demonstrating its versatility in spatial control based on user sketches.
■受賞にあたって一言
I am deeply honored to receive this Best Presentation Award. I would like to express my sincere gratitude to Associate Professor Xie Haoran for his invaluable guidance and to all the members of our lab for their constant encouragement. This award inspires me to take on higher challenges in future research. I will cherish this honor and strive relentlessly to contribute more to research.
令和6年2月2日