حذف نویز در انتقال محتوای تصویر به تصویر با استفاده از شبکه مولدتخاصمی مبتنی بر تبدیل موجک

یکی از چالش برانگیزترین موضوعات در هوش مصنوعی انتقال محتوای تصویر به تصویر است، که اخیراً با استفاده از شبکه‌های مولدتخاصمی پیشرفت چشمگیری نموده است. بااین‌حال، روش‌های موجود در انتقال محتوای منبع نویزی به دامنه هدف به صورت سر‌به‌سر شکست می‌خورند. برای رفع این مشکل، در این مقاله شبکه wtgan پیشنهاد شده که شامل مولد جدید، جداکننده محلی و سراسری است که شبکه مولد آن بر اساس تبدیل موجک و ماژول توجه طراحی شده است. از آنجا که تبدیل موجک ابزاری قدرتمند جهت حذف نویز عمومی از تصویر است، در ساختار مولد از آن استفاده شده است. همچنین با استفاده از مکانیزم توجه، اتصالات باقیمانده و کنارگذر تناظر بهتر محتوا بین تصویر منبع و هدف به وجود آمده و به بهبود توانایی مولد و عملکرد آن کمک می‌نماید. در این مقاله با استفاده از توابع اتلاف معرفی شده در روش‌های دیگر به قدرتمندی مدل در جهت انتقال محتوای تصویر توامان با حذف نویز پرداخته شده است. آزمایش‌های انجام شده بر روی مجموعه داده cityscapes با استفاده از معیارهای ارزیابی psnr، ssim و lpips نشان دهنده این است که مدل می‌تواند به خوبی اثرات نویز در منبع را کاهش داده، ساختار را به خوبی حفظ نموده و به کیفیت مطلوب دست یابد.

denoising in image-to-image translation using generative adversarial network based on wavelet transform

the image-to-image translation is one of the most challenging topics in artificial intelligence, which has recently made significant progress with the use of generative adversarial networks (gans). however, existing methods often fail to translate the noise source to the target domain. this article presents the wtgan network, which includes a new generator and a local and global discriminator to solve this problem. the generating network is designed based on wavelet transform and attention. due to the fact that wavelet transforms are powerful tools for removing general noise from the image, they have been used in the structure of the generator. also, attention, residual and skip-connections can provide deeper surface information between the source and target image and help to improve the generator performance. experiments were performed on the cityscapes dataset and psnr, ssim, and lpips criteria were used for evaluation. the results have shown that the model can well reduce the effects of noise at the source, well reserve structure, and achieve the desired quality.