帶跳躍的生成器（U-Net）

圖像到圖像轉(zhuǎn)換問題的一個(gè)定義（關(guān)鍵）特征是它們將高分辨率的輸入網(wǎng)格映射到高分辨率的輸出網(wǎng)格。 另外，對(duì)于我們考慮的問題，輸入和輸出的表面外觀不同，但是兩者都是相同基礎(chǔ)結(jié)構(gòu)的繪制。 因此，輸入中的結(jié)構(gòu)與輸出中的結(jié)構(gòu)大致對(duì)齊。 我們圍繞這些考慮因素設(shè)計(jì)生成器網(wǎng)絡(luò)架構(gòu)。

針對(duì)該領(lǐng)域中的問題的許多先前解決方案[40、52、27、60、56]已經(jīng)使用了編碼器-解碼器網(wǎng)絡(luò)[24]。 在這樣的網(wǎng)絡(luò)中，輸入要經(jīng)過一系列層，這些層逐漸地降低采樣率，直到達(dá)到瓶頸層為止，在這一點(diǎn)上，過程是相反的。 這樣的網(wǎng)絡(luò)要求所有信息流都經(jīng)過包括瓶頸在內(nèi)的所有層。 對(duì)于許多圖像翻譯問題，在輸入和輸出之間共享大量的底層信息，因此希望將這些信息直接穿梭網(wǎng)絡(luò)。 例如，在圖像彩色化的情況下，輸入和輸出共享突出邊緣的位置。

為了給生成器提供一種繞過瓶頸的方法，以獲取諸如此類的信息，我們添加了跳過連接，以遵循“ U-Net”的一般形狀[47]。 具體來說，我們?cè)诘趇層和第n層n-i之間添加跳過連接，其中n是總層數(shù)。 每個(gè)跳過連接僅將第i層的所有通道與第n - i層的通道連接在一起。

生成器也是一種迭代器

生成器也是一種迭代器，但是你只能對(duì)其迭代一次[1]。這是因?yàn)樗鼈儾]有把所有的值存在內(nèi)存中，而是在運(yùn)行時(shí)生成值。你通過遍歷來使用它們，要么用一個(gè)“for”循環(huán)，要么將它們傳遞給任意可以進(jìn)行迭代的函數(shù)和結(jié)構(gòu)。大多數(shù)時(shí)候生成器是以函數(shù)來實(shí)現(xiàn)的。然而，它們并不返回一個(gè)值，而是yield(暫且譯作“生出”)一個(gè)值。