Если речь о вложениях (имеено о вложениях):
Для IMAP -- да, так и работает. Вложения можно загружать отдельно от текста писем, и при пересылке, программа спросит, какие из них загрузить и прикрепить. При ответе тому же отправителю - вложения вообще игнорируются.
А вот в протоколе POP3, чтобы понять, что в письме (в том числе и текст), то нужно загрузить его полностью.
Вставленые картинки (не вложения) являются частью письма, поэтому загружаются при ответе / пересылке.