Acesse o Painel do Blogger e va em Editar HTML. Marque a opção Expandir modelos de widgets e tecle CTRL+F. Pesquise pelo seguinte codigo:
<b:if cond='data:post.hasJumpLink'>
<div class='jump-link'>
<a expr:href='data:post.url + "#more"'> <data:post.jumpText/>
</a>
</div>
</b:if >
Substitua a parte destacada de vermelho por:
<img src='URL_DA_IMAGEM_AQUI' style='vertical-align:middle;border:0'/>
Hospede a imagem em um servidor e onde esta¡ destacado de azul substitua pelo link direto da imagem.