Para cambiar el favicon en Wordpress,primero debes crear la imagen (no muy grande) y convertirla en icono,recomiendo que usen Gen Favicon,luego ya teniendo el archivo.ico subes con tu programa de cliente FTP a la carpeta public-html el archivo.
Ahora vas a tu escritorio de Wordpress,entras en Apariencia,editor,cabecera y antes de </head> agrega lo siguiente:
<link rel="shortcut icon" href="http://tublog.com/favicon.ico">
Ahora solo reemplaza la parte que dice tublog.com por la URL de tu blog y listo.