Да стандартно меняется.
В файле modules/mod_virtuemart_login/mod_virtuemart_login.php в строку
<input type="submit" name="Submit" class="button" value="<?php echo $VM_LANG->_('BUTTON_LOGOUT') ?>" />
добавляем
id="logout"
в templates/имя_шаблона/css/template.css дописываем что-то вроде
input#logout{ background:url(../images/button_logout.png); height:28px; width:80px; border:0; color:#FFF; padding-bottom:6px; margin-left:30px; }
и подкладываем нужную нам картинку button_logout.png в templates/имя_шаблона/images