Как изменить иконку в нумерованных списках

Нажмите Внешний вид > Настроить > Дополнительные стили и добавьте код

.entry-content ol:not([class])>li:before, 
.home-text ol:not([class])>li:before, 
.taxonomy-description ol:not([class])>li:before {
    content: '\002A';
    top: 0;
    font-size: 16px;
    color: #4d3bfe;
    border: none;
}

Код иконки \002A, размер иконки 16px и цвет иконки #4d3bfe можете изменить на другие.

Список иконок можно посмотреть здесь https://wpcourses.ru/tools/unicode/.