Powinieneś wyczyścić pole Kodowanie w zakładce Definicje, kiedy klikniesz przycisk Zapisz, nadal pokaże się wyskakujące okienko błędu, ale baza danych zostanie utworzona.
Wygląda na to, że pgAdmin 4 ma błąd w swojej bibliotece psycopg2. Właśnie napisałem pytanie o to:
Błąd podczas tworzenia bazy danych z pgadmin4