Oracle SQL - Klauzula IN wyświetla wszystkie rekordy podane w warunku IN, nawet jeśli danych nie ma w tabeli

Potrzebujesz tabeli pochodnej zawierającej wszystkie możliwości. Albo masz taką, jak tabela miejska, a potem możesz zrobić:

SELECT t.customer_id,s.city
FROM city_table s
LEFT JOIN customer t
 ON(s.id = t.city) 
WHERE s.city IN ('abc', 'def', 'ghi')

Lub sam wygeneruj wartości:

SELECT t.customer_id,s.city
FROM (SELECT 'abc' as id FROM DUAL
      UNION ALL 
      SELECT 'def' FROM DUAL
      UNION ALL
      SELECT 'ghi' FROM DUAL) s
LEFT JOIN customer t
 ON(s.id = t.city) 
WHERE s.id IN('abc', 'def', 'ghi')