MySQL REGEXP/RLIKE jest do niczego - musisz rzutować dane as BINARY
do wyszukiwania z rozróżnianiem wielkości liter:
SELECT *
FROM datatbl
WHERE CAST(strfield AS BINARY) rlike '[a-z]*';
Znajdziesz to poruszone w komentarze do dokumentacji REGEXP/RLIKE .