Używasz:
COPY tablename FROM 'filename';
to nie zadziała - RDS nie ma pojęcia, czym jest „nazwa pliku”.
Musisz użyć psql
\copy
polecenia , który kopiuje z lokalnego klienta, lub opcja „importuj dane” PgAdmin-III.
Podręcznik RDS opisuje to bardziej szczegółowo .