Musisz wykonać polecenie LOAD DATA INFILE z dodatkową opcją
FIELDS OPTIONALLY ENCLOSED BY '"'
W ten sposób całe oświadczenie staje się
LOAD DATA INFILE '<FILENAME>' INTO TABLE <TABLENAME>
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '"'
LINES TERMINATED BY '\r\n'
(col1, col2, col3, ...)
Więcej informacji można znaleźć w doskonałym Podręczniku MySQL np. dla MySQL 5.1 GA.