Tak, jest to możliwe, będziesz musiał odczytać dane z plików CSV za pomocą modułu CSV.
http://docs.python.org/library/csv.html
I wstrzyknąć dane za pomocą wiązania Python MySQL. Oto dobry samouczek dla początkujących:
http://zetcode.com/databases/mysqlpythontutorial/
Jeśli znasz już Pythona, będzie to łatwe