Ja, es ist möglich, Sie müssen die Daten aus den CSV-Dateien mit dem CSV-Modul lesen.
http://docs.python.org/library/csv.html
Und die Daten werden mithilfe der Python-MySQL-Bindung eingefügt. Hier ist ein gutes Starter-Tutorial:
http://zetcode.com/databases/mysqlpythontutorial/
Wenn Sie Python bereits kennen, wird es einfach sein