Ano, je to možné, budete muset načíst data z CSV souborů pomocí CSV modulu.
https://docs.python.org/library/csv.html
A vložit data pomocí vazby Python MySQL. Zde je dobrý úvodní návod:
https://zetcode.com/databases/mysqlpythontutorial/
Pokud již znáte python, bude to snadné