LOAD DATA INFILE
ist sehr schnell und der richtige Weg, um Textdateien in MySQL zu importieren. Es ist eine der empfohlenen Methoden, um das Einfügen von Daten zu beschleunigen - bis zu 20-mal schneller, demnach:
https://dev.mysql.com/doc/refman /8.0/en/insert-optimization.html
Angenommen, dass das Zurückschreiben der verarbeiteten Daten in eine Textdatei schneller ist als das Einfügen in die Datenbank, dann ist dies ein guter Weg.