हां, यह संभव है, आपको CSV मॉड्यूल का उपयोग करके CSV फ़ाइलों के डेटा को पढ़ना होगा।
http://docs.python.org/library/csv.html
और पायथन MySQL बाइंडिंग का उपयोग करके डेटा इंजेक्ट करें। यहाँ एक अच्छा स्टार्टर ट्यूटोरियल है:
http://zetcode.com/databases/mysqlpythontutorial/
यदि आप पहले से ही अजगर को जानते हैं तो यह आसान हो जाएगा