Utwórz tabelę bazy danych z CSV

Pracuję nad modułem, który wymaga dostępu do niektórych danych tabelarycznych dostarczonych z zewnętrznego źródła. To tylko dwie kolumny, ale ma około 40000 wierszy.

Obecnie mój moduł tylko analizuje plik CSV w razie potrzeby. Działa to dobrze, ale ponieważ plik ma rozmiar około 450 KB, zużyje zasoby serwera po wdrożeniu w witrynie produkcyjnej.

Chciałbym przenieść te dane do tabeli Magento i mam problem.

Korzystam z metod RDBMS w skrypcie instalacyjnym, między innymi:

$installer = $this;
$installer->startSetup();

$table = $installer->getConnection()
    ->newTable($installer->getTable('my_table'))
    ->addColumn('column_a', Varien_Db_Ddl_Table::TYPE_TEXT, 5, array(
        'nullable' => false,
        ), 'Column A')
    ->addColumn('column_b', Varien_Db_Ddl_Table::TYPE_TEXT, 3, array(
        'nullable' => false,
        ), 'Column B');

$installer->getConnection()->createTable($table);

$installer->endSetup();

To działa dobrze, aby utworzyć moją tabelę, ale w rzeczywistości wprowadzanie moich danych marnieje w głowie (wciąż jestem nieobliczalny, jeśli chodzi o zarządzanie bazą danych).

Idealnie byłoby po prostu przeanalizować mój plik CSV i wstawić wartości do tabeli bez konieczności radzenia sobie z wiązką kopiowania / wklejania.

Czy są jakieś wbudowane metody obsługi dowolnych danych CSV, czy też wszystkie są zbudowane tak, aby obsłużyć tylko to, czego potrzebują? Jakie byłoby najlepsze podejście do przeniesienia moich danych do Magento?

Nigdy tego nie zrobiłem. Zagrajmy!

Po createTable()wywołaniu lub w kolejnym skrypcie:

/* @var $installer Mage_Core_Model_Resource_Setup */
$installer = $this;
$installer->startSetup();

//Extract data from CSV file
$csv = new Varien_File_Csv;
$data = $csv->getData('path/to/file.csv');

$resultNum = $installer->getConnection()->insertArray(
    $installer->getTable({TABLE NAME}),
    array({COL 1},{COL 2}),    //column names
    $data
);

//EDIT: if this is done using a data setup script, can even log the results:
Mage::log(
    __FILE__." added $resultNum records to $installer->getTable({TABLE NAME})",
    Zend_Log::INFO,
    "setup.log",
    true
);

$installer->endSetup();