Оптимизация импорта из DBF

[Marina Andreeva]

Здравствуйте! Такая ситуация:
Наша организация периодически получает таблицу dbf с данными. На сегодняшний день там более полутора миллиона записей (1500000). 20 столбцов с разными типами данных. Я работаю статистом и по совместительству приходится импортировать эти данные в interbase, т.к. программист с его алгоритмом уволился. dbf файл без индексов.

Я делаю так: в Delphi7 подключаюсь через ADO (драйвер выбираю foxpro) к этой dbf-таблице, и запросом select * from делаю выборку. Пока даже не записывая в принимающую таблицу. у меня на 100 тысяч записей уходит примерно 3 минуты и ЧЕМ ДАЛЬШЕ-ТЕМ МЕДЛЕННЕЕ. На миллион уходит 2 часа!!. У прежнего прогера уходило 15 минут!

Скажите пожалуйста - какой алгоритм применить или компонент, чтобы ускорить процесс чтения из dbf-файла?
Заранее огромное спасибо)!

[Stilet]

А может он вообще не импортировал физически, а тупо открывал ту DBF... И не через SQL...

[soleil@mmc]

еще могу предложить вариант - создать индексы в дбф-файле
хотя, если нужно импортировать все данные, то вполне хватит листать дбф-файл через TTable
и даже если не все, то проще проверять дубли на процедуре импорта в самом ИБазе

[Marina Andreeva]

Сообщение от soleil@mmc

еще могу предложить вариант - создать индексы в дбф-файле
хотя, если нужно импортировать все данные, то вполне хватит листать дбф-файл через TTable
и даже если не все, то проще проверять дубли на процедуре импорта в самом ИБазе

спасибо за поддержку.

я делаю так: adoTable подключаюсь через драйвер foxpro(через другие еще медленнее) к своей таблице. потом в adoQuery делаю select * from - уходит 2 минуты. потом AdoTable.next и понеслась вышеописанная проблема. может я в корне не права?

в ДБФ-таблице нет дублей. мне надо просто считать и сделать insert в подготовленную таблицу-пустую на интербейсе.

[Marina Andreeva]

Сообщение от Stilet

А может он вообще не импортировал физически, а тупо открывал ту DBF... И не через SQL...

а как, Вы можете предположить? еще одно направление для меня - может спасти

[Dark_Spirit]

не знаю как на интербейсе, но на SYBASE ASA можно было вкачать дбф в базу таким способом:
input into <table_name>
from <file_name>.dbf format foxpro