Carga masiva e Indeces

[reel]

Me podrían comentar sus experiencia con carga de datos masiva?

Con cierta periosidad recibo archivos que debo insertar en unas tablas temporarles, los archivos los proceso con una aplicación para asegurar que tengan la estructura correcta y agregar información complementaria, y luego hago la inserción a una tablas temporales.

Las tablas temporales actualmente se encuentra sin Indices, pero está situación esta afectando el rendimiento porque por medio de una consultas se valida los datos para hacer la unificación con el historíco y evitar errores, ya que se genera mucha información estadística.

Por el momento tenesmo un escenario que sería, crear los índeces después de la carga en la tablas temporales y votarlos antes de hacer la carga.

Una pregunta, existe una forma de desabilitar los indices en el momento de la carga? de ser posible sería mas eficiente que crear y votar los indices?

Muchas grácias por leer el post, cualquier ayuda se los agredeceré mucho.

Saludes

[Rothariger]

No seria mejor en vez de hacer una consulta luego de insertar todo, ejecutar triggers? y chequear fila por fila?

[reel]

No, resulta más lento porque procesas registro a registro, por ejemplo si a los carro de gasolina se aplica un impuesto de 5%, y quieres verificar que no un carro de gasolina con el impuesto equivocado, entonces solo selecionas todos los carros que tengan el impuesto diferente a 5% y los marcas como registro erronio, es mucho más rápido eso que el trigger.

Además porque debo generar un reporte con los registros erronios.

Saludes

[Mithrandir]

Lo que te recomendaría (de hecho eso es lo que hago en mis servers) es tirar los índices para hacer el insertado masivo. Una vez los datos dentro de la tabla levanto los índices y hago todas las consultas que sean necesarias.

[reel]

Muchas Gracias Mithrandir,

He sin duda lo que me recomiendas es lo mejor.

Saludes