Travamento de tabelas

[delanez]

Boa tarde pessoal,

Meu problema é o seguinte:

Desenvolvi um e-commerce, e estou integrando ele com um sistema ERP de um cliente.

A integração é feita através de arquivos TXT, o ERP gera esses arquivos, e eu fiz um monitoramento de 30 em 30min para verificar se existe arquivo para a integração

Quando eu acho esses arquivos, eu inicio uma transacao, dou um TRUNCATE na tabela, monta um string com os inserts, e executo ela através do PDO do PHP e no fim dou o commit.

Mas o problema, é que a carga é grande, e nesse tempo o site fica "travado", gostaria de saber se alguém tem uma solução melhor pra essa carga
 

[macielportugal]

Olá, porque você não tenta quebra em pequenos blocos os inserts? Use sleep do php para da uma pausa no loop, outra coisa é fazer auto commit dos inserts e como é um ecomerce tive muito movimento você pode criar um banco slave, assim seu código deve fazer leitura no slave e o escrita no má

ster.

[delanez]

Na verdade ele faz um único insert, algo como:

$connPDO->beginTransaction();

try{

       $connPDO->query("TRUNCATE TABLE produtos");

       $connPDO->query("INSERT INTO produtos(id, descricao, valor) VALUES (1, 'teste 1', 10.5), (2, 'teste 2', 23.00), (3, 'teste 3', 28.00) ");

       $connPDO->commit();

}catch(Exception $e){
        $connPDO->rollBack();
}

[macielportugal]

Uma dúvida o insert não é operação bloqueante no banco, no terminal do mysql ele indicar as queries que estão mais lenta? será que o problema não é parse do txt?

Qual a logica desta integração, pelo que entendi você deleta a tabela produtos, ela não é importante para o e-commerce?

[delanez]

desculpa a demora, ela é importante sim,

Mas é que ficaria muito lento comparar item a item para ver o que mudou nos produtos.

mas o estranho, que o insert não demora tanto tempo assim, é coisa de 2 ou 3 segundos, mas mesmo assim o banco está ficando travado por bastante tempo, não conheço muito de mysql, não sei o que pode estar acontecendo.