Hov. Du er ikke logget ind.
DU SKAL VÆRE LOGGET IND, FOR AT INTERAGERE PÅ DENNE SIDE

Opsætning af Store Manager til Magento (SQL opsætning)

Side 1 ud af 2 (11 indlæg)
Fra Horsens
Tilmeldt 20. Feb 11
Indlæg ialt: 300
Fra  Produkt-Guiden.dk Skrevet kl. 19:29
Hvor mange stjerner giver du? :

Godaften alle sammen,

Vi er netop igang med at konvertere vores shop til en Magento.

På vores webshop importerer vi dagligt en .csv fil, med prisrettelser, lagerantal mv.

Dette Store Manger program (www.mag-manager.com) kan netop gøre det vi ønsker mht. importering af disse produkter. Vores problem er, at selve importen/daglige opdatering er meget langsom.

Når vi importerer starter den godt ud med ca. 20 produkter/sekund, men efter kort tid falder den, og den ender på ca. 5-6 produkter/sekund, hvilket er alt for langsomt.

Vi kan se på serveren at den ikke bruger synderligt mange ressourcer når den importerer, og vi har RIGELIGT med ressourcer til rådighed for programmet/importen, den benytter dem bare ikke.

Vi vil meget gerne høre, hvis nogen har erfaring med opsætning af dette, eller eventuelt folk som har forstand på SQL opsætning/kodning, som måske kan guide os til hvordan vi får programmet til at benytte flere ressourcer når det skal importere vores .csv fil.

God aften derude.

Hilsen

Jesper

Fra Dalgasgade 11, Herning
Tilmeldt 28. Jan 09
Indlæg ialt: 763
Fra  Powerhosting ApS Skrevet kl. 19:39
Hvor mange stjerner giver du? :

progu:

Godaften alle sammen,

Vi er netop igang med at konvertere vores shop til en Magento.

På vores webshop importerer vi dagligt en .csv fil, med prisrettelser, lagerantal mv.

Dette Store Manger program (www.mag-manager.com) kan netop gøre det vi ønsker mht. importering af disse produkter. Vores problem er, at selve importen/daglige opdatering er meget langsom.

Når vi importerer starter den godt ud med ca. 20 produkter/sekund, men efter kort tid falder den, og den ender på ca. 5-6 produkter/sekund, hvilket er alt for langsomt.

Vi kan se på serveren at den ikke bruger synderligt mange ressourcer når den importerer, og vi har RIGELIGT med ressourcer til rådighed for programmet/importen, den benytter dem bare ikke.

Vi vil meget gerne høre, hvis nogen har erfaring med opsætning af dette, eller eventuelt folk som har forstand på SQL opsætning/kodning, som måske kan guide os til hvordan vi får programmet til at benytte flere ressourcer når det skal importere vores .csv fil.

God aften derude.

Hilsen

Jesper

Hej Jesper.

Det skyldes en "udokumenteret feature" i magentos indexer.

Den nemmeste måde at fikse det på er at ved at køre indexeren manuelt istedet for ved hvert product_save. Eller låse den under import med lockIndexer();

Yoda har skrevet lidt om det her: http://blog.customerwise.dk/importing-products-in-magento-part-1/

God vind med shoppen!

Dennis  | (+45) 7222 4457 | Dalgasgade 11, 7400 Herning 

Seriøs Magentohosting

Fra Horsens
Tilmeldt 20. Feb 11
Indlæg ialt: 300
Fra  Produkt-Guiden.dk Skrevet kl. 11:02
Hvor mange stjerner giver du? :

Hej Powerhosting,

Tak for svaret.

Dog er det en lidt anden måde vi skal have lavet rettelser på.

Vi skriver direkte ind i databasen, så det er opsætningen af my.ini filen vi mangler hjælp til at opsætte, således at vi kan importere flere produkter i sekundet.

Venlig Hilsen

Jesper

Fra Dalgasgade 11, Herning
Tilmeldt 28. Jan 09
Indlæg ialt: 763
Fra  Powerhosting ApS Skrevet kl. 11:05
Hvor mange stjerner giver du? :

progu:

Hej Powerhosting,

Tak for svaret.

Dog er det en lidt anden måde vi skal have lavet rettelser på.

Vi skriver direkte ind i databasen, så det er opsætningen af my.ini filen vi mangler hjælp til at opsætte, således at vi kan importere flere produkter i sekundet.

Venlig Hilsen

Jesper

OK, det findes der masser af info omkring.

Generelt handler det om at sørge for mysqld kun rammer disken når det er strengt nødvendigt.

Se på parametre som

  • innodb_log_file_size
  • innodb_log_buffer_size
  • innodb_buffer_pool_size og
  • innodb_thread_concurrency

YMMV.

God vind med shoppen!

Dennis  | (+45) 7222 4457 | Dalgasgade 11, 7400 Herning 

Seriøs Magentohosting

Fra Horsens
Tilmeldt 20. Feb 11
Indlæg ialt: 300
Fra  Produkt-Guiden.dk Skrevet kl. 11:16
Hvor mange stjerner giver du? :

Powerhosting:

OK, det findes der masser af info omkring.

Generelt handler det om at sørge for mysqld kun rammer disken når det er strengt nødvendigt.

Se på parametre som

  • innodb_log_file_size
  • innodb_log_buffer_size
  • innodb_buffer_pool_size og
  • innodb_thread_concurrency

YMMV.

God vind med shoppen!

Tak for det hurtige svar.

Vi skal importere ca. 260.000 produkter.

PT. er der 8gb ram og 4 CPU kerner til rådighed. Men der er mulighed for udvidelse (Virtuel server)

Har du nogen ide om hvad værdierne skal sættes til, for at få en god opsætning til dette?

Fra Dalgasgade 11, Herning
Tilmeldt 28. Jan 09
Indlæg ialt: 763
Fra  Powerhosting ApS Skrevet kl. 11:18
Hvor mange stjerner giver du? :

progu:

Tak for det hurtige svar.

Vi skal importere ca. 260.000 produkter.

PT. er der 8gb ram og 4 CPU kerner til rådighed. Men der er mulighed for udvidelse (Virtuel server)

Har du nogen ide om hvad værdierne skal sættes til, for at få en god opsætning til dette?

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Dennis  | (+45) 7222 4457 | Dalgasgade 11, 7400 Herning 

Seriøs Magentohosting

Fra Horsens
Tilmeldt 20. Feb 11
Indlæg ialt: 300
Fra  Produkt-Guiden.dk Skrevet kl. 11:27
Hvor mange stjerner giver du? :

Powerhosting:

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Når alle produkter er kørt ind, ligger databasen på ca. 1,5-2GB.

Fra Dalgasgade 11, Herning
Tilmeldt 28. Jan 09
Indlæg ialt: 763
Fra  Powerhosting ApS Skrevet kl. 11:29
Hvor mange stjerner giver du? :

progu:

Powerhosting:

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Når alle produkter er kørt ind, ligger databasen på ca. 1,5-2GB.

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Dennis  | (+45) 7222 4457 | Dalgasgade 11, 7400 Herning 

Seriøs Magentohosting

Fra Horsens
Tilmeldt 20. Feb 11
Indlæg ialt: 300
Fra  Produkt-Guiden.dk Skrevet kl. 11:45
Hvor mange stjerner giver du? :

Powerhosting:

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Super - Tak for det lynhurtige svar!

Har du nogle eksempler på hvordan det skal stå? Og evt. hvordan du mener det skal stå med 8GB Ram og 4 Kerner.

Fra Dalgasgade 11, Herning
Tilmeldt 28. Jan 09
Indlæg ialt: 763
Fra  Powerhosting ApS Skrevet kl. 11:47
Hvor mange stjerner giver du? :

progu:

Powerhosting:

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Super - Tak for det lynhurtige svar!

Har du nogle eksempler på hvordan det skal stå? Og evt. hvordan du mener det skal stå med 8GB Ram og 4 Kerner.

Jeg ved hvad jeg selv ville skrive, men det er er baseret udfra talrige tests på rigtigt jern. Du bør teste dig frem til dine optimale værdier på din virtuelle server.

Dennis  | (+45) 7222 4457 | Dalgasgade 11, 7400 Herning 

Seriøs Magentohosting

Side 1 ud af 2 (11 indlæg)