JULETILBUD! Amino Power Bank 5000 mAh m. solceller + 3 måneders Amino PLUS, kun 297,- ekskl. moms Læs mere
X
i debat
Bliv gratis medlem på Amino
 

Køb et Amino Sponsorlink

 

Nye ekspertblog-indlæg
om  E-handel, Internet & Online marketing

Læs flere ekspertindlæg
 

Top karmaliste (30 dage)

De flinkeste Amino’er der hjælper mest med "Internet/E-business hjælp div. "

 

Opsætning af Store Manager til Magento (SQL opsætning)

Side 1 ud af 2 (11 indlæg) 1 2 Næste >
Amino-karma 1.159
Fra Horsens
Tilmeldt 20. feb 11
Indlæg ialt: 280
Amino Plus

Fra Produkt-Guiden.dk
Skrevet 05-03-2012 kl. 19:29

Godaften alle sammen,

Vi er netop igang med at konvertere vores shop til en Magento.

På vores webshop importerer vi dagligt en .csv fil, med prisrettelser, lagerantal mv.

Dette Store Manger program (www.mag-manager.com) kan netop gøre det vi ønsker mht. importering af disse produkter. Vores problem er, at selve importen/daglige opdatering er meget langsom.

Når vi importerer starter den godt ud med ca. 20 produkter/sekund, men efter kort tid falder den, og den ender på ca. 5-6 produkter/sekund, hvilket er alt for langsomt.

Vi kan se på serveren at den ikke bruger synderligt mange ressourcer når den importerer, og vi har RIGELIGT med ressourcer til rådighed for programmet/importen, den benytter dem bare ikke.

Vi vil meget gerne høre, hvis nogen har erfaring med opsætning af dette, eller eventuelt folk som har forstand på SQL opsætning/kodning, som måske kan guide os til hvordan vi får programmet til at benytte flere ressourcer når det skal importere vores .csv fil.

God aften derude.

Hilsen

Jesper

Amino-karma 3.450
Fra Dalgasgade 11, Herning
Tilmeldt 28. jan 09
Indlæg ialt: 695
Amino Plus
Powerhosting
Fra Powerhosting ApS
Skrevet 05-03-2012 kl. 19:39

progu:

Godaften alle sammen,

Vi er netop igang med at konvertere vores shop til en Magento.

På vores webshop importerer vi dagligt en .csv fil, med prisrettelser, lagerantal mv.

Dette Store Manger program (www.mag-manager.com) kan netop gøre det vi ønsker mht. importering af disse produkter. Vores problem er, at selve importen/daglige opdatering er meget langsom.

Når vi importerer starter den godt ud med ca. 20 produkter/sekund, men efter kort tid falder den, og den ender på ca. 5-6 produkter/sekund, hvilket er alt for langsomt.

Vi kan se på serveren at den ikke bruger synderligt mange ressourcer når den importerer, og vi har RIGELIGT med ressourcer til rådighed for programmet/importen, den benytter dem bare ikke.

Vi vil meget gerne høre, hvis nogen har erfaring med opsætning af dette, eller eventuelt folk som har forstand på SQL opsætning/kodning, som måske kan guide os til hvordan vi får programmet til at benytte flere ressourcer når det skal importere vores .csv fil.

God aften derude.

Hilsen

Jesper

Hej Jesper.

Det skyldes en "udokumenteret feature" i magentos indexer.

Den nemmeste måde at fikse det på er at ved at køre indexeren manuelt istedet for ved hvert product_save. Eller låse den under import med lockIndexer();

Yoda har skrevet lidt om det her: http://blog.customerwise.dk/importing-products-in-magento-part-1/

God vind med shoppen!

Amino-karma 1.159
Fra Horsens
Tilmeldt 20. feb 11
Indlæg ialt: 280
Amino Plus
Mads Hvejsel
Fra Produkt-Guiden.dk
Skrevet 06-03-2012 kl. 11:02

Hej Powerhosting,

Tak for svaret.

Dog er det en lidt anden måde vi skal have lavet rettelser på.

Vi skriver direkte ind i databasen, så det er opsætningen af my.ini filen vi mangler hjælp til at opsætte, således at vi kan importere flere produkter i sekundet.

Venlig Hilsen

Jesper

Amino-karma 3.450
Fra Dalgasgade 11, Herning
Tilmeldt 28. jan 09
Indlæg ialt: 695
Amino Plus
Powerhosting
Fra Powerhosting ApS
Skrevet 06-03-2012 kl. 11:05

progu:

Hej Powerhosting,

Tak for svaret.

Dog er det en lidt anden måde vi skal have lavet rettelser på.

Vi skriver direkte ind i databasen, så det er opsætningen af my.ini filen vi mangler hjælp til at opsætte, således at vi kan importere flere produkter i sekundet.

Venlig Hilsen

Jesper

OK, det findes der masser af info omkring.

Generelt handler det om at sørge for mysqld kun rammer disken når det er strengt nødvendigt.

Se på parametre som

  • innodb_log_file_size
  • innodb_log_buffer_size
  • innodb_buffer_pool_size og
  • innodb_thread_concurrency

YMMV.

God vind med shoppen!

Amino-karma 1.159
Fra Horsens
Tilmeldt 20. feb 11
Indlæg ialt: 280
Amino Plus
Mads Hvejsel
Fra Produkt-Guiden.dk
Skrevet 06-03-2012 kl. 11:16

Powerhosting:

OK, det findes der masser af info omkring.

Generelt handler det om at sørge for mysqld kun rammer disken når det er strengt nødvendigt.

Se på parametre som

  • innodb_log_file_size
  • innodb_log_buffer_size
  • innodb_buffer_pool_size og
  • innodb_thread_concurrency

YMMV.

God vind med shoppen!

Tak for det hurtige svar.

Vi skal importere ca. 260.000 produkter.

PT. er der 8gb ram og 4 CPU kerner til rådighed. Men der er mulighed for udvidelse (Virtuel server)

Har du nogen ide om hvad værdierne skal sættes til, for at få en god opsætning til dette?

Amino-karma 3.450
Fra Dalgasgade 11, Herning
Tilmeldt 28. jan 09
Indlæg ialt: 695
Amino Plus
Powerhosting
Fra Powerhosting ApS
Skrevet 06-03-2012 kl. 11:18

progu:

Tak for det hurtige svar.

Vi skal importere ca. 260.000 produkter.

PT. er der 8gb ram og 4 CPU kerner til rådighed. Men der er mulighed for udvidelse (Virtuel server)

Har du nogen ide om hvad værdierne skal sættes til, for at få en god opsætning til dette?

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Amino-karma 1.159
Fra Horsens
Tilmeldt 20. feb 11
Indlæg ialt: 280
Amino Plus
Mads Hvejsel
Fra Produkt-Guiden.dk
Skrevet 06-03-2012 kl. 11:27

Powerhosting:

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Når alle produkter er kørt ind, ligger databasen på ca. 1,5-2GB.

Amino-karma 3.450
Fra Dalgasgade 11, Herning
Tilmeldt 28. jan 09
Indlæg ialt: 695
Amino Plus
Powerhosting
Fra Powerhosting ApS
Skrevet 06-03-2012 kl. 11:29

progu:

Powerhosting:

Hvor stort er dit datasæt ? Altså hele din DB.

Mysqld egner sig dårligt til virtualisering desværre. Især på InnoDB da der typisk er langt til I/O

Når alle produkter er kørt ind, ligger databasen på ca. 1,5-2GB.

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Amino-karma 1.159
Fra Horsens
Tilmeldt 20. feb 11
Indlæg ialt: 280
Amino Plus
Mads Hvejsel
Fra Produkt-Guiden.dk
Skrevet 06-03-2012 kl. 11:45

Powerhosting:

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Super - Tak for det lynhurtige svar!

Har du nogle eksempler på hvordan det skal stå? Og evt. hvordan du mener det skal stå med 8GB Ram og 4 Kerner.

Amino-karma 3.450
Fra Dalgasgade 11, Herning
Tilmeldt 28. jan 09
Indlæg ialt: 695
Amino Plus
Powerhosting
Fra Powerhosting ApS
Skrevet 06-03-2012 kl. 11:47

progu:

Powerhosting:

OK, så får du brug for at hæve mysql´s defaults på de ovenstående parametre.

Test dig frem til din optimale konfiguration.

Super - Tak for det lynhurtige svar!

Har du nogle eksempler på hvordan det skal stå? Og evt. hvordan du mener det skal stå med 8GB Ram og 4 Kerner.

Jeg ved hvad jeg selv ville skrive, men det er er baseret udfra talrige tests på rigtigt jern. Du bør teste dig frem til dine optimale værdier på din virtuelle server.

Side 1 ud af 2 (11 indlæg) 1 2 Næste >

RSS-feed