Tweak week (eek!): Apache, MySQL.

A Critical Mass (már csak négy nap!) mindig új, vagy módosított konfigon futó szolgáltatásokat igényel, mivel teljesen más jellegű terhelést ad a szervernek, mint a “mindennapi” forgalom: sok kicsi, viszonylag kis forgalmú, sok esetben szimpla statikus, vagy kis adatbázissal operáló site helyett egy baromi nagy dinamikus site, viszonylag nagy adatbázissal (400 mega körül tán?), sok látogatóval. Mindezt persze úgy, hogy közben a kis siteok forgalma ugyanúgy jelen van, és természetesen biztosítjuk. Az ilyen időszakok lehetőséget adnak egy kis tweakelésre, ez történik tegnap/ma is.

Tavaly a Drupal cache bekapcsolása és a Lighttpd kipróbálása volt soron, amit végül a .htaccess támogatás hiánya (és az ezáltal okozott kényelmetlenség) miatt pihenőpályára tettem.

Mivel tavaly szeptemberben gépcsere volt és több erőforrással gazdálkodunk, idén próbálok az Apache keretein belül maradni, a Lighty csak végső megoldásnak marad. Lássuk, miket fogok most (negyed óra!) életbe léptetni. (Van, amit már napközben megtettem.) De előtte (drámai feszültség!) nézzük át, hogy mit miért arra, amerre. Alapvetően ugyebár egy szerverben három erőforrással ga(rá)zdálkodunk (a lemezkapacitásokat most nyugodtan vehetjük végtelennek):

  • processzoridő
  • fizikai memória (ha terhelt rendszeren swapolni kell, rég rossz)
  • disk i/o.

A két szerver pedig, amivel most dolgozunk, az az Apache és a MySQL. (Apache alatt pedig a php, mint főbűnös az esetek 80%-ában.) Szóval lássuk, mivel mit.

  • Apache-ban KeepAlive visszakapcsol, MaxKeepAliveRequests 0 (vagyis végtelen), viszont KeepAliveTimeout 4 (másodperc). Vagyis nyitva hagyjuk azokat a kapcsolatokat, de csak rövid ideig. Még az is lehet, hogy a Timeout értéket 2-re veszem majd le. Ezzel elvileg prociidőt nyerünk, mert nem kell mindig újranyitni mindenféle socketeket. Cserébe ezek a processzek kicsit tovább foglaltak az új kérések kiszolgálása elől, mint KeepAlive nélkül.
  • MaxRequestsPerChild 200-ra fog (talán) csökkenni (400-ról). Ettől azt várom, hogy a memóriazabáló Apache processzek gyakrabban dögölnek ki, ergo általánosságban több memória lesz. Persze nem megy áldozat nélkül, a gyakrabban kigyilkolt processzek gyakoribb újprocessz-forkolást eredményeznek, ami viszont többlet prociidőt igényel.
  • A criticalmass.hu .htaccess file-ját statikusan betettem a VirtualHost konfigba, így egyszer, induláskor olvassa be, nem minden eléréskor. Kicsi előny, de dob valamit a teljesítményen. (A flexibilitás feladásával.)
  • A MySQL fő problémája jelenleg a disk i/o bottleneck. Amikor szegény elkezd valami olyannal dolgozni, ami nincs memóriában, akkor a load általában felpattan 20 fölé. Ennek kiküszöbölésére a Critical Mass adatbázisa átkerül egy külön fizikai RAID tömbre (és symlinkkel lesz visszalinkelve az eredeti helyére), vagyis teljesen más diszkek fogják kiszolgálni, mint a többi oldal adatbázisát és a CM statikus tartalmát. Ettől természetesen a disk i/o, végső soron az iowait érték (van, hogy 50% fölött!) drasztikus csökkenését várom, és overall egy teljesítmény boostot. Probléma ezzel akkor lehet, ha a CM adatbázis adta eddig a mostani RAID tömb fő terhelését. Ez esetben annyi fog történni, hogy a terhelést áttettük az egyik tömbről a másikra, amivel nem segítettünk magunkon. A megoldás az, hogy az adatbázis file állományát is szét kell dobálni fizikailag különböző lemezekre, tehát pl. az indexek az egyiken, az adatok a másikon.
  • Némileg unrelated, de a rendszer általános reszponzivitása érdekében renice-oltam (negatív irányba, vagyis prioritást emeltem rajtuk) a slapd-t és az nscd-t. Ezek szolgáltatják, illetve cache-elik az autentikációs adatokat, tehát fontos, hogy mindig reszponzívak legyenek.

Elgondolkodtam még a külön Apache telepítésén, amivel sokkal könnyebb a bütykölés és a külöbnöző értékek állítgatása – de az majd következő körös lépés lesz.

Update 1: MySQL adatbázist áttettem, lássuk mit mond az iostat.

Update 2: Részlet a gépház levelezéséből!

5 hozzászólás “Tweak week (eek!): Apache, MySQL.” bejegyzéshez

  1. Pro szerint:

    Ha külön apache-ot dedikálasz, akkor nem érdemes fastcgi-be rakni a php-t? vagy a drupal nem viseli?

  2. lipilee szerint:

    viseli (lighty alatt fastcgi-vel csináltuk), és valószínűleg érdemes is: ad egy újabb layert az erőforrások skálázására. nota bene, akár (fizikailag) külön fastcgi szervert is dedikálhatsz neki, ami nagyon nagy terhelésnél nem rossz.

  3. tamas szerint:

    lipi, te se sok igazi adatbazist lattal, ha a 400 megat nagynak hiszed :-)

  4. tamas szerint:

    ja, megegy. ha a db io a problemas, akkor rakj bele meg sok memcsit a gepbe, es csinalj a mysqlbol egy kamu imdb-t. hatha. vagy, ha nem php bacsi lenne, megetethetned az applikacioval az egesz db-t indulaskor, 400 mega memoriaban, nagy ugy.
    amugy vicces ez a myd-myi fajlok szetlinkelese, elegge jol mutatja, hogy a mysql milyen jatekdatabez ;]
    esetleg valami object cache-t a rendszer ele rakni, az nem segitseg?
    vagy, ami meg otlet, hogy az osszes mysqles fajlot rakjad tmpfsre (nyilvan ekkor szopo az aramszunet), mert ugye a tmpfs az memoriaban tarolt dolog.

  5. lipilee szerint:

    láttam már 100 gigás adatbázist, de az nem közösségi oldal volt, és nem 1 giga memória volt alatta. ja, és az a gép *csak* azt az adatbázist futtatta :)
    io-val már jó vagyok, most a CPU elszállásokat kell kigyilkolni.
    tmpfs, object cache: nincs értelme.

Hozzászólások lehetősége itt nem engedélyezett.