Weblabor

Nagyobb forgalmú webhelyeken a folyamatos adatbázisműveletek nagy terhelés okoznak a kiszolgálónak. Azokat az információkat, amiktől nem függnek további műveletek és nincs szükség a pillanatnyi állapotukra késleltetett kötegelt módon is aktualizálhatjuk. Statisztikai, számláló, vagy szavazás jellegű, illetve hasonló tárolási feladatoknál az alap információ mellett további összesítéseket is nagyobb erőforrás igény néklkül rögzíthetünk. Az adatbázisba való kötegelt beírás nagyságrendekkel gyorsabb, mintha egyesével futtatnánk az SQL parancsokat, továbbá a jól szervezett összesítő táblák következtében, még gyorsabb a statisztikai információk kinyerése. A kötegelt feldolgozásból adódó erőforrás nyereséget az esetek többségében tárolt eljárásokkal, ideiglenes táblákkal és triggerekkel is el lehetne érni, azonban mivel jelenleg nincs szükség azonnal az aktuális eredményekre, sokkal egyszerűbb megvalósítás a kötegelés.

Megvalósítás

Példánkban egy oldalszámlálót készítünk. Az oldalszámláló a látogatott oldalak URL-jét, a látogatók gépének IP címét és a látogatás dátumát naplozza. Továbbá két statisztikai tábla is készül, az egyik napi, a másik havi szinten rögzíti a különféle oldalakhoz tartozó nézettséget. Mindhárom információt kötegelve készítjük és csak időszakosan aktualizáljuk az adatbázist egy szkripttel. Alapvetően két részből áll a megvalósítás, amiben a PHP osztály a kötegelt adatbázis műveletek létrehozásáért, míg a bash script a szinkronizációért felel.

Rendszerkövetelmény

Feladat megvalósításának a futtatási követelményei:

• tetszőleges adatbáziskiszolgáló (a példa MySQL 5.1-re tesztelve)
• PHP 5.x vagy nagyobb (Apache 2.x-en tesztelve)
• cron bejegyzés létrehozása
• bash szkript futtatási lehetőség
• fájl létrehozási jog a PHP kód részére

Program részei

Feladat részei:

./script/sqlbatcher.sh

bash shellben futtatandó SQL feldolgozó szkript

./modules/CSQLBatch.php

SQL Batch osztály

./index.php

példaprogram

./sqlbatches/*.sql

a batch fájlok ide generálódnak

./sqlbatches/archive/*.bak

kötegelt szkriptek lefuttatás utáni archívuma

./sqlbatches/sqlbatch.log

globális naplófájl SQL futási időkkel

Program működése

1. index.php futtatása, az CSQLBatch objektum létrehozása, SQL fájlok elérési útjának a (illetve további műveletek) beállítása
2. amennyiben új SQL fájl jön létre, akkor a kötegelés előtti műveletek beszúrása
3. kötegelendő SQL parancsok beszúrása
4. SQL fájl lezárása előtt a kötegelést befejező műveletek (ha vannak)
5. shell szkript az aktuálisan éppen írás alatt lévő SQL kivételével lefuttatja a kötegelt fájlokat
6. a lefuttatott kötegelt fájlok archíválása az archív könyvtárba

Adatbázis létrehozása

Az adatbázist tester néven hozom létre. Az alap naplózást a tbl_stat tábla, míg az összesítéseket a tbl_stat_daily (napi) és tbl_stat_monthly (havi) táblák látják el. Adatbázist létrehozó szkript:

CREATE DATABASE tester;
CREATE TABLE `tbl_stat` (
  `id_stat` INT(11) UNSIGNED NOT NULL AUTO_INCREMENT,
  `page` VARCHAR(255) NOT NULL,
  `created` TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP,
  `ip_address` INT(10) UNSIGNED NOT NULL,
  PRIMARY KEY  (`id_stat`)
) ENGINE=MYISAM DEFAULT CHARSET=utf8;
CREATE TABLE `tbl_stat_daily` (
  `id_stat_daily` INT(11) UNSIGNED NOT NULL AUTO_INCREMENT,
  `page` VARCHAR(255) NOT NULL,
  `cdate` DATE NOT NULL,
  `counter` INT(11) UNSIGNED NOT NULL,
  PRIMARY KEY  (`id_stat_daily`),
  UNIQUE KEY `idx_page_date` (`page`,`cdate`)
) ENGINE=MYISAM DEFAULT CHARSET=utf8;
CREATE TABLE `tbl_stat_monthly` (
  `id_stat_monthly` INT(11) UNSIGNED NOT NULL AUTO_INCREMENT,
  `page` VARCHAR(255) NOT NULL,
  `cdate` DATE NOT NULL,
  `counter` INT(11) UNSIGNED NOT NULL,
  PRIMARY KEY  (`id_stat_monthly`),
  UNIQUE KEY `idx_page_date` (`page`,`cdate`)
) ENGINE=MYISAM DEFAULT CHARSET=utf8

A példakódok letölthetők. A téma további részei a dolgozat következő fejezeteiben kerülnek kifejtésre.