Компрессия JS - Форум web мастеров

RXcoder · 25.02.2008, 01:53

Хочу спросить вашего совета.
Вобщем вопрос вот в чем. Начал я тут недавно мутить свой движек для сайтов. А т.к. повсюду только и слышно Web 2.0, Ajax и т.п., решил не изобретать велосипед, а установить готовые решения: xajax, prototype, scriptaculous, prototip. Всё вроде работает, но меня напрягает размер этого барахла. Итого, 1 страница с простенькой всплывающей подсказкой весит чуть-ли не 200 кило.
Решил, что это всё лучше-б сжать gzip'ом чтоли. И родилась такая идея:
В CMS есть специальная дира, в ней лежат *.js файлы. И если запрашивается файл из неё, то выдается он в сжатом виде. Написал пару нехитрых скриптов, и всё вроде работает. Но есть сомнения по поводу разных браузеров/хостингов - везде-ли будет это работать. Может кто уже сталкивался с такой задачей и что посоветует для улучшения этого скрипта. Да и другим людям, столкнувшимся с подобными вещами будет с чего начать.
Например та страница с подсказкой, о которой я писал в начале, теперь весит в 4 раза меньше. А это уже куда лучше.
Итак повторю вопрос: "что можно сделать для улучшения самого скрипта и его универсальности"

Вот скрипт compress.php:

PHP код:

  <?php

// тип компрессии
$compress_type=3;

// 0 - не использовать компрессию
// 1 - програмное сжатие
// 2 - gzip сжатие
// 3 - gzip сжатие, если не поддерживается то програмное сжатие

function program_compress($layout){// заимствовано из xajaxCompress.php
    $layout = str_replace("\r","",$layout);
    $literal_strings = array();
    $lines = explode("\n",$layout);
    $clean = "";
    $inComment = false;
    $literal = "";
    $inQuote = false;
    $escaped = false;
    $quoteChar = "";
    for($i=0;$i<count($lines);$i++){
        $line = $lines[$i];
        $inNormalComment = false;
        for($j=0;$j<strlen($line);$j++){
            $c = substr($line,$j,1);
            $d = substr($line,$j,2);
            if(!$inQuote && !$inComment){
                if(($c=="\"" || $c=="'") && !$inComment && !$inNormalComment){
                    $inQuote = true;
                    $inComment = false;
                    $escaped = false;
                    $quoteChar = $c;
                    $literal = $c;
                }else if($d=="/*" && !$inNormalComment){
                    $inQuote = false;
                    $inComment = true;
                    $escaped = false;
                    $quoteChar = $d;
                    $literal = $d;
                    $j++;
                }else if($d=="//"){
                    $inNormalComment = true;
                    $clean .= $c;
                }else{
                    $clean .= $c;
                }
            }else{
                if($c == $quoteChar && !$escaped && !$inComment){
                    $inQuote = false;
                    $literal .= $c;
                    $clean .= "___" . count($literal_strings) . "___";
                    array_push($literal_strings,$literal);
                }else if($inComment && $d=="*/"){
                    $inComment = false;
                    $literal .= $d;
                    $clean .= "___" . count($literal_strings) . "___";
                    array_push($literal_strings,$literal);
                    $j++;
                }else if($c == "\\" && !$escaped)
                    $escaped = true;
                else
                    $escaped = false;
                $literal .= $c;
            }
        }
        if($inComment) $literal .= "\n";
        $clean .= "\n";
    }
    $lines = explode("\n",$clean);
    for($i=0;$i<count($lines);$i++){
        $line = $lines[$i];
        $line = preg_replace("/\/\/(.*)/","",$line);
        $line = trim($line);
        $line = preg_replace("/\s+/"," ",$line);
        $line = preg_replace("/\s*([!\}\{;,&=\|\-\+\*\/\)\(:])\s*/","\\1",$line);
        $lines[$i] = $line;
    }
    $layout = implode("\n",$lines);
    $layout = preg_replace("/[\n]+/","\n",$layout);
    $layout = preg_replace("/;\n/",";",$layout);
    $layout = preg_replace("/[\n]*\{[\n]*/","{",$layout);
    for($i=0;$i<count($literal_strings);$i++)$layout = str_replace("___".$i."___",$literal_strings[$i],$layout);
    return $layout;
}

function gzip_compress($layout){
    global $supportsGzip;
    $supportsGzip=1;
    if (isset($_SERVER['HTTP_ACCEPT_ENCODING'])||$_SERVER['HTTP_TE']){// Проверка, потдерживается ли gzip
        $enco=($_SERVER['HTTP_TE'])?$_SERVER['HTTP_ACCEPT_ENCODING'].", ".$_SERVER['HTTP_TE']:$_SERVER['HTTP_ACCEPT_ENCODING'];
        $encodings = explode(',', strtolower(preg_replace("/\s+/", "", $enco)));
        if(is_array($encodings)){
            if ((in_array('gzip', $encodings) || in_array('x-gzip', $encodings) || isset($_SERVER['---------------'])) && function_exists('ob_gzhandler') && !ini_get('zlib.output_compression')) {
                $enc = in_array('gzip', $encodings) ? "gzip" : "x-gzip";
                $supportsGzip = 2;
            }
        }else{
            if ((($encodings=='gzip') || ($encodings=='x-gzip') || isset($_SERVER['---------------'])) && function_exists('ob_gzhandler') && !ini_get('zlib.output_compression')) {
                $enc = ($encodings=='gzip') ? "gzip" : "x-gzip";
                $supportsGzip = 2;
            }
        }
    }
    if($supportsGzip==2){// сжать, если можно
        $layout=gzencode($layout, 9, FORCE_GZIP);// сжать данные
        header("Content-Encoding: $enc");// заголовок
        $layout=$layout;
    }
    return $layout;
}

// получаем файл
$q=explode('?',$_SERVER['REQUEST_URI']);
$filename=$q[0];
if(@is_file($_SERVER["DOCUMENT_ROOT"].$filename)){
    $layout=implode('',file($_SERVER["DOCUMENT_ROOT"].$filename));
    $len1=strlen($layout);// запоминаем его размер до сжатия
    $layout2=$layout;
    if($compress_type==1){// програмная компрессия
        $layout=program_compress($layout);
    }elseif($compress_type==2){// gzip компрессия
        $layout=gzip_compress($layout);
    }if($compress_type==3){// gzip компрессия
        $layout=gzip_compress($layout);
        // если gzip компрессия не сработала - програмная компрессия
        if($supportsGzip==1)$layout=program_compress($layout);
    }

    $len2=strlen($layout);
    $layout=(strlen($layout2)<$len2)?$layout2:$layout;// если после сжатия файл стал больше исходного

    // вывод
    header ("Content-type: text/javascript");
    echo "$layout";
}else{
    echo "alert('Файл не найден: $filename');";
}

?>


=====================================

+ .htaccess файл:


Options +FollowSymlinks
<IfModule mod_rewrite.c>
    RewriteEngine On
    RewriteCond %{REQUEST_FILENAME} (.*)\.js$
    RewriteRule ^(.*)$ compress.php [L]
</IfModule>


=====================================

сори что текст не отформатирован, пользуюсь оперой, а она здесь глючит.

RXcoder · 25.02.2008, 01:59

Да, как использовать забыл сказать:
1. создаем диру на сайте. допустим js
2. закидываем туда эти 2 файла
3. кидаем туда js скрипты, чтобы потом подключать их со своих страниц
4. проверяем. Если что-то нетак - пишем сюда

Devil · 27.02.2008, 19:14

RXcoder, проверил на двух хостингах на мСхост и Можордомо - всё прекрасно пашет, спасибо за скрипт

RXcoder · 02.03.2008, 04:30

эт хорошо, а то я только на денвере тестироавл. Были сомнения, что в реальной работе что-нибудь не так пойдет.
Кстате можно и в поддиректории js скрипты закидывать, не обязательно в папку с этими скриптами. Можно немного их подправить для сжатия html, css и других файлов, которые сами себя сжать не могут. Например txt.

Devil · 02.03.2008, 06:11

RXcoder, вся шутка в том, что почему - то скрипт неадекватен при гзип на шестом уровне...начинаються тормаза просто ад...

RXcoder · 02.03.2008, 06:38

эт хорошо, а то я только на денвере тестироавл. Были сомнения, что в реальной работе что-нибудь не так пойдет.
Кстате можно и в поддиректории js скрипты закидывать, не обязательно в папку с этими скриптами. Можно немного их подправить для сжатия html, css и других файлов, которые сами себя сжать не могут. Например txt.

RXcoder · 02.03.2008, 06:43

Извиняюсь, 2й раз сообщение отправил по ошибке.
Ну тогда на 4й уровень поставить и не парится из-за лишних нескольких байт. Так хоть пошустрей работать будет.

RXcoder · 02.03.2008, 06:56

Сам скрипт не должен сильно напрягать сервер, но вот функция сжатия, выдранная мной из компрессора xajax'a (я обозвал её - program_compress()) действительно тормозная. Попробуй в начале скрипта поставить только gzip -

$compress_type=2;

Если помогло, значит в ней дело.

Я потому и написал, что интересно было узнать, как это дело будет вести себя в реальных условиях.

Devil · 02.03.2008, 17:23

RXcoder, Да при 4 уровне, всё шшикарно на выше указанных хостах. Спасибо

RXcoder · 03.03.2008, 05:14

Да незачто, пусть люди юзают.