Экономия трафика, плюсы и плюсы
5 сентября 2006
Рубрика: Интернет и сети.
Автор: .

pic
Что знает простой пользователь об экономии трафика? Скорее всего где-то что-то слышал, но не пользовался, ибо разбираться обычно лень, да и продираться через заумные, понятные только специалистам термины, не очень-то хочется. Однако все не так страшно как кажется, попытаемся собрать известную о сжатии трафика информацию «в одну кучу». Что же нам известно?

Известно, например, что браузер Opera существует в варианте для карманных компьютеров (наладонников) и для сотовых телефонов. При этом все посещаемые странички проходят через прокси-сервер создателей браузера, на котором картинки уменьшаются, а тексты сжимаются. На принимающем устройстве тексты разархивируются, чем достигается экономия трафика. Еще мини-Опера «ломает» широкие таблицы, располагая столбцы по вертикали, чтобы они поместились в экранчики мобильных устройств, но это уже к сжатию не относится. Обсуждения настройки мини-Оперы для КПК найдете на форуме http://palmz.in/board/index.php?showtopic=24370.

pic

Но мобильные устройства пока в Узбекистане больше из области экзотики, посмотрим, что известно о сжатии для простых пользователей Сети. Во-первых, сжатие страниц уже используется и современные браузеры умеют из распаковывать. Например, читаем объявление на форуме известной Афиши-уз:

18-05-2006 01:07

Мы увеличили скорость загрузки страницы на Блоге и Форуме за счёт специальной компрессии страниц, распаковка которых происходит автоматически на вашем компьютере (это абсолютно незаметно и только при загрузке страницы). Данное изменения позволяет загружать страницы во много-много раз быстрее — это достигается за счёт того, что страница автоматически архивируется (компрессия) и отправляется вам, на вашем компьютере она распаковывается и показывается. В итоге заархивированная страница может весить до 20 раз меньше!

Пожалуйста, оставляйте свои субъективные ощущения о скорости здесь. Если будут какие-то проблемы, обязательно пишите!

Конец цитаты. Попробуйте зайти на форум при Афише-уз – загружается мгновенно. Не только потому, что я, как и Афиша, находимся на Саркоре, другие саркоровские сайты открываются чувствительно дольше. Тот же метод сжатия применен в движке для блогов WordPress, там в настройках можно включать опцию «Применить сжатие страниц», по отзывам посетителей при включенной опции блоги открываются быстрее.

Вообще говоря, все «продвинутые» движки для сайтов предлагают подобные возможности. Вот, например, как описывает свой модуль компрессии лидер российского сайтостроения популярный БИТРИКС
http://www.vip-master.ru/progr/about_bitrix/o_compress.php

Модуль компрессии при передаче данных между сервером и клиентом компрессирует страницы для ускорения вывода содержания сайта пользователям. Модуль в несколько раз уменьшает объем передаваемых HTML-данных между сайтом и браузером клиента, что существенно увеличивает скорость работы как для посетителей, так и для администраторов сайта.
Модуль отличается тем, что:
позволяет в несколько раз (от 4 до 20) уменьшить объем передаваемых html-данных между сервером и браузером клиента;
работает незаметно для клиента и не требует установки никаких дополнительных модулей в браузер клиента (все браузеры начиная с 4 версий поддерживают компрессию данных в полном объеме);
безошибочно определяет, поддерживает ли браузер или прокси-сервер клиента компрессию данных;
существенно увеличивает скорость работы с сайтом для посетителей и администраторов за счет уменьшения объемов передаваемых данных и изменения динамики загрузки страницы (сначала загружается компрессированный HTML страницы, показывается клиенту и только после этого начинается загрузка изображений);
совместим с любым хостингом и использует стандартные модули PHP;
минимально загружает процессоры веб-сервера;
обрабатывает ряд ошибок браузера MS Internet Explorer 5.0, 5.5 и 6.0, что является необходимым условием для корректной работы компрессии в IE.

Есть модуль компрессии и у популярнейшей «Джумлы». То есть, шаги со стороны разработчиков по сжатию трафика прослеживаются и при желании ими можно воспользоваться.

А что же известно о сжатии трафика со стороны пользователей?

Сначала проверим слухи о том, что ROL (он же наш BUZTON) использует сжатие. Заходим на местный ROL http://www.rol.uz (почему-то без www не открывается? Ну да ладно). Никакой информации о сжатии нет. Однако на главной российской страничке http://www.rol.ru/propel/ есть интересная информация об «Ускорителе» Интернета для пользователей ROL’a.

Как сделать дайлап быстрее? РОЛ предлагает Ускоритель — программа доступна всем клиентам РОЛ совершенно бесплатно! Просто скачайте РОЛ Ускоритель, установите его и наслаждайтесь быстрым путешествием по Сети.
РОЛ Ускоритель — уникальная программа, которая позволяет ускорить загрузку любых Интернет-страниц в несколько раз. Сжимается как текстовое содержимое, так и графические файлы. На обычном модеме похождения по Сети становятся такими же комфортными, как и на выделенной линии.

О программе

Клиентская часть РОЛ Ускоритель запускается на вашем компьютере как локальный прокси. РОЛ Ускоритель поддерживает постоянное соединение с сервером РОЛ Ускорителя чтобы исключить соединения, которые должны быть осуществлены при каждом запросе браузера. РОЛ Ускоритель декодирует и кэширует всю информацию, получаемую с сервера, затем передает ее в браузер.

pic

Методы ускорения.

РОЛ Ускоритель ускоряет загрузку содержимого веб-страниц тремя способами:
Сжатие. РОЛ Ускоритель обрабатывает текст и графику более эффективно, используя технологию сжатия, которая осуществляет логическое кодирование содержимого и элементов веб-страниц, передаваемых в браузер.

Кэширование. РОЛ Ускоритель особым образом сохраняет и затем вновь использует сожержимое и элементы страниц, которые были загружены ранее. Поэтому чем дольше вы используете РОЛ Ускоритель на вашем компьютере, тем быстрее будут загружаться Интернет-страницы.

Постоянное соединение. РОЛ Ускоритель использует собственные методы для точного управления и оптимизации соединения между модемом и нашими серверами, использующие постоянное соединение.

Резюме. РОЛ Ускоритель – программа для ускорения работы в Интернете для пользователей с низкоскоростным доступом, которая увеличивает скорость получения статического и динамического содержимого веб-страниц, включая участок от провайдера до конечного пользователя. Кстати, для соединений по GPRS и ADSL на скоростях менее 256 Kbps Ускоритель также дает заметный эффект.

Конец цитаты. Отбросив рекламные заклинания и не очень нужное дополнительное кеширование, выделим суть – Ускоритель сжимает странички как архиватор, а программа на компьютере клиента их восстанавливает. Поэтому не сжимаются Ускорителем не все файлы.

Что не будет сжато?

Кроме тех элементов, размеры которых максимально оптимизируются при создании, РОЛ Ускоритель не осуществляет ускорение информации следующих видов:

Потоковые медиа-, аудио- и видеофайлы

Защищенные страницы, используемые для онлайн выполнения банковских операций, оплаты кредитными картами или страницы, доступные через VPN.

Файлы, скачиваемые вне браузера, например через FTP

Игры, использующие специализированные не-HTTP протоколы

Конец цитаты. Интересно бы узнать отзывы пользователей Buzton’a-ROL’a – на сколько экономит трафик предлагаемый «Ускоритель»?

А что же делать абонентам других провайдеров. Во-первых, существуют специальные программы, сжимающие трафик. Например, WebWarper 2.007. Вот что написано в описание программы.

Интернет-сервис, позволяющий увеличить скорость загрузки веб-страниц (по утверждению разработчика в 2-5 раз), сократив при этом входящий трафик. Работа сервиса основана на новом стандарте компрессии HTML-данных, известном как «GZip Encoding». Для упрощения пользования сервисом вы можете установить модуль WebWarper BIM, интегрируемый в браузер (только для MS Internet Explorer). Подробнее о работе сервиса вы узнаете на сайте разработчика — компании SIAMS.

Немного смущает дата последнего обновления программы – август 2001 года, но, судя по отзывам на http://www.freeware.ru/program_prog_id_2840.html у кого-то она работала и сжимала трафик, хотя и надоедала рекламными баннерами.

А можно ли экономить трафик вообще без установки на компьютер программ?

Можно! Подсказали знакомые. Есть такой сервис http://webwarper.net/ — на английском языке, но некоторые признаки явно выдают его русскоязычное происхождение. И точно – есть русскоязычная версия сервиса http://webwarper.net/ru/. Читаем и пытаемся разобраться.

pic

WebWarper — это бесплатный многофункциональный Internet-сервис с веб-интерфейсом. Сегодня основная его функция — экономия трафика пользователя. Также WebWarper защищает от вирусов, служит анонимайзером (скрывает присутствие посетителя на сайте) и в определенных случаях ускоряет доступ в Internet.

Как известно, большинство веб-страниц — это обычные тексты, созданные в формате HTML. Тексты неплохо поддаются сжатию, а HTML-тексты сжимаются особенно хорошо — иногда в 5 и более раз. Если веб-страницу сжать, переслать в сжатом виде в браузер и разархивировать там, то будет затрачено меньше трафика. Сервис WebWarper реализует эту идею: сервер webwarper.net читает страницу с указанного вами сайта, cжимает ее и отправляет вам. Разархивацией занимается браузер: все современные браузеры умеют принимать сжатые файлы и распаковывать их «на лету».

Многие сайты сами сжимают свои страницы, например, крупные порталы уровня yandex.ru. Но и для таких сайтов WebWarper может сэкономить трафик. Дело в том, что почти все HTML-тексты содержат лишнюю информацию, не влияющую на внешний вид страницы — пробелы, пустые строки, комментарии и специальные указания для поисковых роботов. WebWarper все это убирает.

Кроме стандартного сжатия, у WebWarper есть специальный «сверхплотный» режим. Вид страницы в этом режиме меняется, причем довольно существенно — удаляется вся графика, скрипты и прочие «украшения». Однако текстовая информация, которая обычно является главным содержимым сайта, в большинстве случаев остается читабельной. Посмотрите, как выглядит в сверхплотном режиме сайт Yahoo!. Хотя этот сайт сам сжимает свои страницы, тем не менее, утилита измерения трафика показывает ощутимую экономию.

Сверхплотный режим может быть особенно полезен владельцам сотовых телефонов. Сложное оформление на маленьком экране не смотрится, а вот экономия, с учетом недешевого трафика сотовых, может быть ценной.

Сжатие страниц может иметь дополнительный эффект в виде ускорения доступа, так как клиенту передается меньше информации. Ускорение имеет место далеко не всегда. При использовании качественной линии связи скорость появления страниц вряд ли возрастет; более того, доступ может замедлиться. Может оказаться, что скорость доступа до американского сервера webwarper.net намного меньше, чем до исходного сайта, и даже сжатые данные дойдут медленнее, чем несжатые с оригинального сервера. Но когда интернет-канал действительно плох (скажем, вы находитесь в интернет-кафе в маленьком курортном городке), WebWarper может не просто ускорить доступ, а оказаться единственным способом попасть на желаемый сайт.

WebWarper, будучи бесплатным сервисом, окупает себя за счет рекламы. Это неприятно для пользователей, тем более, что реклама может свести на нет почти все преимущества (например, потратить много трафика). Понимая это, авторы WebWarper предоставили вам редкую возможность — полное бесплатное отключение всей рекламы. Все, что требуется для этого — щелкнуть мышкой по соответствующей ссылке на рекламной панели. Авторы согласны, что постоянные пользователи имеют право работать «по-человечески», и достаточно, если рекламу увидят лишь новые посетители.

Отключение рекламы действует некоторое время, в текущей версии — 18 часов. Затем реклама снова включается, и ее опять нужно отключать. Фактически, постоянные пользователи видят рекламу один раз в день, когда первый раз используют WebWarper — после чего немедленно отключают ее. Но если даже однократный просмотр рекламы в день вызывает неудобства, то можно за 8,9 долларов США купить регистрационный код, позволяющий отключить рекламу на год.

По отзывам знакомых сервис что-то сжимает, но отключать все время рекламу довольно хлопотно, и забываешь, что без отключения рекламы он не сжимает.

Еще недавно заработал в режиме тестирования сервис http://www.tcompressor.ru/ — вот что он предлагает.

TrafficCompressor — это Интернет-сервис, который сжимает данные, полученные и отправленные через Интернет, например, веб-страницы, e-mail, Usenet, ICQ, IRC сообщения и многие другие виды трафика. В результате сжатия ваш Интернет трафик может быть значительно уменьшен. Уменьшение трафика может достигать 40% — 60% от вашего общего трафика, если вы используете Интернет в основном для просмотра сайтов и обмена сообщениями.

TrafficCompressor может быть особенно полезен для пользователей, которые оплачивают доступ в Интернет в зависимости от объёма полученного трафика, например, для пользователей GPRS и ADSL Интернет соединений. TrafficCompressor помогает вам экономить деньги, экономя ваш Интернет трафик.

Также TrafficCompressor может быть полезен пользователям медленных и низкокачественных Интернет соединений, т.к. TrafficCompressor позволяет увеличить скорость загрузки страниц и других данных за счёт уменьшения их размера.

pic

Ждем, когда он заработает в полную силу.
Еще слышал разговоры умных людей о том, что хорошо сжимает трафик VPN.

VPN (virtual private network) — виртуальная частная сеть, технология, позволяющая c помощью постоянного доступа к сети Интернет связывать удаленные компьютеры в локальную сеть по защищенным каналам связи. Например, можно организовать закрытую локальную сеть предприятия, объединяющую несколько офисов, даже если офисы находятся в разных городах. Для пользователей такой сети все компьютеры предприятия будут доступны так же, как при обычном локальном соединении. Вся информация передается в зашифрованном виде, что обеспечивает защиту от несанкционированного доступа.

Технология VPN позволяет:

снизить расходы на построение и эксплуатацию сети филиалов предприятия;
обеспечить простой доступ к удаленной информации, сохраняя при этом ее защищенность;

легко масштабировать сеть.

На этом описание VPN прекращаю – ясно, что для рядовых пользователей это недоступно. Просто будем знать о такой технологии.

Еще недавно обратил внимание на сервис http://sits.com.ru – там среди обычных подключений и хостинга предлагается услуга «русский трафик». Забавная рекламная находка – придать трафику национальность, но, во всяком случае, запоминается ничуть не хуже иных корявых брендов. Но нас конкретно интересуют не все услуги бренда, а лишь сервис Globax. Читаем описание.

Globax — Интенсивное развитие сети Интернет и постоянная конкуренция спутниковых, мобильных, наземных и беспроводных провайдеров поднимает множество вопросов и сложностей использования Интернет через различные средства коммуникаций. Самые серьезные вопросы из них — активное использование канала связи, сложность и нестабильность соединения, задержки, высокая стоимость каналов связи. Данный продукт предназначен для решения этих проблем.

Globax позволяет организовать соединение минимальными затратами на настройки сопутствующего ПО, и позволяет использовать каналы связи максимально эффективно

pic

Программа организует виртуальный туннель между и сервером (сервер Globax установленный на передающей платформе(в серверной стойке) сервис-провайдера интернет, либо соединенный магистральным каналом с платформой сервис провайдера (предпочтительно без потерь пакетов). Данный канал заменяет TCP/IP, и позволяет «пробрасывать» запросы через виртуальный туннель в сеть Интернет.

Я вступил в переписку с автором проекта Globax. Вообще говоря, я кровно заинтересован в таком сервисе. Я подключен к Интернету через Саркор на eXtreme по плану Фристайл, то есть с лимитом в 260 Мб в месяц. Это очень мало, я иногда отключаю в браузере картинки, но все равно каждый месяц перебираю лимит. В общем-то, перебранный трафик не такой уж и дорогой (особенно ночью – 2,5 цента за мегабайт) – все зависит от объема. В сентябре же мне предстоит работа в жюри Интернет-конкурса Татарстана и, возможно, в жюри казахстанской премии, так что прощай экономия.

Так что же предлагает Globax и как этим толково воспользоваться. Предлагается скачать небольшую программку и установить ее, потом назначить в баузере принудительный маршрут через прокси-сервер от Globax. Первый и главный вопрос – где находится сервер, внутри Tas-IX или вне? Ответ – вне. (Точнее, ответ гласил, что плата за трафик у наших хостеров на порядок дороже, чем в России, Да и основной смысл ведь сжимать информацию, получаемую по внешнему каналу.) А у меня значительная часть посещений происходит внутри Саркора – Афиша-уз, Торг.уз, УзА.уз и мои блоги хостятся на Саркоре. Ходить на них через внешний сервер – себе дороже получится. То же относится и к пользователям услуг JET от TPS для которых внутренний трафик не тарифицируется. Единственный выход – пользоваться двумя браузерами, один из которых настроить на прокси от Globax и посещать им «внешние» сайты и второй оставить для посещения «внутренних сайтов. Для меня это не проблема, так как установлено несколько браузеров, не думая отдал в жертву эксперименту Оперу, наверное еще и потому, что Опера считается самым быстрым браузером.

Мне дали 500 мегабайт для тестирования, установил программу, дали пароли и все заработало. Сайты открываются очень быстро, скоростью доволен, во всяком случае, прокси-сервер не тормозит.

Хотел узнать побольше о программе, но автор сказал, что сайт скоро будет расширяться, ибо на нем мало информации, и прислал мне дополнительные сведения.

Ускоритель Globax — это зарекомендовавший себя продукт, который разрабатывался не один год, и пользуется большой и, главное, заслуженной популярностью среди многочисленных пользователей Internet, в том числе и среди клиентов операторов спутникового доступа в Internet. За счет используемой технологии данный сервис позволяет не только увеличить скорость и повысить комфортность работы, но и сократить объем передаваемых данных, последнее особенно актуально для абонентов, использующих GPRS в качестве «прямого», запросного канала: в связке со спутниковым оператором исходящий трафик минимален, а входящий по «прямому» каналу и вовсе отсутствует.

Сколько же я экономлю? На этот вопрос можно найти ответ на специальном сервисе статистики.

pic

Как видно из отчета за последние сутки, предназначаемые мне 23,62 Мб были ужаты до 17,68 Мб, что соответствует почти 75%, то есть, экономилась четверть трафика. За трое суток плотного использования сервиса 61,2 Мб превратились для меня в 41,57 Мб, что составляет 68%, экономия почти в треть. Выгода очевидна. Да, о цене-то не сказал – услуга стоит 2 доллара за гигабайт (входящего трафика, естественно). То есть, за мегабайт получается 0,2 цента. Против 6 или 7 центов за перебранный трафик. Вопрос лишь в том, что трудно заплатить эти самые 2 доллара за гигабайт, единственная возможность – Webmoney, но у нас в этом направлении были известные сдвиги, при желании можно завести кошелек и положить на него деньги. Да, в ходе переписки выяснилось, что в ближайшее время тарифы снизятся и будут гибкими. И вообще — в ближайшие дни должен обновиться сайт сервиса Globax – наверняка тогда найдете на нем больше информации о проекте. А пока напомню, что кроме Globax сервер sits.com.ru предлагает услуги VPN и Proxy, вот как они преподносятся.

Технология Виртуальных Частных Сетей сервиса «Русский трафик» обеспечивает подключение компьютера пользователя к нашему VPN/Proxy/Globax-серверу поверх уже установленного соединения общедоступной сети (например Интернет). При помощи специального программного и технического обеспечения организуется новое соединение, причем пользователь получает внешний IP из русского сегмента сети Интернет. За счет этого организуется свободный доступ к многочисленным ресурсам русскоязычного сегмента Сети, недоступных для IP-адресов из зарубежных подсетей.

Типы подключений

VPN — это безопасный канал, который подразумевает шифрование всего трафика от вашего компьютера до VPN сервера. В настоящее время защищённые виртуальные сети приобрели большую популярность. Для защиты конфиденциальных данных, передаваемых между двумя точками, были разработаны туннелирующие протоколы (tunneling protocols). Туннелирующий протокол обеспечивает шифрование данных следующих из точки их отправки в точку назначения, и, кроме того, обеспечивает контроль целостности данных и аутентификацию. Туннелирование — основа VPN. VPN — это безопасная и закрытая передача данных через сети общего доступа. VPN является обособленной виртуальной сетью вашей компании в рамках опорной сети оператора. Таким образом, для включения офиса в единую корпоративную сеть необходимо только создать канал передачи данных между ним и ближайшей точкой присутствия провайдера.

Proxy — является посредником между Вашим компьютером и web-серверами. При использовании proxy Ваш компьютер не обращается к web-серверам напрямую, а посылает запрос на скачивание web-страниц, картинок и файлов proxy-серверу, который сам обращается в Internet за определенными файлами.

Программа организует виртуальный туннель между и сервером (сервер Globax установленный на передающей платформе(в серверной стойке) сервис-провайдера интернет, либо соединенный магистральным каналом с платформой сервис провайдера (предпочтительно без потерь пакетов). Данный канал заменяет TCP/IP, и позволяет «пробрасывать» запросы через виртуальный туннель в сеть Интернет.

Вообще технология довольно интересная, почему бы ею не воспользоваться всем нашим провайдерам? Это позволило бы разгрузить каналы и ускорить «доставку сайтов» абонентам.
Тому, кто заинтересовался, рекомендую связаться с автором проекта
ICQ # 941878 — Служба тех. поддержки.
ICQ #1288442 — Отдел продаж.
Техническая поддержка — support@sits.com.ru
По вопросам сотрудничества — support@sits.com.ru

Orphus system
В Telegram
В Одноклассники
ВКонтакте