Быстрый поиск
Введите фрагмент названия статьи для поиска
Грабберы контента с других сайтов
16.06.2009 | Категория: Web-мастеру и не только | Автор: ManHunter
Грабберы контента - это специальные скрипты или программы, которые получают некоторую информацию напрямую из текста html-страниц других сайтов, чаще всего без их ведома или разрешения. Название произошло от транскрипции английского глагола "to grab" - "захватывать", "использовать", хотя и русский вариант корня "грабить" тоже иногда подходит. Вообще, тырить чужой контент и использовать его на своих сайтах нехорошо. Но в некоторых случаях считаю это допустимым, например, когда для мобильных устройств требуется получить облегченные версии страниц сайтов, которые не имеют такой штатной функции. Или же надо удалить со страницы всякую рекламу, а то некоторые ублюдочные сайты умудряются заталкивать баннеры даже в RSS-ленты. Или, например, если требуется получать информацию с сайтов, у которых нет собственных API для выгрузки контента.Самый простой способ получить текст нужной html-страницы сайта - при помощи функции PHP file_get_contents. Текст загруженной страницы разбирается регулярными выражениями. Вот пример граббера для Цитатника Рунета. После извлечения цитат с главной страницы можно вывести их все списком, как сделано в этом примере, или показать случайным образом одну из них.
Code (PHP) : Убрать нумерацию
- <?
- //-----------------------------------------------------------
- // Граббер цитат с Цитатника Рунета bash.org.ru
- // Загружает и парсит главную страницу, цитаты помещает в массив
- //-----------------------------------------------------------
- // Получить html-страницу
- $grab=@file_get_contents("http://bash.org.ru");
- if ($grab) {
- // Заменить теги переноса строки на простые переносы строки
- $grab=str_replace("<br>","\n",$grab);
- // Получить регулярным выражением тексты цитат
- preg_match_all("/<div class=\"vote\">([^>]*>){12}([^<]*)/",$grab,$matches);
- // В массиве содержатся все найденные строки
- for ($i=0; $i<count($matches[2]); $i++) {
- echo nl2br($matches[2][$i]);
- echo '<hr>';
- }
- }
- else {
- echo "Connection Error";
- }
- ?>
Читать статью целиком »
Просмотров: 50838 | Комментариев: 17
Антиникотиновый информер
02.05.2009 | Категория: Web-мастеру и не только | Автор: ManHunter
Антиникотиновый информер
Когда я бросил курить, то в качестве стимула сделал себе такой антиникотиновый информер и использую его в подписи на некоторых форумах. Это PHP-скрипт, который считает в реальном времени сколько всего сэкономлено и выводит результат в виде графического файла.
Code (PHP) : Убрать нумерацию
- <?
- //-------------------------------------------------------------
- // Скрипт антиникотинового информера с интервалами дат
- // Copyright (C) ManHunter / PCL
- // http://www.manhunter.ru
- //-------------------------------------------------------------
- // Настройки информера
- $cig_per_day=20; // Сигарет в сутки, шт.
- $rub_per_day=65; // Денег на сигареты в сутки, руб.
- $nikotin=1.2; // Количество никотина в 1 сигарете, мг.
- $d=28; // Месяц, когда бросил курить
- $y=2008; // Год, когда бросил курить
- $m=7; // День, когда бросил курить
- $h=11; // Время, когда бросил курить, часы
- $i=30; // Время, когда бросил курить, минуты
- $size=10; // Размер шрифта информера
- $font="my_font.ttf"; // Файл с TTF-шрифтом
- $border=10; // Отступ текста от границ
- //-------------------------------------------------------------
- // Дальше лучше ничего без надобности не менять
- function num2word($num,$words) {
- $num=$num%100;
- if ($num>19) { $num=$num%10; }
- switch ($num) {
- case 1: { return($words[0]); }
- case 2:
- case 3:
- case 4: { return($words[1]); }
- default: { return($words[2]); }
- }
- }
- $start_date=mktime($h,$i,0,$m,$d,$y);
- $end_date=time();
- $day=intval(($end_date-$start_date)/(24*60*60));
- $hour=intval(($end_date-$start_date-$day*24*60*60)/(60*60));
- $days_array=Array("день", "дня", "дней");
- $hour_array=Array("час", "часа", "часов");
- // Сгенерировать текст информера
- $str="Не курю: ".$day." ".num2word($day,$days_array)." ".
- ($hour==0?"ровно":$hour." ".num2word($hour,$hour_array))."\n".
- "Не выкурено сигарет: ".
- intval(($day+($hour/24))*$cig_per_day)." шт.\n".
- "Не потрачено денег: ".
- intval(($day+($hour/24))*$rub_per_day)." руб.\n".
- "Не убито лошадок: ".
- intval(($day+($hour/24))*$cig_per_day*$nikotin/50)." шт.";
- // Перевести в юникод, чтобы корректно отображались русские буквы
- $str=iconv('windows-1251','utf-8',$str);
- // Получить размер графического блока для вывода текста
- list($ldx,$ldy,$rdx,$rdy,$rux,$ruy,$lux,$luy)=imageTTFBBox($size,0,$font,$str);
- // Получить размер информера
- $xx=$rdx+$border*2+$size;
- $yy=$rdy+$border*2+$size;
- // Создать изображение
- $im=imageCreatetruecolor($xx,$yy);
- // Определить цвета
- $black=imageColorAllocate($im,0,0,0);
- $red=imageColorAllocate($im,255,0,0);
- $white=imageColorAllocate($im,255,255,255);
- // Белый прямоугольник с красной рамкой
- ImageFilledRectangle($im,0,0,$xx,$yy,$red);
- ImageFilledRectangle($im,1,1,($xx-2),($yy-2),$white);
- // Наложить текст на фон
- imagettftext($im,$size,0,$border+5,$border+$size,$black,$font,$str);
- // Вывести картинку в формате PNG
- Header("Content-type: image/png");
- imagePNG($im);
- ?>
Читать статью целиком »
Просмотров: 7367 | Комментариев: 11
Нанесение текстовых водяных знаков на изображение
16.02.2009 | Категория: Web-мастеру и не только | Автор: ManHunter
Для предотвращения воровства контента часто используются водяные знаки на изображениях. Это может быть логотип сайта, надпись об авторских правах или, например, ссылка на ваш сайт. Для нанесения водяных знаков создано множество различных программ, но при наполнении сайта гораздо удобнее использовать скрипт, который будет маркировать картинки сразу при загрузке на сервер. Я написал такую функцию, наносящую нужный текст в указанное место изображения. Ее особенностью является то, что перед нанесением надписи анализируется цвет картинки в месте, где будет расположен текст. Для темных картинок будет выбран белый цвет надписи с черной рамкой, а для светлых наоборот, будет выбран черный цвет надписи с белой рамкой.Code (PHP) : Убрать нумерацию
- //-------------------------------------------------------------------
- // Функция нанесения текстового водяного знака на изображение
- // Copyright (C) ManHunter / PCL
- // http://www.manhunter.ru
- //-------------------------------------------------------------------
- // Параметры вызова:
- // $picture - путь к файлу картинки на сервере
- // $font - путь к файлу с TrueType-шрифтом на сервере
- // $font_size - размер шрифта
- // $marker - текст водяного знака
- // $watermark_position - положение водяного знака на картинке
- //-------------------------------------------------------------------
- // Константы положения водяного знака на картинке
- define ("WATERMARK_LEFT_BOTTOM",0);
- define ("WATERMARK_LEFT_TOP",1);
- define ("WATERMARK_RIGHT_BOTTOM",2);
- define ("WATERMARK_RIGHT_TOP",3);
- define ("WATERMARK_CENTER",4);
- function Watermark_Image($picture, $font, $font_size, $marker,
- $watermark_position=WATERMARK_LEFT_BOTTOM) {
- // Проверки на наличие файлов и допустимые параметры
- if (!file_exists($picture)) { return false; }
- if (!file_exists($font)) { return false; }
- if ($font_size<10) { return false; }
- if (($marker=trim($marker))=="") { return false; }
- // Получить размеры исходного изображения
- list ($sx,$sy)=GetImageSize($picture);
- if ($sx==0 || $sy==0) { return false; }
- $dst_im=imageCreatetruecolor($sx,$sy);
- // Определить цвета для нанесения водяных знаков
- $black=ImageColorAllocate($dst_im,0,0,0);
- $white=ImageColorAllocate($dst_im,255,255,255);
- // Если расширения нет, то выход с ошибкой
- $pocket=Array();
- eregi("\.([a-z]*)$",$picture,$pocket);
- if ($pocket[1]=="") { return false; }
- // На основании расширения создать картинку
- switch (strtolower($pocket[1])) {
- case "jpeg":
- case "jpg": {
- if (!$im=@ImageCreateFromJpeg($picture)) { return false; }
- break;
- }
- case "gif": {
- if (!$im=@ImageCreateFromGif($picture)) { return false; }
- break;
- }
- case "png": {
- if (!$im=@ImageCreateFromPng($picture)) { return false; }
- break;
- }
- default: { return false; }
- }
- ImageCopyResampled($dst_im, $im, 0, 0, 0, 0, $sx, $sy, $sx, $sy);
- imageDestroy($im);
- // Получить координаты блока под текст
- list($lnx,$lny,$rnx,$rny,$rvx,$rvy,$lvx,$lvy) =
- ImageTTFBBox($font_size,0,$font,$marker);
- // Вычислить размеры блока
- $text_width=$rnx-$lnx;
- $text_height=$rny-$rvy;
- // Получить координаты блока на картинке для нанесения надписи
- switch ($watermark_position) {
- case WATERMARK_LEFT_BOTTOM: {
- $pos_x=10;
- $pos_y=$sy-10;
- break;
- }
- case WATERMARK_RIGHT_BOTTOM: {
- $pos_x=$sx-$text_width-10;
- $pos_y=$sy-10;
- break;
- }
- case WATERMARK_LEFT_TOP: {
- $pos_x=10;
- $pos_y=$text_height+10;
- break;
- }
- case WATERMARK_RIGHT_TOP: {
- $pos_x=$sx-$text_width-10;
- $pos_y=$text_height+10;
- break;
- }
- case WATERMARK_CENTER: {
- $pos_x=intval($sx/2-$text_width/2);
- $pos_y=intval($sy/2+$text_height/2);
- break;
- }
- default: { return false; }
- }
- // Подсчитать количество светлых и темных пикселов в блоке
- $dark=0;
- $light=0;
- for ($x=0; $x<$text_width; $x++) {
- for ($y=0; $y<$text_height; $y++) {
- $color=imageColorAt($dst_im,($pos_x+$x),($pos_y+$y-$text_height));
- list($r,$g,$b)=array_values(imageColorsForIndex($dst_im,$color));
- if (($r+$g+$b)<(128*3)) { $dark++; } else { $light++; }
- }
- }
- // В зависимости от количества светлых и темных точек нанести
- // светлую или темную надпись
- if ($light>$dark) {
- // Темный текст со светлой рамкой
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y-1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y-1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y-1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y+1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y+1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y+1,$white,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y,$black,$font,$marker);
- }
- else {
- // Светлый текст с темной рамкой
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y-1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y-1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y-1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x-1,$pos_y+1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y+1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x+1,$pos_y+1,$black,$font,$marker);
- ImageTTFText($dst_im,$font_size,0,$pos_x,$pos_y,$white,$font,$marker);
- }
- // Записать измененный файл на место
- switch (strtolower($pocket[1])) {
- case "jpeg":
- case "jpg": {
- ImageJPEG($dst_im,$picture,90);
- break;
- }
- case "gif": {
- ImageGIF($dst_im,$picture);
- break;
- }
- case "png": {
- ImagePNG($dst_im,$picture);
- break;
- }
- }
- imageDestroy($dst_im);
- return true;
- }
Читать статью целиком »
Просмотров: 12909 | Комментариев: 10
Парсер REFERER'ов с поисковых систем
04.02.2009 | Категория: Web-мастеру и не только | Автор: ManHunter
Обработка заголовка HTTP referer является одной из важных задач при раскрутке сайта и сборе статистики. По нему можно определить, какие ресурсы ссылаются на ваш сайт. Но особую ценность представляют данные посещений с поисковых систем, так как эта информация позволяет наиболее четко определить, по каким ключевым словам ваш сайт может быть найден, а также проанализировать эффективность поисковой оптимизации вашего ресурса. Если вы пользуетесь сторонними счетчиками посещений, то эту информацию они обычно предоставляют сами. В некоторых случаях такие данные предоставляют серверные системы статистики типа Webalizer. Я принципиально не пользуюсь ни тем, ни другим, обрабатываю все данные самостоятельно. Для этого была написана функция обработки рефереров, которую я использую в своих проектах. Данные поискового запроса обычно передаются методом GET и содержатся в строке браузера, но основная проблема в том, что кодировка этих данных может быть разной даже в пределах одной и той же поисковой системы. Как выяснилось, не везде доступна штатная функция PHP is_unicode(), поэтому для подстраховки пришлось написать свою. Проверка выполняется согласно правилам формирования Юникода.Code (PHP) : Убрать нумерацию
- // Функция проверки является ли переменная строкой в Юникоде
- // Если штатная функция не определена, то применить нашу
- if (!function_exists('is_unicode')) {
- function is_unicode($str) {
- for ($i=0; $i<strlen($str); $i++) {
- // Если символ с кодом больше 191, то возможно это юникод
- if (ord($str[$i])>191) {
- // Следующий символ должен быть в интервале
- // 10000000b ... 10111111b (128...191)
- if (ord($str[($i+1)])<128 || ord($str[($i+1)])>191) {
- // Условие не выполнено, значит это не юникод
- return false;
- }
- else {
- // Пропускаем один байт, т.к. он является частью символа
- $i++;
- }
- }
- }
- // Проверка пройдена, это юникод
- return true;
- }
- }
Читать статью целиком »
Просмотров: 30864 | Комментариев: 27
Шпаргалки для Web-мастера по HTML, CSS и JavaScript
30.11.2008 | Категория: Web-мастеру и не только | Автор: ManHunter
Шпаргалки для Web-мастера по HTML, CSS и JavaScript
В свое время преподаватели учили меня: "Не надо всего знать, надо знать где взять". Для больших объемов информации я, конечно, предпочитаю бумажные справочники. А когда надо быстро посмотреть синтаксис какой-нибудь редко используемой функции, параметры тега или код цвета, то очень выручают онлайн-справочники и файлы-шпаргалки. Вот основные сайты и ресурсы для облегчения поиска.
Читать статью целиком »
Просмотров: 21208 | Комментариев: 13
Материалы, опубликованные на этом сайте, не рекомендуются к просмотру лицам в возрасте до 16 лет без присутствия взрослых.
Вам помог этот сайт?
Поблагодарили 37,741 раз
Поблагодарили 37,741 раз
Буду очень благодарен, если размеcтите мою кнопочку:
 |
Яндекс ИКС: 340 |
 |
 |