Архивы наполнение сайтов - Сообщество разработчиков скриптов Human Emulator

Скрипт Human Emulator добавления контента на сайт.

На нашем сайте вы уже можете найти скрипт, который добавляет автоматом материалы в блог WordPress. Но как же быть если у вас обычный сайт, который использует обычный html+css. Очень просто заливать статьи на сайт через ftp.
Допустим стоит задача брать новости с заданного сайта и публиковать их у себя на сайте. Прежде всего найдём сайт донор новостей нужной тематики.
Причём найдём сайт на украинском языке, для того что бы переводить эти новости и публиковать у себя. Не забудьте проверить может быть его уже кто то переводит, а нам всё таки интересен уникальный контент.
Итак мы нашли такой сайт. Далее мы пишем разбор нужных нам страниц.
Перед этим мы уже приготовили шаблоны, по котором мы будем создавать страницы для своего сайта.
Пускай это будет сама новостная страница, страница всех новостей, и главная страница сайта.
В шаблонах мы указываем ключи для замены, как указано ниже в примере:

<html>
	<head>
	<title>{TITLE}</title>
	<meta name="keywords" content="{KEYS}">
	<meta name="description" content="новости">

<?include("../../top.php");?>
<?include("../../mid.php");?>

             <h5>{TITLE}</h5>
<br>			 
{IMG}{BODY}			 
<br><br>
<i><font size="2" color="#000000">По материалам:</font></i> {SITE}
<br><br><br>
<a href="../../index_news.php" class="url_caption">Все новости</a>	
<br>
<?include("../../bottom.php");?>
</i>

<html>

<head>

<title>{TITLE}</title>

<?include("../../top.php");?>

<?include("../../mid.php");?>

<h5>{TITLE}</h5>

<br>

{IMG}{BODY}

<i><font size="2" color="#000000">По материалам:</font></i> {SITE}

<a href="../../index_news.php" class="url_caption">Все новости</a>

<br>

<?include("../../bottom.php");?>

</i>

Не трудно догадаться, что {TITLE} — это название новости или статьи, {KEYS} — это ключи (мы их получаем из названия — берём его целиком или делим, заменяя пробелы на , ),{IMG} — это вставляемый рисунок, {BODY} — сама статья или новость, {SITE} — это источник статьи или новости его можно указывать, а можно нет.

Настройки скрипта:

// ////////// настройки скрипта///////////////////
// настройки ftp для вашего сайта
$ftp_server ="имя вашего сайта без ftp";
$ftp_user="ftp логин";
$ftp_pass="ftp пароль";

// пути к шаблонам
$tmp_index="data/tmp_1.php";
$tmp_news="data/tmp_2.php";
$tmp_ind_news="data/tmp_3.php";
// папка с результатами
$res_folder="res/";
// путь к папке с рисунками
$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\data\\images\\" ;
// полный путь к папке с результатами для загрузки по ftp 
$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\res\\" ;
// количество добавляемых новостей за раз генерим случайным образом от 1 до 3
$cnt_news=rand(1,3);
// счётчик новостей для имён новостей
$founded_news=0;

// ////////// настройки скрипта///////////////////

// настройки ftp для вашего сайта

$ftp_server ="имя вашего сайта без ftp";

$ftp_user="ftp логин";

$ftp_pass="ftp пароль";

// пути к шаблонам

$tmp_index="data/tmp_1.php";

$tmp_news="data/tmp_2.php";

$tmp_ind_news="data/tmp_3.php";

// папка с результатами

$res_folder="res/";

// путь к папке с рисунками

$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\data\\images\\" ;

// полный путь к папке с результатами для загрузки по ftp

$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\res\\" ;

// количество добавляемых новостей за раз генерим случайным образом от 1 до 3

$cnt_news=rand(1,3);

// счётчик новостей для имён новостей

$founded_news=0;

Этот скрипт запускается по расписанию каждый день без малейшего вашего участия и добавляет нужный контент на сайт автоматом. На первых парах придётся понаблюдать за ним и устранить недочёты и ошибки в работе.
Когда всё встанет на рельсы вам лишь периодически нужно будет смотреть ничего ли не изменилось на сайте доноре.
Скрипт может быть легко вами изменён, можно добавить несколько доноров. Так же можно в зависимости от количества собранных уже новостей делить страницу с новостями на подстраницы 1,2,3 и т.д. Всё ограничивается лишь вашей фантазией 🙂

Ниже приведёт пример подобного скрипта:

<?php
$xhe_host ="127.0.0.1:7010";
// The following code is required to properly run XWeb Human Emulator
require("../../Templates/xweb_human_emulator.php");

// ////////// настройки скрипта///////////////////
// настройки ftp 
$ftp_server ="имя вашего сайта без ftp";
$ftp_user="ftp логин";
$ftp_pass="ftp пароль";

// пути к шаблонам
$tmp_index="data/tmp_1.php";
$tmp_news="data/tmp_2.php";
$tmp_ind_news="data/tmp_3.php";
// папка с результатами
$res_folder="res/";
// путь к папке с рисунками
$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\data\\images\\" ;
// полный путь к папке с результатами
$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\res\\" ;
// количество добавляемых новостей
$cnt_news=rand(1,3);
// счётчик новостей
$founded_news=0;

// режим отладки
$dbg=true;
// /////////////////// дополнительные модули /////////////////////
// класс работы с ftp 
include "ftp.php";
// функции 
require_once("functions.php");

// ///////////////////// script /////////////////////////////////////////////////////////
debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");
// текущая дата
 $str_date=date("d.m.Y ");//"30.08.2012 ";//
// переходим на сайт
$browser->navigate("сайт донор новостей");

$news=$webpage->get_body_inter_prefix_all("<table class=\"contentpaneopen\">","</table>");
$a_news=explode("<br>",$news);
for($i=0;$i<count($a_news)-1;$i++)
{
   // проверим дату новости 
   if(strpos($a_news[$i+1],$str_date))
   {
      $founded_news++;
      debug_mess("нашли новость $founded_news на сайт донор новостей");
      $href_news=get_string($a_news[$i],"href=\"","\">");
      // название новости
      $title_news=$anchor->get_inner_text_by_href($href_news,false);
      $anchor->click_by_href($href_news,false);
      
      // получим название файла
      $img_src=$image->get_attribute_by_src("/images/news/",false,"src");
      $img_src=str_replace("/images/news/","",$img_src);
      // alt рисунка 
      $img_alt=$image->get_attribute_by_src("/images/news/",false,"alt");
      // сохраним картинку
      $image->screenshot_by_src($img_folder.$img_src,"/images/news/",false);
     
      // разбор новости
      $bd = $webpage->get_body();
      $bd = get_string($bd,"<img class=\"img\"","Anywhere -->");
      $bd_news = get_string($bd,"</noindex>","<!-- START: Modules");

      // переведём
      $title_news=translate($title_news);
      $img_alt=translate($img_alt);
      $bd_news=translate($bd_news);

      // создадим страницы для сайта
      create_pages($title_news,$bd_news,$img_src,$img_alt,"сайт донор новостей");

      if($founded_news>=$cnt_news)
        break;
   }
}

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");

// перезапустим для отчистки памяти
//$app->restart();

// Quit
$app->quit();
?>

<?php

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator

require("../../Templates/xweb_human_emulator.php");

// ////////// настройки скрипта///////////////////

// настройки ftp

$ftp_server ="имя вашего сайта без ftp";

$ftp_user="ftp логин";

$ftp_pass="ftp пароль";

// пути к шаблонам

$tmp_index="data/tmp_1.php";

$tmp_news="data/tmp_2.php";

$tmp_ind_news="data/tmp_3.php";

// папка с результатами

$res_folder="res/";

// путь к папке с рисунками

$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\data\\images\\" ;

// полный путь к папке с результатами

$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\add_news\\res\\" ;

// количество добавляемых новостей

$cnt_news=rand(1,3);

// счётчик новостей

$founded_news=0;

// режим отладки

$dbg=true;

// /////////////////// дополнительные модули /////////////////////

// класс работы с ftp

include "ftp.php";

// функции

require_once("functions.php");

// ///////////////////// script /////////////////////////////////////////////////////////

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");

// текущая дата

$str_date=date("d.m.Y ");//"30.08.2012 ";//

// переходим на сайт

$browser->navigate("сайт донор новостей");

$news=$webpage->get_body_inter_prefix_all("<table class=\"contentpaneopen\">","</table>");

$a_news=explode("<br>",$news);

for($i=0;$i<count($a_news)-1;$i++)

{

// проверим дату новости

if(strpos($a_news[$i+1],$str_date))

{

$founded_news++;

debug_mess("нашли новость $founded_news на сайт донор новостей");

$href_news=get_string($a_news[$i],"href=\"","\">");

// название новости

$title_news=$anchor->get_inner_text_by_href($href_news,false);

$anchor->click_by_href($href_news,false);

// получим название файла

$img_src=$image->get_attribute_by_src("/images/news/",false,"src");

$img_src=str_replace("/images/news/","",$img_src);

// alt рисунка

$img_alt=$image->get_attribute_by_src("/images/news/",false,"alt");

// сохраним картинку

$image->screenshot_by_src($img_folder.$img_src,"/images/news/",false);

// разбор новости

$bd = $webpage->get_body();

$bd = get_string($bd,"<img class=\"img\"","Anywhere -->");

$bd_news = get_string($bd,"</noindex>","<!-- START: Modules");

// переведём

$title_news=translate($title_news);

$img_alt=translate($img_alt);

$bd_news=translate($bd_news);

// создадим страницы для сайта

create_pages($title_news,$bd_news,$img_src,$img_alt,"сайт донор новостей");

if($founded_news>=$cnt_news)

break;

}

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");

// перезапустим для отчистки памяти

//$app->restart();

// Quit

$app->quit();

Скрипт написан 20.09.2012 в Human Emulator 4.4.19 Advanced.
На момент публикации статьи 22.09.2012 скрипт был рабочий.

скачать скрипт

Скрипт Human Emulator для наполнения сайта контентом, используя Google переводчик

Проект x-scripts.com решил поставить эксперимент. Суть эксперимента в следующем: наполнение сайта контентом, используя гугль переводчик. Для этого мы взяли домен и поставили туда WordPress. Темой для нашего блога выбрали самооборону. Язык блога Украинский. Подготовив всё к публикациям статей, мы в поисковике нашли источники для будущих переводов. Сайтов на русском языке про самооборону в интернете достаточно и разнообразного контента на эту тему много. Проделав все подготовительные работы мы написали скрипт, который берёт статьи с сайтов источников, переводит их с помощью Google переводчика и публикует в наш блог. Публикация в блог осуществляется через админку WordPress. Каждой публикуемой статье задаётся категория и тэги. Скрипт установлен на отдельном компе и запускается раз в сутки с помощью расписания скриптов, публикуя 2-3 статьи за раз.
Про все результаты этого эксперимента будем сообщать на нашем сайте.

Сам скрипт:

<?php
$xhe_host ="127.0.0.1:7010";
// The following code is required to properly run XWeb Human Emulator
require("../../Templates/xweb_human_emulator.php");

// ////////// настройки скрипта///////////////////
// настройки админки WP
$blog="адрес блога";
$blog_login="логин";
$blog_pwd="пароль";

// пути к шаблонам
$tmp_index="";
$tmp_news="";
$tmp_ind_news="";
// папка с результатами
$res_folder="res/";
// путь к папке с рисунками
$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\wp_google\\data\\images\\" ;
// полный путь к папке с результатами
$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\wp_google\\res\\" ;
// массив добавленных статей
$a_added_articles=file($res_folder."added.txt");
// количество добавляемых статей
$cnt_news=rand(2,3);
// счётчик статей
$founded_news=0;

// режим отладки
$dbg=true;
// /////////////////// дополнительные модули /////////////////////
// функции 
require_once("functions.php");
// ///////////////////// script /////////////////////////////////////////////////////////
debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");

// переходим на сайт
$browser->navigate("адрес сайта источника");
// получаем все ссылки на статьи
$articles=$anchor->get_all_hrefs_by_inner_text("Статьи");
$a_articles=explode("<br>",$articles);
for($i=1;$i<count($a_articles);$i++)
{
	// получить кусок href для клика 
	$s_href=str_replace("адрес сайта источника","",trim($a_articles[$i]));
	$anchor->click_by_href($s_href, false);
	
	// показать все статьи
	$anchor->click_by_inner_text("Все",true);
	// ждём
	sleep(1);
	// получим категорию статей
	$category1=$webpage->get_body_inter_prefix("<H1","Статьи");
	$category1=get_string($category1,">","-");

    // получить все тексты ссылок по href 
    $articles1=$anchor->get_all_inner_texts_by_href("article","<br>",false);
    // в массив
    $a_articles1=explode("<br>",$articles1);
    // идём с конца добавляя самые старые статьи
    for($j=count($a_articles1)-1;$j>1;$j--)
    {
         // получим заголовок статьи
         $s_text=trim($a_articles1[$j]);
         // проверим добавляли ли уже такую статью
         if(is_added($s_text))
            continue;
         // перейдём в статью
         $anchor->click_by_inner_text($s_text);
         // ждём
         sleep(1);
         // получим текст статьи
         $s_body=$webpage->get_body_inter_prefix("<H1","Вернуться ");
         $s_body=get_string($s_body,"<P ","<SCRIPT ");
         $s_text1=translate($s_text);
         sleep(1);
         global $category1;
         $category1=translate($category1);
         sleep(1);
         // удалим лишние тэги
         $s_body=strip_tags($s_body,"<br><p><a><img>");
         $s_body=translate($s_body);
         sleep(1);
         //$textfile->write_file("temp.txt",$s_text."<br><P ".$s_body,60);
         // добавим статью в блог
         add_new_article($s_text1,"<P ".$s_body,$category1);
         $founded_news++;
         // добавим в файл и в массив
	      $a_added_articles[]=$s_text;
	      $textfile->add_string_to_file($res_folder."added.txt",$s_text."\n",60) ;
         // добавили нужно количество статей
         if($founded_news>=$cnt_news)
            break 2;

          // вернёмся ко всем статьям
         $anchor->click_by_inner_text("Вернуться в раздел....");
    }
}
debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");
// Quit
$app->quit();
?>

100

101

102

<?php

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator

require("../../Templates/xweb_human_emulator.php");

// ////////// настройки скрипта///////////////////

// настройки админки WP

$blog="адрес блога";

$blog_login="логин";

$blog_pwd="пароль";

// пути к шаблонам

$tmp_index="";

$tmp_news="";

$tmp_ind_news="";

// папка с результатами

$res_folder="res/";

// путь к папке с рисунками

$img_folder="C:\\XWeb\\Human Emulator\\My Scripts\\wp_google\\data\\images\\" ;

// полный путь к папке с результатами

$res_folder_full="C:\\XWeb\\Human Emulator\\My Scripts\\wp_google\\res\\" ;

// массив добавленных статей

$a_added_articles=file($res_folder."added.txt");

// количество добавляемых статей

$cnt_news=rand(2,3);

// счётчик статей

$founded_news=0;

// режим отладки

$dbg=true;

// /////////////////// дополнительные модули /////////////////////

// функции

require_once("functions.php");

// ///////////////////// script /////////////////////////////////////////////////////////

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");

// переходим на сайт

$browser->navigate("адрес сайта источника");

// получаем все ссылки на статьи

$articles=$anchor->get_all_hrefs_by_inner_text("Статьи");

$a_articles=explode("<br>",$articles);

for($i=1;$i<count($a_articles);$i++)

{

// получить кусок href для клика

$s_href=str_replace("адрес сайта источника","",trim($a_articles[$i]));

$anchor->click_by_href($s_href, false);

// показать все статьи

$anchor->click_by_inner_text("Все",true);

// ждём

sleep(1);

// получим категорию статей

$category1=$webpage->get_body_inter_prefix("<H1","Статьи");

$category1=get_string($category1,">","-");

// получить все тексты ссылок по href

$articles1=$anchor->get_all_inner_texts_by_href("article","<br>",false);

// в массив

$a_articles1=explode("<br>",$articles1);

// идём с конца добавляя самые старые статьи

for($j=count($a_articles1)-1;$j>1;$j--)

{

// получим заголовок статьи

$s_text=trim($a_articles1[$j]);

// проверим добавляли ли уже такую статью

if(is_added($s_text))

continue;

// перейдём в статью

$anchor->click_by_inner_text($s_text);

// ждём

sleep(1);

// получим текст статьи

$s_body=$webpage->get_body_inter_prefix("<H1","Вернуться ");

$s_body=get_string($s_body,"<P ","<SCRIPT ");

$s_text1=translate($s_text);

sleep(1);

global $category1;

$category1=translate($category1);

sleep(1);

// удалим лишние тэги

$s_body=strip_tags($s_body,"<br><p><a><img>");

$s_body=translate($s_body);

sleep(1);

//$textfile->write_file("temp.txt",$s_text."<br><P ".$s_body,60);

// добавим статью в блог

add_new_article($s_text1,"<P ".$s_body,$category1);

$founded_news++;

// добавим в файл и в массив

$a_added_articles[]=$s_text;

$textfile->add_string_to_file($res_folder."added.txt",$s_text."\n",60) ;

// добавили нужно количество статей

if($founded_news>=$cnt_news)

break 2;

// вернёмся ко всем статьям

$anchor->click_by_inner_text("Вернуться в раздел....");

}

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");

// Quit

$app->quit();

Скрипт написан 3.09.2012 в Human Emulator 4.4.19 Advanced.
На момент публикации статьи 6.09.2012 скрипт используется для эксперимента.

скачать скрипт

Наполнение живого журнала(livejournal.com) контентом под ключ

Наша линейка скриптов публикаторов контента в различные движки расширилась новым скриптом.
Это скрипт публикации статей в живой журнал (livejournal.com). Этот скрипт работает аналогично предыдущим скриптам Наполнение blogspot блога контентом под ключ и Наполнение WordPress контентом под ключ.

Cтатьи, для публикации в своём живом журнале мы помещаем в папку data/articles, а картинки для неё в папку data/images. Причём для каждой категории статей своя папка, например : data/articles/айкидо или data/articles/бокс и т.д. Название txt файла является заголовком статьи, а содержимое телом. Если в тексте статьи есть картинки, но их нет в папке data/images скрипт пытается скачать их по указанному в src адресу, если удалось скачать заливает на блог и подставляет новый src в статью, если не удалось скачать, то картинка удаляется из текста статьи.

После публикации статьи и картинки скрипт переносит в папки res/articles и res/images.

Скрипт можно поставить на расписание скриптов и запускать раз в какой-то период времени, например раз в 3 часа или раз в сутки. В указанное время скрипт будет ходить по папкам и проверять появились ли там статьи. Если статьи появились он их публикует на сайт.

Настройки скрипта:

// настройки админки 
$blog = "http://dumanovskij.livejournal.com";
$blog_login = "dumanovskij";
$blog_pwd = "kuvxplscgQQ4110";

// заголовок блога
$caption = "Test Script";
// путь к папке со статьями
$path_to_artcls = "data\\articles\\";
// путь к папке с рисунками
$path_to_imgs = "data\\images\\";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res\\articles\\";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res\\images\\";

// режим отладки
$dbg = true;

// настройки админки

$blog = "http://dumanovskij.livejournal.com";

$blog_login = "dumanovskij";

$blog_pwd = "kuvxplscgQQ4110";

// заголовок блога

$caption = "Test Script";

// путь к папке со статьями

$path_to_artcls = "data\\articles\\";

// путь к папке с рисунками

$path_to_imgs = "data\\images\\";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res\\articles\\";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res\\images\\";

// режим отладки

$dbg = true;

Сам скрипт выглядит следующим образом:

<?php
// скрипт добавления статей в блог созданный на платформе livejournal

/*  производитель: x-scripts                                     
**  тип продукта: скрипт под Xweb Human Emulator  
**  сайт программы: humanemulator.info                  
**  наш сайт: x-scripts.com                                     
**  по всем вопросам обращайтесь:                       
**  email: order@x-scripts.com                                
**  icq: 625657402                               
**  skype: igor_sev2                             
*/
$xhe_host ="127.0.0.1:7010";
// The following code is required to properly run XWeb Human Emulator
require("../../Templates/xweb_human_emulator.php");

// //////////////////////// настройки скрипта /////////////////////////
// настройки админки 
$blog = "http://dumanovskij.livejournal.com";
$blog_login = "dumanovskij";
$blog_pwd = "kuvxplscgQQ4110";

// заголовок блога
$caption = "Test Script";
// путь к папке со статьями
$path_to_artcls = "data\\articles\\";
// путь к папке с рисунками
$path_to_imgs = "data\\images\\";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res\\articles\\";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res\\images\\";
// скрипт работает в режим отладки
$dbg = true;

// //////////////////////// дополнительные модули ///////////////
// функции 
require_once("tools/functions.php");
require_once("tools/ftp.php");
// /////////////////////// скрипт ///////////////////////////////////////////
debug_mess(" скрипт запустили");

// если нет папки res\articles - создадим ее
if (!$folder->is_exist($path_to_res_artcls))
   $folder->create($path_to_res_artcls);

// если нет папки res\images - создадим ее
if (!$folder->is_exist($path_to_res_imgs))
   $folder->create($path_to_res_imgs);

// получаем массив каталогов статей
$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам
foreach ($arr_of_cats as $category)
{
	// пропустим пустые
	if ($category == "." or $category == ".." or $category == "")
		continue;
		
	// получаем массив статей в конкретном каталоге
	$arr_of_arts = scandir($path_to_artcls . $category . "/");
	
	// работаем с конкретной статьей
	foreach ($arr_of_arts as $article)
	{
		//пропустим пустые статьи
		if ($article == "." or $article == ".." or $category == "")
			continue;
		sleep(2);
			
		// добавляем статью на сайт
		add_new_article($article, $caption);
		
		// выбираем абсолютный путь
		$path_to_script_folder = $debug->get_cur_script_folder(); 
		
		
		// переносим статью из папки data в папку res
		// проверяем существование категории статьи
		if (!$folder->is_exist($path_to_script_folder.$path_to_res_artcls.$category))
		{
			// создаем папку с категорией
			if ($folder->create($path_to_script_folder.$path_to_res_artcls.$category))
			{
				debug_mess("<br /> Папка $category создана");
			}
			else
			{
				debug_mess("<br /> Папка $category НЕ создана!!!");
			}
		}
		// перемещаем статью
		if ($file_os->move($path_to_script_folder.$path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))
		{
			debug_mess("<br />Статья $article успешно перемещена.");
		}
		else
		{
			debug_mess("<br />Статья $article НЕ перемещена!!!");
		}
	}
}
debug_mess("скрипт закончил работу");
// Quit
$app->quit();
?>

100

101

102

103

104

105

106

107

<?php

// скрипт добавления статей в блог созданный на платформе livejournal

/* производитель: x-scripts

** тип продукта: скрипт под Xweb Human Emulator

** сайт программы: humanemulator.info

** наш сайт: x-scripts.com

** по всем вопросам обращайтесь:

** email: order@x-scripts.com

** icq: 625657402

** skype: igor_sev2

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator

require("../../Templates/xweb_human_emulator.php");

// //////////////////////// настройки скрипта /////////////////////////

// настройки админки

$blog = "http://dumanovskij.livejournal.com";

$blog_login = "dumanovskij";

$blog_pwd = "kuvxplscgQQ4110";

// заголовок блога

$caption = "Test Script";

// путь к папке со статьями

$path_to_artcls = "data\\articles\\";

// путь к папке с рисунками

$path_to_imgs = "data\\images\\";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res\\articles\\";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res\\images\\";

// скрипт работает в режим отладки

$dbg = true;

// //////////////////////// дополнительные модули ///////////////

// функции

require_once("tools/functions.php");

require_once("tools/ftp.php");

// /////////////////////// скрипт ///////////////////////////////////////////

debug_mess(" скрипт запустили");

// если нет папки res\articles - создадим ее

if (!$folder->is_exist($path_to_res_artcls))

$folder->create($path_to_res_artcls);

// если нет папки res\images - создадим ее

if (!$folder->is_exist($path_to_res_imgs))

$folder->create($path_to_res_imgs);

// получаем массив каталогов статей

$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам

foreach ($arr_of_cats as $category)

{

// пропустим пустые

if ($category == "." or $category == ".." or $category == "")

continue;

// получаем массив статей в конкретном каталоге

$arr_of_arts = scandir($path_to_artcls . $category . "/");

// работаем с конкретной статьей

foreach ($arr_of_arts as $article)

{

//пропустим пустые статьи

if ($article == "." or $article == ".." or $category == "")

continue;

sleep(2);

// добавляем статью на сайт

add_new_article($article, $caption);

// выбираем абсолютный путь

$path_to_script_folder = $debug->get_cur_script_folder();

// переносим статью из папки data в папку res

// проверяем существование категории статьи

if (!$folder->is_exist($path_to_script_folder.$path_to_res_artcls.$category))

{

// создаем папку с категорией

if ($folder->create($path_to_script_folder.$path_to_res_artcls.$category))

{

debug_mess("<br /> Папка $category создана");

}

else

{

debug_mess("<br /> Папка $category НЕ создана!!!");

}

// перемещаем статью

if ($file_os->move($path_to_script_folder.$path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))

{

debug_mess("<br />Статья $article успешно перемещена.");

}

else

{

debug_mess("<br />Статья $article НЕ перемещена!!!");

}

debug_mess("скрипт закончил работу");

// Quit

$app->quit();

Скрипт написан 27.03.2013 в Human Emulator 4.6.5 Advanced.

скачать скрипт

Наполнение blogspot блога контентом

После того как нами был написан скрипт автоматической публикации контента в WordPress
мы решили написать целую линейку подобных скриптов. И следующим в этой линейке стал скрипт автоматического наполнения блога в системе blogger.com.

Этот скрипт работает аналогично скрипту, который заполняет WordPress. Те статьи, которые мы хотим опубликовать на блоге мы помещаем в папку data/articles,
а картинки из этой статьи в папку data/images.
Причём для каждой категории создаётся своя папка, например : data/articles/айкидо или data/articles/бокс и т.д., и туда складываются статьи для этой категории.
Название txt файла является заголовком статьи, а содержимое телом. Если в тексте статьи есть картинки, но их нет в папке data/images скрипт пытается скачать
их по указанному в src адресу, если удалось скачать заливает на блог и подставляет новый src в статью, если не удалось скачать, то картинка удаляется из текста статьи.

Все опубликованные статьи и картинки скрипт переносит в папки res/articles и res/images.

Скрипт можно поставить на расписание скриптов и запускать раз в какой-то период времени, например раз в 3 часа или раз в сутки.
В указанное время скрипт будет ходить по папкам и проверять появились ли там статьи. Если статьи появились он их публикует на сайт.

Настройки скрипта:

// настройки админки 
$blog = "http://wqwqwqwqwqwqw.blogspot.com/";
$blog_login = "ii445571";
$blog_pwd = "qwerty2013";

// заголовок блога
$caption = "Test Script";
// путь к папке со статьями
$path_to_artcls = "data/articles/";
// путь к папке с рисунками
$path_to_imgs = "data/images/";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res/articles/";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res/images/";
// режим отладки
$dbg = true;

// настройки админки

$blog = "http://wqwqwqwqwqwqw.blogspot.com/";

$blog_login = "ii445571";

$blog_pwd = "qwerty2013";

// заголовок блога

$caption = "Test Script";

// путь к папке со статьями

$path_to_artcls = "data/articles/";

// путь к папке с рисунками

$path_to_imgs = "data/images/";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res/articles/";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res/images/";

// режим отладки

$dbg = true;

Сам скрипт выглядит следующим образом:

<?php

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator
require("../../Templates/xweb_human_emulator.php");

// /////////////////////// настройки скрипта //////////////////////////
// настройки админки 
$blog = "http://wqwqwqwqwqwqw.blogspot.com/";
$blog_login = "ii445571";
$blog_pwd = "qwerty2013";

// заголовок блога
$caption = "Test Script";
// путь к папке со статьями
$path_to_artcls = "data/articles/";
// путь к папке с рисунками
$path_to_imgs = "data/images/";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res/articles/";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res/images/";
// режим отладки
$dbg = true;

// ///////////////////////// дополнительные модули ///////////////// 
// работа с ftp
require_once("tools/ftp.php");
// функции  
require_once("tools/functions.php");
// ///////////////////////// сам скрипт ////////////////////////////////////////

debug_mess(" скрипт запустили");

// получаем массив каталогов статей
$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам
foreach($arr_of_cats as $category)
{
	// пропустим пустые
	if ($category == "." or $category == ".." or $category == "")
		continue;
		
	$arr_of_arts = scandir($path_to_artcls . $category . "/");
	
	// работаем с конкретной статьей
	foreach($arr_of_arts as $article)
	{
		//пропустим пустые статьи
		if ($article == "." or $article == ".." or $category == "")
			continue;
		
		sleep(2);
		// добавляем статью на сайт
		add_new_article($article, $caption);
		
		// переносим статью из папки data в папку res
		// проверяем существование категории статьи
		if (!$folder->is_exist($path_to_res_artcls . $category . "/"))
		{
			// создаем папку с категорией
			if ($folder->create($path_to_res_artcls . $category . "/"))
			{
				debug_mess("Папка $category создана");
			}
			else
			{
				debug_mess("Папка $category НЕ создана!!!");
			}
		}
		
		// перемещаем статью
		if ($file_os->move($path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))
		{
			debug_mess("Статья $article успешно перемещена.");
		}
		else
		{
			debug_mess("Статья $article НЕ перемещена!!!");
		}
	}
}
  debug_mess("скрипт закончил работу");
// Quit
$app->quit();

?>

<?php

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator

require("../../Templates/xweb_human_emulator.php");

// /////////////////////// настройки скрипта //////////////////////////

// настройки админки

$blog = "http://wqwqwqwqwqwqw.blogspot.com/";

$blog_login = "ii445571";

$blog_pwd = "qwerty2013";

// заголовок блога

$caption = "Test Script";

// путь к папке со статьями

$path_to_artcls = "data/articles/";

// путь к папке с рисунками

$path_to_imgs = "data/images/";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res/articles/";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res/images/";

// режим отладки

$dbg = true;

// ///////////////////////// дополнительные модули /////////////////

// работа с ftp

require_once("tools/ftp.php");

// функции

require_once("tools/functions.php");

// ///////////////////////// сам скрипт ////////////////////////////////////////

debug_mess(" скрипт запустили");

// получаем массив каталогов статей

$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам

foreach($arr_of_cats as $category)

{

// пропустим пустые

if ($category == "." or $category == ".." or $category == "")

continue;

$arr_of_arts = scandir($path_to_artcls . $category . "/");

// работаем с конкретной статьей

foreach($arr_of_arts as $article)

{

//пропустим пустые статьи

if ($article == "." or $article == ".." or $category == "")

continue;

sleep(2);

// добавляем статью на сайт

add_new_article($article, $caption);

// переносим статью из папки data в папку res

// проверяем существование категории статьи

if (!$folder->is_exist($path_to_res_artcls . $category . "/"))

{

// создаем папку с категорией

if ($folder->create($path_to_res_artcls . $category . "/"))

{

debug_mess("Папка $category создана");

}

else

{

debug_mess("Папка $category НЕ создана!!!");

}

// перемещаем статью

if ($file_os->move($path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))

{

debug_mess("Статья $article успешно перемещена.");

}

else

{

debug_mess("Статья $article НЕ перемещена!!!");

}

debug_mess("скрипт закончил работу");

// Quit

$app->quit();

Скрипт написан 10.02.2013 в Human Emulator 4.6.2 Advanced.

скачать скрипт

Наполнение сайта на WordPress контентом под ключ

Вы ежедневно тратите большую часть своего времени на заполнение сайта свежим контентом. Даже подобрав материал и картинки, потребуется не одна минута, что бы скомпоновать и загрузить данные в блог. Если же блогов десятки и сотни, то целый день уйдет только на это. Зачем все делать руками, когда за вас это может сделать программа, причем в десятки потоков?

Предлагаем вашему вниманию скрипт автоматического наполнения контентом сайта на WordPress. Он создан с учетом различных алгоритмов выполняемых действий. Скрипт забирает из заданных папок контент и картинки, после чего публикует в заданное вами время. Формат материалов может быть как в текстовом варианте, так и в html.

Как работает скрипт. В папке со скриптом есть папки data/articles и data/images. В первую папку мы добавляем статьи, которые скрипт должен будет опубликовать. Причём для каждой категории создаётся своя папка, например : data/articles/айкидо или data/articles/бокс и т.д., и туда складываются статьи для этой категории. Когда скрипт берёт статьи из этих папок, он проверяет, есть ли уже такие категории, если категории нет, то скрипт добавляет её. Название txt файла является заголовком статьи, а содержимое телом. Скрипт так же добавляет и тэги для статьи. Тэгами служат название категории, название статьи, а так же все слова из названия статьи. Если в статье вставлены картинки, например:

<i><img style="margin-top: 5px; margin-bottom: 5px; border: #000000 1px;" title="Ингемар Юханссон. 
Фотографии" src="http://justboxing.net/images/Foto/title/Ingemar_Johansson_title.jpg" alt="Ингемар Юханссон" width="650" height="400" /></i> или 
<i><img style="margin-top: 5px; margin-bottom: 5px; border: #000000 1px;" title="Эззард Чарльз. Фотографии" src="/images/Foto/title/Ezzard_Charles_title.jpg" 
alt="Эззард Чарльз. Фотографии" width="650" height="400" /></i>

<i><img style="margin-top: 5px; margin-bottom: 5px; border: #000000 1px;" title="Ингемар Юханссон.

Фотографии" src="http://justboxing.net/images/Foto/title/Ingemar_Johansson_title.jpg" alt="Ингемар Юханссон" width="650" height="400" /></i> или

<i><img style="margin-top: 5px; margin-bottom: 5px; border: #000000 1px;" title="Эззард Чарльз. Фотографии" src="/images/Foto/title/Ezzard_Charles_title.jpg"

alt="Эззард Чарльз. Фотографии" width="650" height="400" /></i>

,
то скрипт проверяет если такие картинки в папке data/images, если нет, он проверяет указанный src в тексте, если src относительный (src=»/images/Foto/title/Ezzard_Charles_title.jpg») картинка удаляется, так как скачать её он не сможет,
если путь абсолютный (src=»http://justboxing.net/images/Foto/title/Ingemar_Johansson_title.jpg»), скрипт идёт по заданному адресу и качает оттуда картинку. Если картинка не закачалась, то скрипт удаляет картинку из текста. Таким образом, у вас получаются красивые живые статьи с картинками на вашем сайте.

Все опубликованные статьи и картинки скрипт переносит в папки res/articles и res/images.

Скрипт можно поставить на расписание скриптов и запускать раз в какой-то период времени, например раз в 6 часов или раз в сутки.
В указанное время скрипт будет ходить по папкам и проверять появились ли там статьи. Если статьи появились он их публикует на сайт.

Настройки скрипта:

// настройки админки wordpress
$blog = "адрес админки wordpress";
$blog_login = "логин админки";
$blog_pwd = "пароль админки";

// настройки ftp
$ftp_server = "ftp сервер";
$ftp_user = "ftp пользователь";
$ftp_pass = "ftp пароль";

// путь к папке со статьями
$path_to_artcls = "data/articles/";
// путь к папке с рисунками
$path_to_imgs = "data/images/";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res/articles/";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res/images/";
// папка для хранения рисунков на сайте  - в эту папку мы быдем заливать картинки по ftp
$img_folder = "img/";	
// ftp папка сайта с wordpress
$ftp_folder = "/public_html/WordPress/";

// настройки админки wordpress

$blog = "адрес админки wordpress";

$blog_login = "логин админки";

$blog_pwd = "пароль админки";

// настройки ftp

$ftp_server = "ftp сервер";

$ftp_user = "ftp пользователь";

$ftp_pass = "ftp пароль";

// путь к папке со статьями

$path_to_artcls = "data/articles/";

// путь к папке с рисунками

$path_to_imgs = "data/images/";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res/articles/";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res/images/";

// папка для хранения рисунков на сайте - в эту папку мы быдем заливать картинки по ftp

$img_folder = "img/";

// ftp папка сайта с wordpress

$ftp_folder = "/public_html/WordPress/";

Сам скрипт выглядит следующим образом:

<?php
$xhe_host ="127.0.0.1:7010";
// The following code is required to properly run XWeb Human Emulator
require("../../Templates/xweb_human_emulator.php");

// ////////////////////// настройки скрипта ///////////////////////////

// настройки админки wordpress
$blog = "";
$blog_login = "";
$blog_pwd = "";

// настройки ftp
$ftp_server = "";
$ftp_user = "";
$ftp_pass = "";

// путь к папке со статьями
$path_to_artcls = "data/articles/";
// путь к папке с рисунками
$path_to_imgs = "data/images/";
// путь к папке с добавленными статьями
$path_to_res_artcls = "res/articles/";
// путь к папке с добавленными рисунками
$path_to_res_imgs = "res/images/";
// папка для хранения рисунков на сайте
$img_folder = "img/";	
// ftp папка сайта
$ftp_folder = "/public_html/WordPress/";

// режим отладки
$dbg = true;

// ///////////////////////// дополнительные модули ///////////////// 
// функции 
require_once("tools/ftp.php");
require_once("tools/functions.php");
// ///////////////////////// сам скрипт ////////////////////////////////////////
debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");

// получаем массив каталогов статей
$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам
foreach($arr_of_cats as $category)
{
	// пропустим пустые
	if ($category == "." or $category == "..")
		continue;

	$arr_of_arts = scandir($path_to_artcls . $category . "/");
	
	// значит папка со статьями не пустая - работаем
	foreach($arr_of_arts as $article)
	{
		//пропустим пустые
		if ($article == "." or $article == "..")
			continue;
		
		// редактируем статью и картинки
		$s_body = post_art($article);
		sleep(2);
		// добавляем статью на сайт
		add_new_article($article, $s_body, $category);
		
		// переносим статью из папки data в папку res
		// проверяем существование категории статьи
		if (!$folder->is_exist($path_to_res_artcls . $category . "/"))
		{
			// создаем папку с категорией
			if ($folder->create($path_to_res_artcls . $category . "/"))
			{
				debug_mess("Папка $category создана");
			}
			else
			{
				debug_mess ("Папка $category НЕ создана!!!");
			}
		}
		// перемещаем статью
		if ($file_os->move($path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))
		{
			debug_mess("Статья $article успешно перемещена.");
		}
		else
		{
			debug_mess("Статья $article НЕ перемещена!!!");
		}
	}
}
debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");
// Quit
$app->quit();
?>

<?php

$xhe_host ="127.0.0.1:7010";

// The following code is required to properly run XWeb Human Emulator

require("../../Templates/xweb_human_emulator.php");

// ////////////////////// настройки скрипта ///////////////////////////

// настройки админки wordpress

$blog = "";

$blog_login = "";

$blog_pwd = "";

// настройки ftp

$ftp_server = "";

$ftp_user = "";

$ftp_pass = "";

// путь к папке со статьями

$path_to_artcls = "data/articles/";

// путь к папке с рисунками

$path_to_imgs = "data/images/";

// путь к папке с добавленными статьями

$path_to_res_artcls = "res/articles/";

// путь к папке с добавленными рисунками

$path_to_res_imgs = "res/images/";

// папка для хранения рисунков на сайте

$img_folder = "img/";

// ftp папка сайта

$ftp_folder = "/public_html/WordPress/";

// режим отладки

$dbg = true;

// ///////////////////////// дополнительные модули /////////////////

// функции

require_once("tools/ftp.php");

require_once("tools/functions.php");

// ///////////////////////// сам скрипт ////////////////////////////////////////

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт запустили");

// получаем массив каталогов статей

$arr_of_cats = scandir($path_to_artcls);

// пробежимся по всем каталогам

foreach($arr_of_cats as $category)

{

// пропустим пустые

if ($category == "." or $category == "..")

continue;

$arr_of_arts = scandir($path_to_artcls . $category . "/");

// значит папка со статьями не пустая - работаем

foreach($arr_of_arts as $article)

{

//пропустим пустые

if ($article == "." or $article == "..")

continue;

// редактируем статью и картинки

$s_body = post_art($article);

sleep(2);

// добавляем статью на сайт

add_new_article($article, $s_body, $category);

// переносим статью из папки data в папку res

// проверяем существование категории статьи

if (!$folder->is_exist($path_to_res_artcls . $category . "/"))

{

// создаем папку с категорией

if ($folder->create($path_to_res_artcls . $category . "/"))

{

debug_mess("Папка $category создана");

}

else

{

debug_mess ("Папка $category НЕ создана!!!");

}

// перемещаем статью

if ($file_os->move($path_to_artcls.$category."/".$article, $path_to_res_artcls.$category."/".$article))

{

debug_mess("Статья $article успешно перемещена.");

}

else

{

debug_mess("Статья $article НЕ перемещена!!!");

}

debug_mess(date("\[ d.m.y H:i:s\] ")." скрипт закончил работу<br>");

// Quit

$app->quit();

Скрипт написан 01.02.2012 в Human Emulator 4.6.2 Advanced.

скачать скрипт

Archives