Как настроить парсинг автоматически по CRON, полностью автонаполняемый сайт!

Тема в разделе "Общий FAQ и техподдержка по созданию сайтов на AVP", создана пользователем HITNET, 21 окт 2015.

  1. HITNET

    HITNET Administrator Команда форума AVP Maksimum

    Частый вопрос - Как настроить парсинг автоматически по CRON

    пример по видеосервисам и русским адулт источникам:
    [​IMG]

    Команда CRON для парсинга автоматически:
    wget -O /dev/null -q http://ваш_сайт.ru/auto_query/parse_video.php >/dev/null 2>&1

    Примечание: Настроить можно полностью автонаполняемый сайт,
    запуск парсинга 1 ролика каждые 14 - 15 минут, получается 96-102 видеоролика в сутки, раз настроили и установили команду по времени в панели хостинга или VDS, и все готово, дальше только заходим время от времени и добаваляем запросы.
     
  2. imn82

    imn82 New Member AVP user

    В данном случае видео будут распределяться по всем категориям,А если мне нужно по категориям сайт заполнять?
     
  3. HITNET

    HITNET Administrator Команда форума AVP Maksimum

    если по отдельным категориям, то вместо Автоматически, выбрал -- категорию, залил запросов 100 или сколько в нее нужно, через сутки зашел почистил запросы спарсеные, изменил категорию и добавил запросы именно по данной категории, по моему мнению автоматически проще наполнять в большинстве случаев
     
  4. HITNET

    HITNET Administrator Команда форума AVP Maksimum

    исправлен баг с неправильным распределением по времени дат при автонаполнении, скачать в теме баг фикс
     

Поделиться этой страницей