Граббинг телепрограммы с сайтов каналов

[1076]

Получая программу  у EPG- провайдеров  или еще  где-  то  столкнулся  с  частыми расхождениями программы и  того  что  на  экране.
Причем на сайтах  каналов  содержалась актуальная  инфа.
+ нужны  программы  местных  вещателей, у  них  свои  сайты.
В  общем  нарылась  и  работает  вот эта  вещь.
WebGrab+Plus  http://www.webgrabplus.com/documentation/quick-start

Проблема  допилить  конфигурацию для  грабления  программ  с  сайтов  каналов.

[samwit]

на сайтах каналов очень часто скудная телепрограмма, более полную они предоставляют в рассылках и скорее всего тем, кто платит.

[sky star]

в рассылке обычно самый верняк
по крайней мере иностранные почти всегда 100% попадают

[1076]

Не хватает знаний  и  времени :(:(

Можно  было  бы  идеальный  EPG  под  себя  настроить.

[sky star]

у нас один человек работает постоянно при EPG сервере (у него еще куча и других дел),
другой может все тоже самое , но занимается CAS ,
оба могут заменять друг друга,
и с "забивкой" EPG проблем нет,
другое дело его точность

[1076]

sky star написал:
у нас один человек работает постоянно при EPG сервере (у него еще куча и других дел),
другой может все тоже самое , но занимается CAS ,
оба могут заменять друг друга,
и с "забивкой" EPG проблем нет,
другое дело его точность

Ничосе !
Никогда у  меня вручную  ничего  не  забивалось,  все  автоматом  работало.
и CAS тоже.

[sky star]

по EPG все что присылается компаниями, имеет абсолютно разношестномастную форму представления программы передач, от pdf word до html страниц, само автоматом это прожеваться врядли сможет, учитывая что подать надо я уж не помню к какой кодировке, по этому у "спеца" понаделано скриптов, более того,
по соглашению мы не выкладываем EPG более чем на 1 неделю, иначе наша же печатная газета разориться

по CAS сейчас мы ведем процесс адаптации новой версии нашей CAS с новым билингом
человек работает над этим плотно

оба человека могут заменять друг друга (что бы не получилось проблемы)

найти источник на наши 200 каналов что бы прилетало и вылетало "автоматом"
не возможно не теоретически не практически


если кому то кажется что на сайте "ВСЕ ТВ" есть все что нужно, то он очень сильно заблуждается, прям очень сильно сильно

это я еще не распылялся на всякие "местные" тв конторки у которых вообще в голове дым, а жопе ветер, на сайте програмки нет вовсе , или она там весит лет пять не меняясь

[1076]

sky star написал:

если кому то кажется что на сайте "ВСЕ ТВ" есть все что нужно, то он очень сильно заблуждается, прям очень сильно сильно

это я еще не распылялся на всякие "местные" тв конторки у которых вообще в голове дым, а жопе ветер, на сайте програмки нет вовсе , или она там весит лет пять не меняясь

Яростно  плюсую !

[samwit]

1076 написал:
Можно  было  бы  идеальный  EPG  под  себя  настроить.

Если идеально, то по-любому надо брать с разных источников. Никогда не мог понять почему у всех программы разные. У кого тупо названия, у кого более подробно даже с номерами серий и сезонов. Так что приходиться выбирать с разных источников. А автоматика тут полностью не сработает, надо контролировать программу хотя бы раз в неделю. Плюс все зависит от сервера EPG. Так как с кодировкой могут возникнуть проблемы и сервер её тупо не воспримет и придется руками сменить кодировку и снова подсунуть ему.

[1076]

samwit написал:

Если идеально, то по-любому надо брать с разных источников.  

Из  одного  и  не  получалось  ни  разу.

[apog]

И настройки там есть для двух наших источников

[1076]

apog написал:
И настройки там есть для двух наших источников

Маийлру , к  сожалению  перестал  недавно  рабтать,  поменялся  дизайн  сайта.

Вот  тут  нужно  упрашивать  автора сделать  ини  файл.

[samwit]

1076 написал:
Вот  тут  нужно  упрашивать  автора сделать  ини  файл.

У него уже спросили Вот  тут в самом низу.

[1076]

samwit написал:

1076 написал:
Вот  тут  нужно  упрашивать  автора сделать  ини  файл.

У него уже спросили Вот  тут в самом низу.

Это  про сарую  версию ,Mail.ru  поменялся  месяц -  два назад.

[samwit]

1076 написал:
Это  про сарую  версию ,Mail.ru  поменялся  месяц -  два назад.

Дата написания поста то свежая "Sat, 2015-07-11 21:42"

[1076]

samwit написал:

1076 написал:
Это  про сарую  версию ,Mail.ru  поменялся  месяц -  два назад.

Дата написания поста то свежая "Sat, 2015-07-11 21:42"

В  общем  надо  регаться  там  и  просить  поправить.

[petrovlexa]

Вопрос.
Как часто требуется запускать сию софтину?  WebGrab+Plus
Запускаю планировщиком каждые 2 часа в режиме smart
(как я понимаю должно тянуть только новое или обновленное)

Думаю может пореже сделать???

[1076]

Запускаю планировщиком каждые 2 часа в режиме smart

Сайты раз  в  неделю обновляются .
А  у  вас  с  какими  сайтами  заработало ?

[petrovlexa]

Пока только с этим работает. Другие еще не пробовал
Наверное можно смастерить site.ini на любой другой ресурс.
Вроде как и соответствующая утилита на оффсайте есть

[1076]

На яндекс бы  как  то  натравить.

[Sumgait]

Чем вас "КИТ Интернет телепрограмма" не устраивает? Жуёт все сайты. Только папку "Providers" обновите.

[petrovlexa]

На яндекс бы  как  то  натравить.

Буду посвободнее попробую, может и сделаем.
Тоже думаю с нескольких источников бы нужно брать.
А то поменяют чего и кирдык.

[ua4frr]

Чем вас "КИТ Интернет телепрограмма" не устраивает? Жуёт все сайты. Только папку "Providers" обновите.

Плюсую коллега))) Тоже юзаю сей бесплатный программный продукт)))

[1076]

Чем вас "КИТ Интернет телепрограмма" не устраивает? Жуёт все сайты. Только папку "Providers" обновите.

На  Яндексе  обновляет  список  каналов ?

[Sumgait]

Чем вас "КИТ Интернет телепрограмма" не устраивает? Жуёт все сайты. Только папку "Providers" обновите.

На  Яндексе  обновляет  список  каналов ?

Без проблем.