Сообщений в теме: 15

[Жошь Накзл Айгель]

Хочу научиться писать php парсеры сайтов, чтобы мог парсить инфу любую, сохранять в нужный результат, чекать как-то, при не обходимости запускать обратно циклы и т.д.

[vekvoli]

Дмитрий Лаврик - PHP парсеры

https://slivup.top/t...p-parsery-2016/

 

Роман Кротов - Как парсить сайты

http://nnmclub.to/fo...ic.php?t=983637

[chernyserg]

посмотри в сторону зенки, разберется даже человек далекий от программирования. регеры, парсеры пишутся на раз.

[RusZarj]

Хочу научиться писать php парсеры сайтов, чтобы мог парсить инфу любую, сохранять в нужный результат, чекать как-то, при не обходимости запускать обратно циклы и т.д.

php поверхностно, curl, regexp - это минимум знаний для php парсера.

[ДаДа это Я]

Скрытый контент:

  Для просмотра необходимо войти или зарегистрироваться

[kopyrin]

Накидал лапши и как бы помог? Смотри Лаврика. Он тебе основные методики даст.

[Жошь Накзл Айгель]

Спасибо, зено есть, нужно именно на пшп и т.д. да и хочу языки изучать, по степенно да овладеть всеми.. а то так.. только названия заю, но не знаю ничего

[Master4eg]

Тоже интересно.

[bender_cs]

говорят программирование надо изучать с языка Perl

[Aleks001]

Хочу научиться писать php парсеры сайтов, чтобы мог парсить инфу любую, сохранять в нужный результат, чекать как-то, при не обходимости запускать обратно циклы и т.д.

Начать пожалуй стоит с того, что любую инфу ты не спарсишь при помощи php парсера. Если там ajax, то нужен js + немало сайтов сейчас под cloudflare, с выключенным js на них не пускает.

[Master4eg]

Начать пожалуй стоит с того, что любую инфу ты не спарсишь при помощи php парсера. Если там ajax, то нужен js + немало сайтов сейчас под cloudflare, с выключенным js на них не пускает.

А если я хочу парсить видео и загружать их на другой сайт?

[Aleks001]

А если я хочу парсить видео и загружать их на другой сайт?

Видео это просто файл для скачивания, имеет значения реализация сайта с которого оно парсится и реализация формы загрузки, на сайте, на который грузится.

[Master4eg]

Видео это просто файл для скачивания, имеет значения реализация сайта с которого оно парсится и реализация формы загрузки, на сайте, на который грузится.

Например на сайте есть кнопка "скачать", а загружать в вк. И можно ли как-то качать файлы непосредственно на хостинг, чтоб вообще всё автоматизировать, нужно ли БД подключать? 

[Aleks001]

Например на сайте есть кнопка "скачать", а загружать в вк. И можно ли как-то качать файлы непосредственно на хостинг, чтоб вообще всё автоматизировать, нужно ли БД подключать? 

Нельзя дать конкретный ответ на такую абстрактную постановку задачи. В общих чертах: 1) если эта кнопка скачать выводится на странице javascript'ом то php парсер, заходя на страницу, попросту не будет её видеть (и соответственно не сможет достать ссылку для скачивания), но в некоторых случаях это можно обойти, если к примеру на сайте используется некая фиксированная стурктура url'ов и т.п. 2) То, что вы в ВК через пользовательский интерфейс php парсерером не сможете загрузить видео - 100%, нужно использовать ВК API, смотрите документацию у них на сайте. 3) Использовать, или нет БД зависит от решаемой задачи и удобства в её решении (извиняюсь за товтологию). Для небольшого количества данных, их можно писать и читать просто из обычного txt файла на хостинге, для более крупных задач лучше сделать БД, иначе задолбетесь с этими текстовыми файлами. 4)"можно ли как-то качать файлы непосредственно на хостинг" - нужно качать файлы непосредственно на хостинг, не скачав предварительно файл вы не сможете его никак залить в ВК.

[Master4eg]

Нельзя дать конкретный ответ на такую абстрактную постановку задачи. В общих чертах: 1) если эта кнопка скачать выводится на странице javascript'ом то php парсер, заходя на страницу, попросту не будет её видеть (и соответственно не сможет достать ссылку для скачивания), но в некоторых случаях это можно обойти, если к примеру на сайте используется некая фиксированная стурктура url'ов и т.п. 2) То, что вы в ВК через пользовательский интерфейс php парсерером не сможете загрузить видео - 100%, нужно использовать ВК API, смотрите документацию у них на сайте. 3) Использовать, или нет БД зависит от решаемой задачи и удобства в её решении (извиняюсь за товтологию). Для небольшого количества данных, их можно писать и читать просто из обычного txt файла на хостинге, для более крупных задач лучше сделать БД, иначе задолбетесь с этими текстовыми файлами. 4)"можно ли как-то качать файлы непосредственно на хостинг" - нужно качать файлы непосредственно на хостинг, не скачав предварительно файл вы не сможете его никак залить в ВК.

Благодарю, что посоветуете изучить мне для достижения этой цели, после просмотра базовых уроков по php для начинающих?