PHP-де веб-сайттарды парсинг жасау бойынша оқулық

Негіздер

Парсингке кіріспе PHP шектеулері Орындау уақытына шектеу Жадыға шектеу Браузердің үзілуін елемеу Парсерді орналастыру Дайындық манипуляциялары

Регулярлық өрнектер

Кіріспе Жол аударымдары бар жолдарды парсинг Орыс тіліндегі мәтінді парсинг Қарапайым тегтерді парсинг Сипаттамалары бар тегтерді парсинг Қайталанатын тегтерді парсинг Тег блоктарын парсинг Блоктарды екі кезеңді парсинг Сипаттамалар пробелдерінің мәселесі Сипаттамалар тырнақшаларының мәселесі Тег атауларының мәселесі Мәтінді алдын ала тазалау Парсинг кезіндегі деректерді тазалау Регулярлық өрнектермен парсинг мәселелері Регулярлық өрнектермен парсинг бойынша практика

Кітапханалар

Кітапханалар тізімі

DiDom кітапханасы

Орнату Айнымалыдан мәтінді талдау URL мекенжайынан мәтінді талдау Бірінші элементтің мәтіні Элементтің HTML коды Элементтің ішкі HTML коды CSS селекторлары Тегтердің атрибуттары Элементтер ішінде іздеу Элементтер массиві Элементтер массиві үшін атрибуттар Құжаттама Практикум

Жолдар

Абсолютті жолдарды нормалау Салыстырмалы жолдарды нормалау Ығысқан жолдарды нормалау Жолдарды әмбебап нормалау Басқа сайттарға сілтемелер

Кодировкалар

Беттің кодировкасын алу Кодировканы нормализациялау

Әдістер

Бетті алу функциясы Сілтемелерді алу функциясы Сілтемелер бойынша парсинг Парсингті кезеңдік әдіс Массивтегі crawler әдісі Дерекқордағы crawler әдісі Іріктеуі бар crawler әдісі Sitemap.xml негізінде парсинг

Файлдар

Файлдарды парсинг жасау Суреттерді парсинг жасау CSS файлдарын парсинг жасау JavaScript файлдарын парсинг жасау Аудио файлдарын парсинг жасау Бейне файлдарын парсинг жасау

Пішіндер

Пішіндерді GET әдісімен жіберу Пішіндерді POST әдісімен жіберу Пішін жіберу кезіндегі қауіптер Автоматты авторизация

Капча

Кіріспе Капчаның құрылымы Капчаны айналып өту Таңбалау сервистері

Автоматизация

Парсинг кезіндегі логтар Парсинг кезіндегі кеш Үзіліс кезінде сақтау Браузерде кесте бойынша іске қосу Хостингте кесте бойынша іске қосу

Қорғанысты айналу

Парсингтен қорғанысты айналу Парсинг кезіндегі кідірістер Үй жағдайында IP мекенжайын өзгерту Парсинг кезінде IP мекенжайын өзгерту Парсинг кезіндегі cookie файлдары Парсинг кезіндегі HTTP тақырыпшалары Парсинг кезіндегі USERAGENT Сайттың мобильді нұсқасы API пайдалану

Динамикалық мазмұны

Мәселе AJAX парсинг

Практика

Бастапқы практика Автопостинг бойынша практика Финальды практика
↑
azbydeenesfrkakkptruuz