Я заробляю на життя за допомогою веб-скрейпінгу вже більше 3 років, заробив понад $125,000, у мене понад 25,000 передплатників у соціальних мережах, і в цьому курсі я розповім точно, як скрейплю сайти, а також як знаходити клієнтів та рости у соціальних мережах .
В курсі я покажу, як скрейпит наступні сайти (і надам вам код):
Instagram
Twitter
TikTok
LinkedIn
Zillow
Google Search
Google Maps
Amazon
Indeed
ESPN
Angi List
та інші!
Я також розповім, як я знайшов клієнтів і набрав більше 25,000 передплатників у соціальних мережах (і як ви можете зробити те саме).
Що всередині курсу:
9 годин відеоматеріалів
Законність веб-скрейпінгу: що потрібно знати?
Скрейпери проти хакерів: у чому різниця?
Усі послуги, які я використовую (проксі, мови програмування, сервери, бази даних, пакети для обходу блокувань)
Як сайти одержують свої дані (як працюють API)
Мій процес скрейпінгу БУДЬ-ЯКОГО сайту
Як знайти джерело даних
Як уникнути блокування
Все про проксі
Скрейпінг за веб-фреймворками (React, Next.js, статичний HTML/серверний рендеринг, ASP.NET, Java)
Як оберненим проектуванням обійти сайти з гарним захистом
Скрейпінг сайтів з посторінковою навігацією курсором (наприклад, коментарі на YouTube)
Скрейпінг розширення Chrome для отримання безкоштовних email-адрес
Як скрейпити мобільні програми
Як шукати інформацію про людей (пошук телефонних номерів та email-адрес)
Як запустити Puppeteer на AWS Lambda
Як перехоплювати запити за допомогою Puppeteer
Рішення капч за допомогою Puppeteer
Як знайти клієнтів для веб-скрейпінгу
Як виставляти рахунки клієнтам
Ідеї продуктів, що базуються на веб-скрейпінгу
Дисклеймери:
Код написаний на JavaScript, і я використовую Mac із редактором коду VS Code.
Я тільки коротко згадую Puppeteer (є набагато КРАЩІ способи).
Веб-скрейпінг – це не магія. Вам потрібне джерело для скрейпінгу (сайт). Наприклад, не можна скрейпити банківські рахунки людей чи щось подібне. Це вже стосується злому, що є іншою областю.
Вимоги:
Ви повинні добре розуміти JavaScript або будь-яку іншу мову програмування, щоб отримати максимальну користь від цього курсу.
Якщо ви зовсім не вмієте програмувати цей курс не для вас.
У цьому курсі я не навчаю основ програмування або JavaScript.