[Повтор-3] ZennoPoster + C#. Бот в 3 этапа. Разбор по косточкам

ZennoPoster+ C#. Бот в 3 этапа. Разбор по косточкам​

Всем привет!
Приглашаю всех в четвёртый поток обучения разработке шаблонов для Zennoposter на языке C#.

Предыдущие потоки- раз два три

Отзывы участников:

Что это значит, писать шаблоны Zennoposter:​

1. Снижение расходов.
Посмотрите, сколько стоят качественные шаблоны на форуме(часто это суммы от 3000р.), и прикиньте, сколько можно экономить, если писать автоматизацию самому.
Не брать дорогущий комбайн из- за одной операции(а в остольном не нужный), а побыстрому, на коленке пилить нужный функционал и в бой. Сэкономленные деньги- есть заработанные деньги.

2. Экономия времени.
Не дожидаться открытия сборов на нужный шаблон, не выпрашивать добавить функционал/исправить баг/объяснить подробней и пр.(и это всё время, часто недели), а тупо делать самому, без потери времени и нервов.

3. Независимость.
Если у вас есть прибыльная тема, и вам необходимо её масштабировать/автоматизировать, есть большая возможность пролететь по деньгам, потерять время, или вовсе слить её в паблик в попытках найти разработчика, мало того что можно ничего не добиться, так ещё и конкурентов понаплодить, если тема сольётся. Кстати это одна из причин, по которым я начал самостоятельно программировать, больших денег я не терял, но потратил кучу времени и терпения на переговоры/споры/объяснения и пр. с прогерами, ощутимо больше, чем во время обучения самостоятельной разработке. Сейчас могу сказать, что в основном из- за моей некомпетентности на тот момент, но какая разница, факт есть факт. Если вы научитесь писать шаблоны самостоятельно, вам не будет страшен такой вариант, вы сможете делать что захотите, в любом виде, в любое время, не опасаясь слива и конкуренции. Приватный софт рулит!

4. Деньги.
Без комментариев, посмотрите. сколько собирают темы по шаблонам ZP.

Из чего состоит курс:​

Теория:
1.Первое видео- как не слиться и пройти обучение до конца.
Расскажу о своём отношении к разработке, поделюсь приёмами, которые помогают мне продвигаться в реализации задуманных проектов. Сугубо личный опыт, то что у меня работает.

Далее, кратко пробежимся по основам:

2. ProjectMaker (опишу функционал, который применяю)
3. Вёрстка сайтов (необходимый минимум)
4. Кратко по C# (переменные, элементы и коллекции элементов, массивы и списки, логика, циклы)

Спойлер: Материал блока "Теория":

Проект ZennoPoster с азами по C#.​

​

Видео с разбором проекта​

​

Продолжительноность видео- 1 час.

Практика:
Практика будет проходить от простого к сложному, в первых проектах мы будем осваивать азы, а в последнем, уже будем применять весь пройденный материал.

1. Авторегистратор аккаунтов сервиса mail.ru

Шаблон выполняет автоматическую регистрацию аккаунтов сервиса mail.ru.

Внутри:
- Освоите работу с вёрсткой сайта(поиск элементов на странице, создание коллекции элементов, взаимодействие с найденными элементами).
- Показана работа с массивами на примере настроек шаблона.
- Реализована возможность разгадывания капчи.
- Реализована возможность выбирать сервис по разгадыванию капчи.
- Есть возможность выбирать пол регистрируемого аккаунта.
- В конце выполнения- создаётся отчёт в файл, с данными по аккаунту- Пол, Ф.И.О., Д.Р. и т.п.
В дополнение, в отдельном проекте описана регистрация через ожидание галки подтверждения заполнения поля. Это повышает стабильность работы шаблона.

Спойлер: Материал блока "Авторег mail.ru":

Подробная логика(ТЗ)​

​

Два проекта для Zennoposter(простая регистрация/регистрация с проверкой галок)​

​

Видео​

​

Продолжительность видео- 1 час 32 мин.

2. Парсер OLX(воркшоп)

Шаблон собирает ссылки на страницы с нужными нам предложениями, затем обходит каждое предложение и собирает информацию с его страницы(описание, параметры, картинки, контакты), полученную информацию раскидывает по папкам и файлам на нашем компе.

Что внутри(упрощённо):

- Закрепляются полученные ранее навыки по работе с html вёрсткой сайтов.
- Более сложная работа с циклами.
- Рассматриваются Get запросы при парсинге картинок.
Но самое интересное- шаблон пишется на ваших глазах, каждое действие обдумывается по ходу написания, вы увидите от начала и до конца весь процесс.
Это избавит вас от множества мелких вопросов/сомнений и дальнейшее обучение пойдёт гораздо проще.

Спойлер: Материал блока "Парсер OLX":

Логика​

​

Два проекта OlxGrabber(один из видео и второй откомментированый)​

​

Видео​

​

Продолжительность видео- 2 часа 51 мин.

3. Proxy Checker+ библиотека

Что мы делаем:

1. Сначала пишем однопоточный Proxy Checker(без библиотеки).
2. Вторым этапом создаём библиотеку в Microsoft Visual Studio и выносим в неё нужные для многопоточности и проверки Proxy части кода нашего шаблона.
3. В конце пишем новый многопоточный Proxy Checker, уже с применением созданной библиотеки.

Интересный проект в плане реализации, в нём нет работы с web элементами, но зато:

- Разобрана работа с циклами, списками, массивами, с папками и файлами.
- Проверка Proxy проводится через Get запрос.
- При помощи подключаемой библиотеки реализована многопоточность.

Библиотека, это очень удобная штука, когда вам нужно вынести часто повторяющийся кусок кода за пределы основного проекта, чтобы постоянно его не переписывать, и потом обращаться к нему в нужный момент.

- Будет разобрана сама библиотека.
- Из чего она состоит.
- Как её создавать и как подключать к нашим шаблонам.

Для её создания нам будет достаточно бесплатной версии Microsoft Visual Studio.

Спойлер: Материал блока "ProxyChecker"

Логика​

​

Два шаблона- без библиотеки/с библиотекой​

​

Видео​

​

Продолжительность видео- 43 мин.

4. Граббер Vk.com

Для реализации данного проекта нам понадобятся, все инструменты, изученные в предыдущих шаблонах. Это ядро для работы с Vk, здесь реализовано и получения токена, и создание приложения, и граббинг постов,в качестве примера, как прикручивать функционал.

Множество интересных возможностей:

- Разобрана работа с API(запросы, методы).
- Много работы с регулярными выражениями, будем осуществлять разного рода поиск/замену.
- Реализовано несколько фильтров постов(по наличию текста, по лайкам/комментам/репостам, фильтрация по СтопСловам и т.п).
- Реализована возможность применения Proxy c попутной проверкой на валидность и разнесением Proxy по спискам и файлам в зависимости от работоспособности.
- Присутствует интересный пример по реализации всплывающего окна для ввода кода из СМС, при создании приложения.
- Применяется библиотека по разгадыванию капчи.
- В этом шаблоне реализован выбор любого сервиса антикапчи, можно ставить хоть все сразу, шаблон будет обращаться к ним по очереди(если не разгадал в одном, переходит к другому).
- Развёрнуто будет показана работа с настройками. Весь функционал шаблона будет регулироваться из настроек.
- Много работы по логу, все значимые действия программы будем отражать в логе, это же касается и аварийных остановок.

Этот шаблон будет служить вам не только как ядро для работы с Vk( прикручивая нужный функционал вы будете легко решать задачи по Вконтакте), но и как библиотека всевозможных решений, начиная от работы с элементами вёрстки сайта, и заканчивая работой по настройке ваших ботов.

Спойлер: Материал блока "Граббер Vk.com"

Логика​

Проект​

Видео​

Продолжительность видео- 3 часа 32 мин.

Как будет проходить обучение:
​

Мы будем писать совершенно работоспособные проекты для решения определённых задач, с определёнными настройками.
К каждому из проектов будет применяться следующий алгоритм действий:

План -> Инструменты -> Реализация

План:

- Ставим общую задачу. Основное, что должен выполнять шаблон.
- Продумываем логику. Как будет продвигаться выполнение, как разветвить процесс выполнения шаблона, чтобы код отрабатывал как нам необходимо, и нигде не прерывался.

Инструменты:

- Определяемся с инструментарием для решения наших задач
- Ищем решения для задач, с которыми не сталкивались.

Реализация:

- Пишем по готовому плану общий каркас шаблона(безусловное выполнение основной задачи).
- После того как каркас написан, начинаем внедрять настройки, логику исходя из настроек, обработку ошибок и ограничений, сообщения в лог.

Вот так выглядит этот простой алгоритм, ничего сверхъестественного.
Первые два пункта я выполняю, и советую делать на бумаге, но для удобства в рамках курса, я набросал интеллект карты под каждый шаблон.
С целью сократить время видео, и не превращать курс в жвачку, все шаблоны, кроме парсера OLX я разбираю по коду(пошагово разбирается код+ рассматриваем примеры работы шаблонов на разных стадиях разработки). Для наглядности всего процесса создания шаблона, парсер пишется с нуля на ваших глазах.

Бонусы:
​

1. Разбор граббинга коментариев и последующей совместной с постами публикации в Vk
2. Разбор размещения сграбленных постов в сервысах отложеной публикации Инстап и Фидмэн
3. Разбор преобразования чужих партнёрских ссылок в сграбленых постах в свои на примере работы с ПП по Aliexpress- epn.bz

Проходить этот разбор будет в отдельной переписке.

Условия доступа:
Для участников в статусе "ЧленКлуба" и выше- ссылка на тему в подписи.
Для участников в статусе "Складчик"- три поста в похожих темах с интервалом не менее суток.
О выполнении условия отписывайтесь здесь, в теме.

 

Бонусные шаблоны​

1. Преобразование ссылок партнёрской программы Aliexpress- epn.bz:​

Спойлер: Логика шаблона

Идея:
Сначала, при помощи граббера Vk парсим посты из групп по Aliexpress, затем применяем шаблон преобразования ссылок, который перебирает сграбленные посты и заменяет все партнёрские ссылки на Aliexpress с чужих на свои.

Реализация:
1. Авторизуемся в П.П.
В цикле, на основе количества собраных постов:
2. Обращаемся к файлу с постом, берём его текст.
3. Изымаем из текста все ссылки на Aliexpress в массив
4. Берём из массива одну ссылку, и проверяем на предмет прямая/партнёрская, и если ссылка запартнёрена, делаем из неё прямую.
5. Берём выпрямленную ссылку, идём в П.П. и запартнёриваем её.
6. Берём нашу, уже партнёрскую ссылку, и сокращаем её при помощи Post запроса к сервису. Сервис в зависимости от настроек, либо ali.pub, либо ali.onl.
7. В завершении вставляем нашу партнёрскую/сокращённую ссылку в текст текущего поста.
Таким образом обрабатываются все ссылки во всех постах.

Этот шаблон отличается от материала в основном курсе. По ходу выполнения мы взаимодействуем сразу с несколькими сервисами, строим более сложную логику. Так же. здесь разобран пример составления Post запроса к сервису сокращения ссылок при помощи сниффера, что значительно ускоряет выполнение.
На его примере можно легко написать собственный шаблон по др. партнёрским программам, достаточно будет внести изменения в плане сервисов и партнёрок, а концепция в основном не изменится.

2. Граббер/Постер Vk​

Идея:
Собрать посты из указанной группы+ собрать комментарии к этим постам, адаптировать комменты под свои заранее заготовленные аккаунты псевдокомментаторов и разместить всё это у себя в группе. В результате получается постепенное наполнение группы постами и одновременное размещение под ними комментариев.

Реализация:
Здесь два шаблона:
- Граббер- собирает+ приводит к нужной форме и сохраняет посты с комментамив БД.
- Постер- размещает посты и комментарии к ним в указанной группе.

Граббер:
1. Забираем из указанной группы посты через запрос к API, заносим их в БД. Используем SQLite
2. Забираем через API комментарии к собранным постам, заносим их в БД.
3. Адаптируем собранные комментарии под свои аккаунты псевдокомментаторов(у нас есть список аккаунтов, заменяем ими всех комментаторов от Vk), заносим адаптированные комменты в БД.
При этом сохраняем профили наших псевдокомментаторов в отдельную папку, в дальнейшем, при постинге будем их применять для входа в Vk, заносим пути к ним в БД.
В результате работы этого шаблона мы имеем Базу Данных с инфой по постам и комментам, готовую к постингу в нашу группу. Отдельно лежат картинки к постам+ папка с профилями псевдокомментаторов.

Постер:
1. Обращаемся к БД, берём данные по посту(текст, пути к картинкам).
2. Размещаем пост.
Фиксируем время размещения поста и заносим в БД, это нужно для задержки между публикациями постов и для формирования списка времени размещения комментариев под этим постом.
Забираем со стр. публикации и заносим в БД. его id, это нужно для поиска этого поста для комментариев.
3. Далее организуем постепенное размещение комментариев под этим постом.
Стоит задержка с проверкой времени размещения коммента, если время подошло- идёт публикация комментария от имени определённого комментатора. Текст коммента, id поста, время публикации берём из БД.
Одновременно с размещением комментов идёт открутка задержки между публикацией постов, в нужное время будет опубликован следующий пост и соответственно пойдёт его комментирование.
Таким образом шаблон публикует посты и параллельно размещает под ними комментарии до завершения списка постов.

Что нового:
- Работа с XML(переписал граббер из основного курса, теперь вместо регулярок внутри ответа API работаем через XML методы).
- Применяем Базу Данных SQLite для хранения данных, показаны основные операции(создание БД, создание таблиц, заполнение таблиц данными, изменнение данных, выборка данных). Очень полезная штука, сильно упрощает работу.
- Используем профили, это ускоряет и обезопасивает работу, меньше "подозрительной активности"+ живучесть акков на постоянных проксях(если они применяются), выше.

Вот, если коротко, и всё.
Шаблон сложный и будет полезно его разобрать, но могу ответственно заявить, если разберётесь. то подавляющее большинство задач вам будет по плечу.
Пишите, если возникли вопросы.

P.S.
Приглашаю всех, кому интересно создание шаблонов для ZennoPoster. Здесь есть всё, чтобы этому научиться.
Присоединяйтесь!

 

@allcorrect сколько человек будете собирать? Произошли какие нибудь изменения с прошлой складчины?

 

Не знаю, как пойдёт.

Специально, ничего нового не дописывал, там и так с бонусами материала выше крыши, уверенный средний уровень. Курс построен от простого к сложному, а начать работать можно уже с первого блока, заметил, что те участники, что задают вопросы в поддержке уже не закончив просмотр начинают писать что то своё, а остаток курса щипают по необходимости. С задачей научить человека писать шаблоны, курс успешно справляется.
Если буду делать более сложные вещи типа интерфейсов, или связок с др. ПО через базы данных, то это будет отдельный материал.
Может быть добавлю закрытых шаблонов в качестве бонусов..... Но это не точно

 

Если C# не владею совсем, есть смысл записываться?

 

В блоке "Теория" есть уроки по азам C#, разбор базовых вещей, ну и потом весь курс практики с закреплением того, что пройдено в теории, в разнообразных комбинациях и связках.
Если вы хотели спросить, на сколько сложно изучить C#, то могу сказать, что программирование в целом довольно логичная штука, как только научитесь строить и формулировать логику задуманных проектов, то всё начинает получаться, не зависимо от языка. Но легко не будет, я например очень туго соображаю(по жизни, во всём, программирование не исключение), но выхожу из положения за счёт тупого переделывания множество раз, одних и тех же простых вещей(механическое запоминание), и постепенно собираю эти отработанные приёмы в цельные навыки, со временем всё получается, типа как езда на машине, только надо не забрасывать и не отступать, как говориться, вода камень точит. Так что если готовы поофигевать пару месяцев, то вы по адресу). Если не забросите, то всё получится, тем более я постоянно на связи и буду помогать.

 

В подписи.

 

в подписи!

 

В подпись поставил

 

В подпись поставил

 

В подписи.

 

В подписи.

 

В подписи

 

В подписи

 

Поставил в подпись.

 

В подписи

 

@Homer26rus

 

Извиняюсь, не заметил.

 

allcorrect, до декабря старта не будет? Просто надо уехать, буду в начале декабря, вот не знаю выписывать или нет.

 

В начале/середине декабря стартанём, не арньше.