Разработка системы для анализа данных из форм обратной связи
Ключевые навыки:
- Python (requests, BeautifulSoup, selenium) или Node.js (axios, puppeteer).
- Веб-скрапинг : парсинг HTML, анализ сетевых запросов, обход защиты (AJAX, JavaScript).
- Работа с CAPTCHA : интеграция сервисов 2Captcha, Anti-Captcha.
- Telegram Bot API : настройка ботов, отправка данных в чаты и ссылки.
- Проверка данных : проверка формы телефонных номеров по международным стандартам.
- Безопасность данных : HTTPS, токены, API-ключи для ограничения доступа.
- Тестирование : нагрузочные тесты, проверка корректности парсинга и передачи данных.
- Развёртывание : установка системы на сервере, настройка Диптихов и логирования.
- Аналитика : сбор статистики, визуализация данных о работе системы.
- Оптимизация производительности : эффективная обработка большого объема запросов.
- Разработать систему управления соц фишинга с веб-сайтов
- Создание парсера для сбора данных из форм обратной связи
- Реализовать Telegram-бота для передачи собранных номеров телефонов
- Настроить интеграцию системы сбора данных с Telegram-каналом
- Разработка системы обхода CAPTCHA для сбора данных
- Создание механизма проверки валидности номеров телефонов (по рабочей форме)
- Сбор и визуализация статистики успешных и неуспешных сборов данных
- Развернуть и протестировать систему сбора номеров телефонов
- Интеграция шифрования данных и ограничение доступа через API-ключи
- Тестирование и оптимизация системы сбора номеров телефонов для большого потока данных
- Обход сигналов через формы обратной связи (JavaScript/AJAX, CAPTCHA)
- Реализация автоматической регистрации отправок номеров телефонов в Telegram
- Создание пользовательской статистики для анализа источников данных
- Настроить систему и систему логирования работы сбора номеров