x

Разработка парсера сайтов для контроля остатков и цен

Sara Galen
Bots
Бюджет: 10000 руб.
Перейти к заказу
Создание системы для мониторинга остатков и цен товаров с сайтов: Зенон https://zenonline.ru/ Форда https://online.forda.ru/ Папиллонс https://tdppl.ru/ Ремэкс https://www.remex.ru/ Фабрикс https://fabreex.ru/ 2. Функциональные требования Сбор данных: Парсер должен извлекать информацию о товарах, включая следующие обязательные поля: Артикул (ключ товара): уникальный идентификатор товара. Единица измерения товара (например, шт., кг, л и т.д.). Цена товара. Наличие (количество на складе)(если доступно). Валюта цены (если доступно). Объемно-весовые характеристики товара В случае отсутствия артикулов или единиц измерения, парсер должен генерировать уведомление об ошибке. Формат данных: Собранные данные должны сохраняться в формате JSON. Структура JSON должна включать: product_code — артикул товара (ключ); name — название товара; price — цена; stock — количество на складе; unit — единица измерения; currency — валюта (если доступна). Логирование: Парсер должен вести логирование каждого запуска и ошибок. Уровень логирования должен быть настраиваемым, от базового (ошибки) до детального (все шаги парсинга). Логи должны сохраняться в файлы с метками времени. Формат логов: log_competitor_YYYY-MM-DD_HH-MM.log. Логи должны включать: Время начала и окончания выполнения. Количество успешно собранных товаров. Ошибки при сборе данных (например, недоступность сайта или изменения структуры страниц). Автоматизация: Парсер должен быть оптимизирован для периодического запуска через Cron. Логирование времени выполнения каждого запуска с фиксацией ошибок при запуске через Cron. Обработка ошибок: В случае отсутствия данных на странице или изменения структуры сайта, парсер должен зафиксировать ошибку и продолжить обработку следующих страниц. Парсер должен корректно обрабатывать такие ошибки, как: Недоступность сайта (отсутствие соединения). HTTP-ошибки (например, 404 или 500). Изменение структуры страницы. Производительность: Парсер должен быть оптимизирован для работы с большими объемами данных (десятки тысяч товаров). Должна быть реализована проверка и минимизация дублирования данных (например, при повторном запуске парсера). Валидность данных: Данные должны проверяться на корректность (например, цена не может быть отрицательной, наличие не может быть отрицательным числом и т.д.). 3. Технические требования Язык программирования: Python 3.x Форматы данных: Входные данные: веб-страницы HTML. Выходные данные: JSON (структурированный формат данных). Среда выполнения: Парсер должен быть совместим с Linux-системами для интеграции с Cron. Оптимизация: Парсер должен поддерживать многопоточную или асинхронную обработку данных для повышения производительности. Если это позволяет сайт конкурента 4. Дополнительная информация Каждый сайт -отдельное подзадание Парсер должен сохранять данные - запись CSV или записью в БД (postgres)
текст figma python перевод инфографика


Найдено 7029 результатов

Python

Связка: Python > IMAP, POP3 > Автоответчик Скрипт проверит почту и если там будет слово: INFO то отправит в ответ шаблонное письмо. Доп. Вопросы: 1) Вы работаете каждый день с скольки и до скольки по моск. времени? 2) Готовый ли вы работать всю эту неделю и всю следующую неделю? 3) Будете работать один или с напарником? 4) Потфолио есть?

Десктоп программирование
Опубликован:
28.11.24 11:01
Бюджет:
1000 руб.~$12.49
Разработать TG-бота на Python для арбитража трафика

Необходимо разработать Telegram-бота на Python для арбитража трафика, с поддержкой игр Mines и Lucky Jet. Бот должен быть удобным, функциональным и визуально привлекательным, с возможностью работы на нескольких языках (RU и EN). Цель — увеличение конверсии и профита от гемблинг-трафика. Основные функции: Проверка регистрации и промокода: Бот должен проверять, зарегистрирован ли пользователь на платформе. Поддержка ввода и валидации промокодов. Сигналы для зарегистрированных пользователей: Автоматическая отправка сигналов зарегистрированным пользователям, которые привязаны к сайту. Интерфейс: Эстетичный и функциональный дизайн, работающий в Telegram как полноценное приложение. (ожидается, что дизайн будет современным и привлекательным). Мультиязычность: Поддержка выбора языка (RU и EN) через удобное меню. Управление через панель администратора: Возможность отправки уведомлений, редактирования сигналов и проверки статистики использования бота. Настройки домена и сервера: Подключение домена для работы бота. Установка бота на виртуальный сервер (VPS). Дополнительные требования: Код должен быть хорошо документирован для возможных будущих доработок. Поддержка масштабирования, чтобы бот мог обрабатывать большой поток пользователей. Гарантия безопасности данных пользователей и минимизация рисков блокировок Telegram-аккаунтов. Встроенная аналитика для отслеживания эффективности сигналов и общей статистики работы бота.

Скрипты и боты
Опубликован:
28.11.24 10:36
Бюджет:
10000 руб.~$124.83
Разработка тг ботов

Нужно будет писать тг ботов для ведения многих аккаунтов в проектах по 1 тг шаблону, ведь эти боты по своей логике похожие. Что за проекты сброшуя, и полное тз. И больше всего через докер запускать нужно будет. Стек: Python, aiogram 3 и какая-то бд. Думаю 3+ коммерческого опыта. Подойдут только те что уже разрабатывали телеграм боты и автоматизировали роботу на сайтах (только запросники, никакой селениум для школьников) и готовы работать в долгосрочной форме. Готов обсудить отдельно каждого бота и платить по частично (по ботам).

Скрипты и боты
Опубликован:
28.11.24 10:29
Бюджет:
100000 руб.~$1248.29
Парсинг вопросов и ответов с ОЗОН

Необходимо осуществить парсинг вопросов и ответов с маркетплейса OZON и предоставить данные в формате Excel. Технические требования: Собрать данные из раздела вопросов и ответов карточек товаров. Результат предоставить в виде файла Excel с двумя столбцами: Первый столбец: вопрос. Второй столбец: ответ. Убедиться, что данные структурированы и не содержат дублирующей или лишней информации. Ожидаемые навыки исполнителя: Опыт работы с парсингом данных (например, с использованием Python, BeautifulSoup, Selenium и т.д.). Умение обрабатывать динамические страницы. Навыки обработки и очистки данных. Объем 700 SKU по 300 вопросов и ответов

Скрипты и боты
Опубликован:
28.11.24 10:27
Бюджет:
12000 руб.~$149.8
Залогиниться на сайте программно (PHP или Python)

Есть некий сайт с API, использует OAuth2/OpenID. Документации по api нет, до разрабов достучаться не возможно. Известны только эндпоинты.

Скрипты и боты
Опубликован:
28.11.24 10:23
Бюджет:
500 руб.~$6.25
Telegram-бота для мониторинга автопарка

Цену предлагайте! **Отчеты в рабочие чаты через бота(ов):** 1. **Ежедневный отчет в 08:00:** - Информация за предыдущий день и ночь: - Пройденное расстояние тягача и прицепа (км). - Моточасы двигателя прицепа (ч). - Расход топлива (л/100 км). - Текущие данные: - Скорость (км/ч), температура (), местоположение (адрес). - Формат сообщения: ``` [Номер ТС] [Водитель] за вчера: тягач [X] км, п/п [Y] км, м/ч [Z] ч, расход [W] л/100 км за ночь: тягач [A] км, п/п [B] км, м/ч [C] ч, расход [D] л/100 км сейчас: скорость [E] км/ч, темп. [F] место: [Адрес] ``` 2. **Уведомление при длительном открытии кузова:** - Если дверь открыта более 30 минут, через 60 минут после закрытия отправить: - Длительность открытия, адрес, температура. - Формат сообщения: ``` Внимание: [Номер ТС] [Водитель] дверь закрыта 60 мин назад, была открыта [Y] мин, по адресу: [Адрес] Температура в кузове: [Z] ``` 3. **Ежедневный отчет о заправках (09:00):** - Общий объем топлива за сутки: ``` За сутки было заправлено ДТ по всей технике [X] л ``` **Требования:** - Интеграция с API глонассsoft https://wiki.glonasssoft.ru/bin/view/API/ - Python, работа с Telegram Bot API (`aiogram` или `python-telegram-bot`). - Хранение данных (SQLite/PostgreSQL). - Опыт работы с API и Telegram-ботами. Рассматриваю предложения только со сроком примерным и ценой предварительной!

Скрипты и боты
Опубликован:
28.11.24 09:42
Бюджет:
20000 руб.~$249.66
Связка: Python > IMAP, POP3 > Автоответчик

Связка: Python > IMAP, POP3 > Автоответчик Скрипт проверит почту и если там будет слово: INFO то отправит в ответ шаблонное письмо. Доп. Вопросы: 1) Вы работаете каждый день с скольки и до скольки по моск. времени? 2) Готовый ли вы работать всю эту неделю и всю следующую неделю? 3) Будете работать один или с напарником? 4) Потфолио есть?

Скрипты и боты
Опубликован:
28.11.24 04:03
Бюджет:
1000 руб.~$12.49
Python

Связка: Python - poplib - ОтправительПисем. Скрипт проверить почту и отправит в ответ письмо... Доп. Вопросы: 1) Вы работаете каждый день с скольки и до скольки по моск. времени? 2) Готовый ли вы работать всю эту неделю и всю следующую неделю? 3) Будете работать один или с напарником? 4) Потфолио есть?

Десктоп программирование
Опубликован:
28.11.24 03:30
Бюджет:
1000 руб.~$12.49
Чат бот телеграмм-python

Доброго времени всем!Есть бот, но он не доработан, нужно в него внести правки небольшие и довести до ума.Цена обсуждаемая и сейчас указана базовая за день.

Other
Опубликован:
28.11.24 02:21
Бюджет:
2000 руб.~$24.97
Проверить программу Python

Доброго! Нужно проверить работу скрипта на вашей ОС, а так же если не заработает, то дать отчет.Идеально, если умеете программировать на python, чтобы исправить ошибки

Software
Опубликован:
28.11.24 02:18
Бюджет:
500 руб.~$6.25
Нужен веб-разработчик для реализации сайтов

Требуется разработка современного корпоративного сайта для компании. Дизайн уже готов (Figma), необходимо реализовать адаптивный сайт с использованием HTML, CSS, JS (можно React). Бэкенд на PHP (Laravel) или Python (Django). Функционал: форма обратной связи, каталог товаров с фильтрацией, интеграция с CRM. Работаем с профессионалами, соблюдение сроков, чистый код и уже реализованные проекты обязательны. Подробное ТЗ скину в лс Разработчика ищем если что в долгосрок, возможно даже рассмотреть найм Если умеете только фронт, либо же только бэк, то также можете присылать отклики.

Создание сайта
Опубликован:
28.11.24 01:03
Бюджет:
100000 руб.~$1248.29
Исправить скрипт загрузки товаров

Пишет ошибку так как не может получить доступ к файлам прайс листа и тем самым обновить остатки товаров и цены. Нужно исправить ошибку скрипт написан на python

Скрипты и боты
Опубликован:
28.11.24 01:01
Бюджет:
3000 руб.~$37.45
Написание программы на языке python

Требуется написать программу на языке python, все детали в прилагаемом файле, если есть какие-то вопросы задавайте. Срок - до конца этой недели, получается до вечера воскресенья, чем раньше - тем лучше. ВАЖНО - будет проверка на аи генерацию, поэтому не нужно предлагать работы сделанные через чат гпт.

Десктоп программирование
Опубликован:
27.11.24 16:35
Бюджет:
7000 руб.~$87.38
Разработать python скрипт для мониторинга позиций товара с разных на W

На входе у скрипта:- артикулНа выходе:Список регионов, ключевые фразы в них и места по этому товару с бустои и без

Backend
Опубликован:
27.11.24 13:24
Бюджет:
10000 руб.~$124.83
Python

Связка: Python - poplib - ОтправительПисем. Скрипт проверить почту и отправит в ответ письмо... Доп. Вопросы: 1) Вы работаете каждый день с скольки и до скольки по моск. времени? 2) Готовый ли вы работать всю эту неделю и всю следующую неделю? 3) Будете работать один или с напарником? 4) Потфолио есть?

Десктоп программирование
Опубликован:
27.11.24 11:54
Бюджет:
1000 руб.~$12.49
Исследование алгоритмов и механизмов работы поиска Telegram

Senior Reverse Engineer / Data Scientist (Исследование поисковых алгоритмов)Проектная работа | Удаленный формат | Бюджет ~$20,000О проекте:Требуется специалист для исследования алгоритмов поисковой выдачи и механизмов ранжирования в Telegram. Цель - глубокий анализ факторов, влияющих на позиции в поиске, и разработка эффективных стратегий продвижения.Ключевые задачи:- Исследование алгоритмов и механизмов работы поиска Telegram- Анализ факторов, влияющих на ранжирование ботов и каналов- Изучение механизмов геотаргетинга и их особенностей- Исследование влияния различных метрик на позиции в поиске- Выявление неочевидных паттернов и возможностей в алгоритмах- Разработка методологии тестирования различных гипотез- Системы отслеживания позиций (уже имеется)Требования:- От 3 лет опыта в реверс-инжиниринге или исследовании алгоритмов- Сильные навыки программирования на Python- Опыт анализа сетевого трафика и протоколов- Понимание принципов работы поисковых систем и алгоритмов ранжирования- Опыт работы с большими наборами данных- Знание методов сбора и анализа данных- Навыки исследования API и протоколовБудет большим плюсом:- Опыт работы с Telegram API- Опыт реверс-инжиниринга мобильных приложений- Понимание механизмов работы рекомендательных системУсловия:- Полностью удаленная работа- Проектная оплата от $20,000- Гибкий график- Интересная исследовательская задача- Минимум бюрократии, максимум автономииКонтакты для связи (tg):@hrcheckerP.S. В сопроводительном письме, пожалуйста, укажите ваш опыт работы с подобными задачами и предварительное видение подхода к решению.

Other
Опубликован:
27.11.24 09:27
Бюджет:
2000000 руб.~$24965.68
Настроить выгрузку данных из Amocrm

1. Организовать хранилище данных в PostgreSQL. Базу развернуть посредством сформированного SQLскрипта. 2. РазработатьPythonскрипты для выборки данных из APIAmoCRM и инкрементного обновления данных с периодичностью 15 минут 3. Настроить инкрементное обновление данных в хранилище посредством ApacheAirFlow, разворачиваемого через DockerCompose. 4. Проект передается в виде открытого исходного кода.

Скрипты и боты
Опубликован:
27.11.24 08:29
Бюджет:
30000 руб.~$374.49
Telegram-бот анти-спам

Есть проблема с спамом в мою группу telegram, в нее отправляют спам в виде сообщений и неприличных фотографий. Я начал писать telegram-бот на языке программирования Python, с текстом вопрос решил, необходимо помочь написать функцию для удаления неприличных фотографий и блокировки пользователя, который их отправил

Скрипты и боты
Опубликован:
27.11.24 07:43
Бюджет:
1000 руб.~$12.49
Разработка веб-системы управления

Разработка веб-системы управления статистикой и сотрудниками Описание задачи: Необходимо разработать веб-приложение для управления статистикой и сотрудниками компании, занимающейся арбитражем трафика. Система должна включать: 1.Личный кабинет баера с таблицей статистики (доходы, расходы, ROI, чистая прибыль, зарплата). 2.Кабинет помощников баеров (идентичен кабинету баера, с привязкой к главному баеру). 3.Кабинет тимлида с отображением статистики команды и расчетом процента от общего профита. 4.Админ-панель для управления сотрудниками, зарплатами, бухгалтерией и статистикой. 5.Интеграцию с трекером и сервисами по API для автоматической подгрузки данных. 6.Учет зарплатных ведомостей и расходов компании (аренда, зарплаты, прочие расходы). 7.Ведение базы данных сотрудников с личной информацией (телефон, почта, паспортные данные, категория, зарплата). Требования к разработке: Backend: Python (Django/Flask) или Node.js. Frontend: React.js/Vue.js или чистый HTML/JavaScript. База данных: PostgreSQL/MySQL. Авторизация через JWT. Современный, чистый интерфейс. Ожидаемый результат: Работающая веб-система с доступом для баеров, помощников и администраторов, полным функционалом, удобной админ-панелью и автоматизацией расчетов. Сроки: 15 дней Присылайте примеры ваших работ с подобным функционалом https://docs.google.com/document/d/1jjJ4w1bACyMNpdaeUhXERukWejiGZu6imC9ZgbS2d4c/edit?usp=sharing

Создание сайта
Опубликован:
27.11.24 07:43
Бюджет:
60000 руб.~$748.98
Воссоздать сайт легенду

### Техническое задание: Разработка мультиязычного веб-сайта **Цель:** Создать веб-платформу с регистрацией пользователей, бонусной системой, реферальной программой и мультиязычным интерфейсом. **Функционал:** 1. **Мультиязычность:** Интерфейс на русском, английском, арабском, китайском и других языках с выбором языка пользователем. 2. **Регистрация и авторизация:** Подтверждение e-mail, восстановление пароля, генерация реферальной ссылки. 3. **Реферальная программа:** Уникальная ссылка, личный кабинет со статистикой, начисление бонусов за активность приглашённых. 4. **Бонусы:** Кнопка с таймером, настройка через админ-панель. 5. **Чат:** Комнаты по языкам, модерирование (удаление сообщений, блокировка пользователей). 6. **Админ-панель:** Управление пользователями, настройка бонусов и чатов, модерация контента. **Технические требования:** - **Frontend:** React.js, Vue.js или аналоги. - **Backend:** Node.js, PHP (Laravel), Python (Django). - **База данных:** PostgreSQL или MySQL. - **Безопасность:** HTTPS, защита от DDoS и спама. **Дизайн:** - Минимализм, адаптация под мобильные устройства. **Результат:** - Готовый и протестированный сайт с админ-панелью и инструкцией по управлению.

Создание сайта
Опубликован:
27.11.24 06:52
Бюджет:
120000 руб.~$1497.95

Текущая страница: 32

Всего страниц: 352