Спец по веб-скрапингу и автоматизации обработки данных

Скрипты и боты 28.10.24 15:26

Бюджет: 80000 руб.

Вакансия: Специалист по веб-скрапингу и автоматизации обработки данных (проект) Мы ищем Python-разработчика с опытом веб-скрапинга для работы над проектом автоматизации сбора данных с международных сайтов, их обработки и вывода в Excel с формулами. Задачи: - Разработка парсера для сбора данных с сайтов (наименование товара, цена, наличие) по запросу. - Обработка данных с использованием BeautifulSoup, Scrapy, Selenium и pandas, формирование Excel-таблиц с расчетами. - Настройка алгоритма для автоматического поиска партномеров по 3-м ресурсам: Mouser, Digi-Key, Arrow. - Определение доступности и стоимости компонентов, сравнение предложений и создание финальной таблицы с данными от разных источников. - Подбор аналогов при отсутствии нужного компонента, интерпретация данных для готового коммерческого предложения. Функционал MVP: 1. Парсинг данных по заданным ресурсам. 2. Сравнение предложений по стоимости и срокам поставки. 3. Подготовка итоговой таблицы с учетом запрашиваемых и предложенных партномеров. 4. Генерация коммерческого предложения. На этапе тестирования мы рассчитываем на обратную связь для улучшения работы сервиса. В дальнейшем планируется перенос функционала в Telegram-бот для удобства использования. Проектная работа, с возможностью долгосрочного сотрудничества.

Найдено 6344 результата

Доделать программу на python

В программу необходимо добавить: 1. Ещё один парсер. 2. Сравнение по двойному клику на товар. Архив с программой и подробное ТЗ в прикрепленных файлах.

Скрипты и боты

Опубликован:
03.11.24 11:04

Бюджет:
15000 руб.~$187.25

Скрипт-парсер python

Добрый день. Нужно поправить скрипт-парсер Python в соответствии с логикой которую опишу. Оставляйте отклики

Десктоп программирование

Опубликован:
03.11.24 08:39

Бюджет:
3000 руб.~$37.45

Добавить авторизацию proxy Selenium

Имеется простой скрипт python + selenium, задача которого переходить на указанный в конфиге URL. Используются proxy и useragents.На данный момент авторизация proxy проходит посредством привязки IP.Задача:Добавить поддержку авторизации proxy с использованием логина и пароля.В отклике пишите, каким образом будете реализовывать.

Scripts

Опубликован:
03.11.24 08:00

Бюджет:
1500 руб.~$18.73

Помощь в Python разработке

Ищу мотивированного и способного начинающего Python-разработчика для присоединения к нашей команде профессионалов. Если ты хочешь развиваться в программировании, разбираешься в Python и хочешь создавать функциональные и эффективные боты и парсеры для реальных проектов, это отличная возможность начать карьеру и получить ценный опыт под руководством опытных наставников! Что будет входить в твои задачи: - Участие в разработке ботов и парсеров - Участие в проектировании архитектуры - Работа с API, парсинг данных с различных источников и оптимизация скорости выполнения; - Изучение и настройка библиотек для выполнения задач (requests, BeautifulSoup, Django, asyncio и другие); - Участие в мозговых штурмах для разработки креативных решений и улучшения функциональности проектов. Требования: - Уверенное знание Python (базовые структуры данных, работа с библиотеками, основы ООП); - Базовые навыки работы с REST API и библиотеками для парсинга - Опыт работы с Django и понимание принципов построения веб-приложений; - Внимание к деталям и желание обучаться новому; - Опыт в разработке небольших проектов или скриптов для автоматизации будет преимуществом. Условия: - Гибкий график с оплатой 300 рублей в час (средняя зп джуниора составляет 30000–40000 рублей в месяц, что эквивалентно 218 рублей в час; мы округляем в вашу пользу); - Бесплатное менторство и поддержка команды профессионалов; - Возможность профессионального роста и работы над интересными проектами.

Скрипты и боты

Опубликован:
03.11.24 06:39

Бюджет:
80000 руб.~$998.63

Помощь с селениум Python

Есть сайт, в нем нужно кликнуть на кнопку, чтобы опция товара была выбрана. Не могу понять, как на нее нажать.

Скрипты и боты

Опубликован:
03.11.24 02:19

Бюджет:
1000 руб.~$12.49

Разработка на python

Опытный программист, есть задачи по aiogram и sql. Создать бота который сможет выдержать примерно ~10к человек. Создание реферального бота. Таблицу рефералки приложу ниже. В бота заходят мои спонсоры. Подробнее в лс.

Скрипты и боты

Опубликован:
02.11.24 17:45

Бюджет:
10000 руб.~$124.83

Разработать мобильное приложение (Swift)

Добрый день! Ищем в команду Swift разработчика. Мы молодая студия разработки мобильных приложений и ботов. Наш основной стек – Flutter, Kotlin, Swift и Python для бекенд разработки. Работа проектная. Оплата зависит от проекта, в среднем 30-40 тыс. Подробно, все условия обсудим лично. От вас реальные знания и умения. Обязанности: Разработка и поддержка мобильных приложений на платформе iOS с использованием Swift.Участие в проектировании и разработке новых функций и модулей.Интеграция приложений с внешними API и сервисами.Оптимизация производительности и устранение багов. Требования: Опыт работы с Swift и iOS SDK от 1 года.Знание принципов разработки мобильных приложений.Опыт работы с системами контроля версий (Git).Понимание архитектурных паттернов (MVVM, MVC и др.).Умение работать в команде и хорошие коммуникативные навыки.Знания полного этапа опубликования мобильных приложений. Будет плюсом: Знание других языков программирования (Kotlin, Python).Опыт работы с CI/CD и автоматизацией процессов. При отборе будет дано тестовое задание: Написание небольшого мобильного приложения (пару экранов). Пожалуйста, в откликах указывайте свой тг.

Ios

Опубликован:
02.11.24 17:34

Бюджет:
40000 руб.~$499.32

Доработка телеграм-бота Python

Усовершенствовать существующий Telegram-бот, который предназначен для обработки фид-файла Подробности в ТЗ по ссылке. https://docs.google.com/document/d/1Xe2t_81k9_dVGCYgVsHFj2nn3bqSb87m_KIGBYPzU2U/edit?usp=sharing

Скрипты и боты

Опубликован:
02.11.24 17:32

Бюджет:
3000 руб.~$37.45

Исправления парсинга на Python

Есть парсинг на Python для парсинга веб версии TikTok и поиска профилей с email-ами с ротацией прокси, антикапчей, выгрузкой результатов в таблицу. После ряда обновлений от Тиктока парсинг нарушился, собираю 10-15 контактов в сутки, хотя ранее мог собирать сотни профилей с почтами. Попытка самостоятельно починить ни к чему не привели. Подробнее структура парсера смогу описать в переписке.

Скрипты и боты

Опубликован:
02.11.24 15:18

Бюджет:
20000 руб.~$249.66

Доработать скрипт на Python для обработки данных от сканера QR кодов

окружение:1) физический сервер на убунте2) подключен USB сканер куар кодов3) принтер этикетокзадача системы: работать в автономном режиме. после сканирования куар кода, распарсить его и на принтере напечатать эти данныечто есть сейчас:а) скрипт который принимает данные от сканера на Event9 и выводит что там приходитб) принтер подключен, проверен, можно печатать через lpв чем сложность и необходимость доработки:а) не получилось сделать обработку как стандартный input как от клавиатуры, возможно это связано с тем, что скрипт должен работать автоматическиб) в текущем режиме мы обрабатываем /dev/input/event9, но получаем набор нажатий клавиатуры. В идеале хочется автоматически обработать это и составить зашифрованную строку. Так пока не получилось и если не получится и дальше, то нужно продолжить и доделать map таблицу соответствия.в) особенную сложность доставляет то что текст в куар коде может быть перемешан латиница, кириллица и спец символы. при просмотре логов как приходит куар код выглядит так что это цепочка нажатия клавиш и переключение с латиницу на кириллицу происоходит отправкой LEFT_ALTпример: url?имя=Настя&contact=ddfda33итого ТЗ1) наладить сканирование, парсинг и вывод нужной информации с логами в консоль. глобально стек без разницы: убунта, python с библиотеками стоят. Можно еще поставить что угодно. Это главная и единственная задача сервера. других нет.2) автоматическая загрузка при перезагрузке сервера для обспечения автоматической работы3) подсказать как лучше из текущего сервера сделать образ для копирования на флешку, чтобы подобных серверов можно было сделать еще несколько.Данные:вот тут 3 варианта скрипта, были разные попыткиhttps://drive.google.com/file/d/1cqD798WxLePyXKknj...

Backend

Опубликован:
02.11.24 13:54

Бюджет:
5000 руб.~$62.42

Получить json с данными поисковой выдачи Avito

Мне нужно получить информацию об услугах продвижения и XL для каждого объявления в поисковой выдаче. Вручную через Инструменты разработчика я могу получить json, в котором есть, похоже, вся необходимая мне информация из поисковой выдачи. Но я так и не нашёл запроса или url, по которому можно этот json получить (у меня мало опыта с AJAX-запросами). Поэтому мне нужна помощь другого разработчика, который научит как получить этот json (напишет скрипт, который сохранит этот json как файл и ответит на пару вопросов, если у меня они возникнут). Мне точно не подойдёт Selenium (он слишком медленный). Желательно, чтобы скрипт был написан на python, но на крайний случай подойдёт JS. Во вложениях Техническое задание со скринами и json-файл в качестве примера, что я хочу получить.

Юзабилити, тесты и помощь

Опубликован:
02.11.24 13:24

Бюджет:
1000 руб.~$12.49

Спарсить данные с API Wildberries и сохранить в БД

Задача: Спарсить данные с API Wildberries и сохранить в базу данных Описание задачи: Необходимо спарсить статистику рекламы с API Wildberries по следующим эндпоинтам: Получение списка рекламных кампаний https://openapi.wildberries.ru/promotion/api/ru/#tag/Media/paths/~1adv~1v1~1adverts/get Получение данных конкретной рекламной кампании https://openapi.wildberries.ru/promotion/api/ru/#tag/Media/paths/~1adv~1v1~1advert/get Получение статистики рекламных кампаний https://openapi.wildberries.ru/promotion/api/ru/#tag/Statistika-mediakampanii/paths/~1adv~1v1~1stats/post Статистика включает данные по: Медиакампании (рекламная кампания), Баннерам, Типам устройств, Артикулам WB. Требования к результату: 1.Данные должны быть сохранены в базу данных в определённом формате, как на скриншоте (см. таблицу полей в приложении). 2.Медиакампания может содержать несколько баннеров, и один баннер может отображаться на разных устройствах. К одному баннеру могут быть привязаны несколько артикулов WB. 3.Даты начала и окончания работы баннера могут не совпадать с датами медиакампании. 4.Статистики (например, CTR, CPC, ATBS) возвращаются API с привязкой к баннеру и устройствам. 5.Данные должны содержать информацию о типах устройств, просмотрах, кликах, добавлениях в корзину, а также прочие необходимые статистики. Написание на python, к API доступ предоставляем.

Базы данных и клиентов

Опубликован:
02.11.24 12:54

Бюджет:
3000 руб.~$37.45

Починить форматирование документов на сайте

Есть сайт по переводу медицинских документов с помощью ChatGPT: https://github.com/sergeychernyakov/umetex Бекенд написан на: Python, Django Есть проблема с форматированием таблиц. Переведенный текст выходит за ее рамки. Возможны новые доработки за доплату в дальнейшем

Доработка и настройка сайта

Опубликован:
02.11.24 12:22

Бюджет:
7000 руб.~$87.38

Активные программисты

Ищем активных программистов для долгосрочного сотрудничества. Знания языков от middle: python, c++, c#. Часто будем поставлять заказы, средний чек 3к. Ключевое качество - активность

Десктоп программирование

Опубликован:
02.11.24 10:24

Бюджет:
6000 руб.~$74.9

Телеграм бот на python

необходим бот для для предложки новостей Сценарий 0. Бот закрепляется в описании ТГ канала и далее любой пользователь может ему написать Пользовательский сценарий: 1. Пользователь стартует бота 2. бот выводит сообщение и 2 кнопки: Предложить новость / предложить пост 3. При нажатии на одну из кнопок пользователь может написать свою новость/пост прикрепив ссылку/картинку/видео/ файл и тд так же он всегда может дополнить ее перед отправкой 4. далее бот предлагает отправить новость/пост - когда пользователь нажимает - новость форвардится в админскую закрытую группу Админский сценарий: 1. бот присылает в пользовательскую групп новость пост, к новости он добавляет кнопку забанить, по которой пользователь банится и больше не может взаимодействовать с ботом (если пользователь забанен кнопка меняется на разбанить) 2. В админской группе (и только в ней) доступны следующие команды: /sendToUser - написать пользователю сообщение /banUser /unBanUser админов банить нельзя использовать только python нужно разместить бота на моем хостинге

Скрипты и боты

Опубликован:
02.11.24 07:29

Бюджет:
40000 руб.~$499.32

Cформировать УПД через через функцию GenerateTitleXml (API Диадок)

Необходимо реализовать функцию создания УПД из своей учетной системы. API Диадока подключена, работает. Есть все необходимые данные для Диадока - BoxID покупателя и продавца, ID от ФНС.Информация из шапки и детализации УПД - в виде отдельных строк из своей системыНужно все это собрать, так чтобы получился XML файл, который примет Диадок.В документации сказано - "подготовить упрощенный XML-файл титула — UserDataXml". Вот этот момент не понимаю.Язык - Python. Но если сможете разъяснить полный цикл создания УПД для Диадок - то язык не важен.Пожалуйста не откликайтесь без опыта работы с API Диадока. С помощью гугления или ChatGpt эта задача не решается.

Backend

Опубликован:
02.11.24 06:16

Бюджет:
5000 руб.~$62.42

Разработка тг бота с функционалом парсинга

Нужен разработчик для создания простого Telegram-бота, который будет собирать контент с заданных сайтов или соцсетей и отправлять его в личные сообщения пользователю. Основные задачи для бота:Парсинг контента: Бот должен регулярно проверять определенные сайты или соцсети и собирать новый контент (тексты, изображения, ссылки).Отправка сообщений: Бот автоматически отправляет собранный контент пользователю в Telegram. Нужно настроить частоту отправки (например, раз в час или в день).Возможность уникализации контента Настройки: Сделать простые команды для управления ботом (например, /start, /stop) и возможность выбора источников, откуда собирать данные.Технические требования:Python или Node.js (на выбор).Бот должен корректно обрабатывать ошибки и работать стабильно.

Backend

Опубликован:
01.11.24 21:34

Бюджет:
15000 руб.~$187.25

Разработать функционал телеграм бота

Нужен разработчик для создания простого Telegram-бота, который будет собирать контент с заданных сайтов или соцсетей и отправлять его в личные сообщения пользователю. Основные задачи для бота:Парсинг контента: Бот должен регулярно проверять определенные сайты или соцсети и собирать новый контент (тексты, изображения, ссылки).Отправка сообщений: Бот автоматически отправляет собранный контент пользователю в Telegram. Нужно настроить частоту отправки (например, раз в час или в день).Настройки: Сделать простые команды для управления ботом (например, /start, /stop) и возможность выбора источников, откуда собирать данные.Технические требования:Python или Node.js (на выбор).Бот должен корректно обрабатывать ошибки и работать стабильно.От кандидата ждем опыт в создании ботов для Telegram и навыки парсинга данных.

Backend

Опубликован:
01.11.24 20:57

Бюджет:
1000 руб.~$12.49

Разработь Telegram бота для тату салона

Цель проекта:Разработка и внедрение телеграм-бота для автоматизации процессов взаимодействия с клиентами тату-салона. Бот должен предоставлять информацию о салоне, услугах, акциях, записи на процедуры, а также обеспечивать обратную связь с клиентами.Функциональные требования:Информация о салоне: - Предоставление общей информации о тату-салоне: адрес, контакты, режим работы. - Описание услуг, предоставляемых салоном. - Информация об акциях и специальных предложениях.Запись на процедуры: - Возможность записи на татуировки, перманентный макияж, удаление татуировок и другие процедуры. - Предоставление информации о свободных слотах для записи. - Возможность выбора специалиста и даты процедуры.Обратная связь: - Получение отзывов и предложений от клиентов. - Ответы на часто задаваемые вопросы. - Решение возникающих проблем.Статистика: - Сбор и анализ данных о посещаемости бота, записи на процедуры. - Формирование отчётов о работе бота.Нефункциональные требования:Дизайн: - Современный и стильный дизайн бота. - Удобство использования.Безопасность: - Защита персональных данных клиентов. - Соблюдение законодательства о персональных данных.Интеграция: - Возможность интеграции с другими системами тату-салона.Поддержка: - Наличие технической поддержки для решения возникающих проблем.Требования к разработке:Сроки: - Разработка и внедрение бота в течение [указать срок].Документация: - Разработка технической документации. - Тестирование бота.Требования к разработчику: - Опыт разработки телеграм-ботов. - Знание Python или другого языка программирования для разработки ботов.Требования к окружению: - Наличие Python и необходимых библиотек для разработки бота.Требования к тестированию: - Тестирование бота на соответствие требованиям.Требования к поддержке: - Наличие поддержки для решения возникающих проблем.Требования к отчётности: - Предоставление отчётов о работе бота.Это лишь пример технического задания для разработки телеграм-бота тату-салона. Вы можете дополнить или изменить его в соответствии с вашими потребностями.

Bots

Опубликован:
01.11.24 18:56

Бюджет:
100 руб.~$1.25

[playwright, python] автоматизация отправки email через аккаунты

Добрый вечер. Нужно сделать рассыльщик email, используя мои аккаунты от определённого зарубежного почтового сервиса. Использовать библиотеку playwrigh Автоматизация браузера. Многопоток. Например, если 20 потоков, а 800 аккаунтов, то будет 20 потоков по 40 аккаунтов в каждом. ТЗ есть. 15 000 рублей, подробности в телеграме

Desktop

Опубликован:
01.11.24 18:30

Бюджет:
15000 руб.~$187.25