x

Парсер сайтов на Python

Перейти к заказу
Техническое задание на разработку парсера на Python 1. Общее описание Необходимо разработать парсер на языке Python для автоматического сбора данных с веб-сайта(ов). Парсер должен извлекать структурированную информацию, сохранять её в базу данных и/или файл определённого формата. 2. Функциональные требования Поддержка работы через requests или selenium (в зависимости от необходимости рендеринга JavaScript). Извлечение данных по заданным критериям (указать, какие данные извлекать). Поддержка обхода пагинации (если применимо). Обход блокировок (User-Agent, прокси, задержки запросов). Логирование работы скрипта. Обработка ошибок (повтор запросов при неудачах, игнорирование проблемных страниц). Экспорт данных в: .csv, .json или .xlsx Базу данных (PostgreSQL, MySQL, SQLite — указать, если необходимо). 3. Процесс работы парсера 1.Чтение настроек из config.py (URL, заголовки, задержки и т. д.). 2.Отправка HTTP-запроса (requests или selenium). 3.Извлечение данных с нужных элементов HTML (BeautifulSoup или XPath). 4.Обход пагинации (если применимо). 5.Очистка и нормализация данных. 6.Сохранение данных в файл или базу данных. 7.Логирование результатов работы. .

Найдено 343117 результатов

написать текст

Здравствуйте! Работа несложная, всю инструкцию предоставлю. Имеется несколько видов работ с разной оплатой труда. Для связи... руб

Тексты
Опубликован:
11 часов назад
Бюджет:
1500 руб.~$18.73
Un Подработка

Доступные зaдaчи здесь : https://t.me/+2K024hjx5UliNGIy ( рaссмотрим фрилaнсеров для выполения этих зaдaч , примите отклик )

Резюме и вакансии
Опубликован:
11 часов назад
Бюджет:
5000 руб.~$62.42
U Подработка

Доступные задачи здесь : https://t.me/+2K024hjx5UliNGIy ( рассматриваем фрилансеров для выполнения этих зада ч , примите отклик )

Тексты и наполнение сайта
Опубликован:
11 часов назад
Бюджет:
5000 руб.~$62.42
Выгрузка на сайт XML-каталога «Проекта 111»

Нужно осуществить выгрузку на мой сайт (домен куплен), хостинг приобрету. Есть шаблон сайта, сделанный на тильде. Могу выгрузить его на хостинг и взять за основу для выгрузки каталога. Электронный XML-каталог «Проекта 111»: информация для программиста xml-export version 2.0.9 description last update 15.06.2016 Использование данных api2.gifts.ru возможно на сайтах, указанных при регистрации доступа. Создавать сервисы, которые передают полученные от api2.gifts.ru другим ресурсам через API, запрещено. Если вы разрабатываете программный продукт, использующий данные api2.gifts.ru (например, Bitrix-модуль для загрузки товаров каталога), он должен предусматривать авторизацию пользователей в api2.gifts.ru по персональному логину, выданному «Проектом 111». Описание состава выгрузки Экспорт содержит следующие xml-файлы + файлы картинок и доп.файлов. 1) http://ваш-логин:ваш-пароль@api2.gifts.ru/export/v2/catalogue/product.xml содержит только описания товаров 2) http://ваш-логин:ваш-пароль@api2.gifts.ru/export/v2/catalogue/catalogue.xml содержит описания товаров и структуру каталога сайта gifts.ru (фактически получается конкатенацией файлов product.xml и tree.xml) 3) http://ваш-логин:ваш-пароль@api2.gifts.ru/export/v2/catalogue/stock.xml ...........

Доработка и настройка сайта
Опубликован:
11 часов назад
Бюджет:
18000 руб.~$224.7
Лендинг на Next.js/TailwindCSS

Всем привет! Хотим обновить наш текущий сайт https://ru.gaff,agency и сделать его заново на Next.js/TailwindCSS. Дизайн хотим собрать из компонентов с сайта https://21st.dev. В качестве CMS нам удобно Supabase или любая headless CMS на ваше усмотрение. ТЗ в приложении.

Создание сайта
Опубликован:
11 часов назад
Бюджет:
100000 руб.~$1248.29
Корректировка таблиц

Здравствуйте . Нужно скорректировать таблицу БД и наш CSV файл для импорта товаров и импортировать товары на сайт. Движок ПХП Ларавел. Жду ваших предложений.

Доработка и настройка сайта
Опубликован:
11 часов назад
Бюджет:
2000 руб.~$24.97
Python, написать методы оплаты для CloudPayments

В формате созвона нужно для работающего бота телеграм написать методы, которые смогут принимать платежи от пользователей и... руб

IT-технологии и Разработка
Опубликован:
11 часов назад
Бюджет:
2500 руб.~$31.21
Отрисовать флаги в SVG

Отрисовать 25 флагов стран в формате SVG в стиле OpenMoji. В документе по ссылке список стран, ссылки на флаги для референса и ссылка на гайды по отрисовке: https://docs.google.com/spreadsheets/d/1VjOyEdgApuPI2FdTnR1iIF_tCAiEDxQd9k1f17Uq84M/edit?usp=sharing

Обработка и редактирование
Опубликован:
11 часов назад
Бюджет:
2000 руб.~$24.97
Разместить отзыв на яндекс

Писать http://t.me/ukrasavina Надо разместить отзывы.Работать можно на постоянной основе.Без опыта! руб

Тексты
Опубликован:
12 часов назад
Бюджет:
2000 руб.~$24.97
Un Подработка

Доступные зaдaчи здесь : https://t.me/+2K024hjx5UliNGIy ( рaссмотрим фрилaнсеров для выполения этих зaдaч , примите отклик )

Тексты и наполнение сайта
Опубликован:
12 часов назад
Бюджет:
5000 руб.~$62.42
Сумма прописью в Excel

Excel в финансовых документах довольно часто указывают сумму не только в виде числа, но и прописью, вручную это делать долго. Нужно автоматически преобразовать число в ячейки в текстовые значения при помощи функций Excel.

Персональный помощник
Опубликован:
12 часов назад
Бюджет:
1000 руб.~$12.49
Нарисовать визитки

Светлого дня, нужно нарисовать 3 визитные карточки для человека по направлениям 1: психология (психолог, коуч, философ) , 2: музыка (автор исполнитель), 3: IT (Разработка мобильных приложений, сайтов)

Логотип и брендинг
Опубликован:
12 часов назад
Бюджет:
1000 руб.~$12.49
Таргетолог VK

Ищу таргетолога для настройки и ведения РК в VK Присылайте сразу в отклике ссылку на портфолио/кейсы

Соцсети и SMM
Опубликован:
12 часов назад
Бюджет:
10000 руб.~$124.83
Нужен очень быстрый перебор примеров на C++

Нужен очень быстрый перебор примеров на C++, необходимо на ходу генерировать все возможные комбинации примеров и распараллелить это на GPU, чтоб максимально быстро работало. Подробности в ЛС

Скрипты и боты
Опубликован:
12 часов назад
Бюджет:
16000 руб.~$199.73
U Подработка

Доступные задачи здесь : https://t.me/+2K024hjx5UliNGIy ( рассматриваем фрилансеров для выполнения этих зада ч , примите отклик )

Продающие и бизнес-тексты
Опубликован:
12 часов назад
Бюджет:
5000 руб.~$62.42
XNN

[:26aa] Все н.аш.и предложения на бирже : https://t.me/+qzUwf3fjaiJmMWNi [:2611] оставляйте ваш отклик [:2611]рассматриваем на постоянное сотрудничество.

Тексты и наполнение сайта
Опубликован:
12 часов назад
Бюджет:
6000 руб.~$74.9
Un Подработка

Доступные зaдaчи здесь : https://t.me/+2K024hjx5UliNGIy ( рaссмотрим фрилaнсеров для выполения этих зaдaч , примите отклик )

Тексты и наполнение сайта
Опубликован:
12 часов назад
Бюджет:
6000 руб.~$74.9
Маркетинговое сопровождение в салон красоты

Добрый день! Сопровождение, консультация и систематизация продвижения салона красоты. Периодическое ведение карточных сервисов, авито,помощь в разработке маркетингового плана, составлении рассылок, возможно работа с сегментами базы клиентов. Более подробно расскажу лично.

Персональный помощник
Опубликован:
12 часов назад
Бюджет:
30000 руб.~$374.49
Кастомизация карточки товара

Добавить блок "С этим товаром часто покупают": Отображать 3-6 товаров, связанных с текущим. 3*2 товара в сопутствующих. Предложить варианты логики для формирования блока (например, товары из той же категории, товары с близкой ценой). Согласовать макет с заказчиком перед реализацией.

Доработка и настройка сайта
Опубликован:
12 часов назад
Бюджет:
1000 руб.~$12.49
Сверстать срочно (сегодня) обложку книги А5

Нужно срочно сделать дизайн обложки книги. Уже есть изображение для обложки спереди в фотошопе; размер примерно А5, по конкретике сможем сказать завтра (6 февраля), нужно сделать желательно в течение дня.

Полиграфия
Опубликован:
12 часов назад
Бюджет:
10000 руб.~$124.83

Текущая страница: 13

Всего страниц: 17156