Горячее
Лучшее
Свежее
Подписки
Сообщества
Блоги
Эксперты
Войти
Забыли пароль?
или продолжите с
Создать аккаунт
Регистрируясь, я даю согласие на обработку данных и условия почтовых рассылок.
или
Восстановление пароля
Восстановление пароля
Получить код в Telegram
Войти с Яндекс ID Войти через VK ID
ПромокодыРаботаКурсыРекламаИгрыПополнение Steam
Пикабу Игры +1000 бесплатных онлайн игр Отправься в мир мышек с забегами в реальном времени! Призывай духов, собирай команду для сражений, проходи кампанию, выполняй задания, наряжай персонажа и общайся с друзьями в веселом онлайн-приключении.

Мыши: Эволюция

Аркады, Приключения, Казуальные

Играть

Топ прошлой недели

  • AlexKud AlexKud 35 постов
  • Animalrescueed Animalrescueed 52 поста
  • Webstrannik1 Webstrannik1 50 постов
Посмотреть весь топ

Лучшие посты недели

Рассылка Пикабу: отправляем самые рейтинговые материалы за 7 дней 🔥

Нажимая «Подписаться», я даю согласие на обработку данных и условия почтовых рассылок.

Спасибо, что подписались!
Пожалуйста, проверьте почту 😊

Помощь Кодекс Пикабу Команда Пикабу Моб. приложение
Правила соцсети О рекомендациях О компании
Промокоды Биг Гик Промокоды Lamoda Промокоды МВидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
0 просмотренных постов скрыто
RegularNick
RegularNick
3 года назад
Лига фрилансеров

Парсинг с сайта⁠⁠

Добрый день, есть файл Excel куда я выгрузил названия предприятий с гиперссылками, нужно с него по порядку выгрузить отдельные данные (на фото).

Как это сделать? Обычный Power Quary не дает - выдает ошибку.
Уже смирился делать это ручками, но может есть какой-то отдельный способ.
В гугле решения не совсем подходящие (может я не туда гуглю)
В общем прошу помочь, если кто-то разбирается.
Поможете сэкономить кучу времени
спасибо

Парсинг с сайта
[моё] Без рейтинга Парсинг Программирование Microsoft Excel Помощь
24
Nedolugainvest
Nedolugainvest
3 года назад

Инвайтинг в Телеграм⁠⁠

Инвайтинг в Телеграм

200 подписчиков в сутки в группу Telegram ⤵️

https://invitebot.ru/?nedolugainvest=

В моей системе предусмотрен инструмент, который позволяет инвайтить(приглашать) целевую аудиторию в группу Telegram на автомате.

До 200 человек в сутки познакомятся с твоим предложением!

Или 6000 в месяц!

НО! Как это сделать?🤔

Проще, чем запуститься в любой другой соцсети или мессенджере.

Поехали:

01. Создаем открытую группу.

02. Отключаем сообщения для подписчиков.

03. Добавляем в группу бота @Toptgcmc_bot ( он удаляет системные сообщения).

04. Наполняем интересным контентом свою группу.

05. Запускаем инвайтинг через InviteBot (по инструкции).

Если у тебя есть канал в Telegram, то можно с него делать репосты постов в группу, просмотры при этом будут суммироваться, а эффективность возрастёт.

Подписчики группы будут видеть, что находятся в канале.

Таким образом, можно быстро познакомить целевых подписчиков с Тобой и Твоим проектом.

=========

Показать полностью 1
Telegram Инвайт Парсер Парсинг Telegram каналы Telegram бот Видео YouTube
8
3
rick1177
rick1177
3 года назад
Программирование на python

Вопрос к питонистам по парсингу⁠⁠

Товарищи,, добрый день.

Вот такой непрофессиональный вопрос от новичка в области.

Есть у меня приложение, которое до недавних пор как-то работало. Но что-то произошло, чего я ещё не знаю. В частности, сайт начал меня блокировать, по неизвестной мне причине. И самое важное, я не могу понять, как это работает.

Логика приложения такая... каждый раз при запуске приложение идёт на сайт с бесплатными proxy, берёт один из них случайны образом, подставляет ложный хедер и топает на интересующий меня сайт .

Интересующий же сайт возвращает ошибку:

requests.exceptions.ProxyError: HTTPSConnectionPool(host='vypiska-nalog.com', port=443): Max retries exceeded with url: / (Caused by ProxyError('Cannot connect to proxy.', ConnectionResetError(10054, 'Удаленный хост принудительно разорвал существующее подключение', None, 10054, None)))
Вот, например, это происходит так:

import requests
header = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.2; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/29.0.1547.2 Safari/537.36'}
proxies ={'https': 'https://192.111.137.34:18765'}
r=requests.get(url="https://vypiska-nalog.com/", headers=header, proxies=proxies)

В данном случае я просто подставил какой-то хедер и взял прокси, действовавший на момент написания поста сайта оных.


И опять та же ошибка. Если я просто иду браузером, то меня также блочит, однако, включая VPN, я получаю нужную страницу. Несколько товарищей перешли по ссылке и у них сайт открылся нормально, без VPN.


Помогите, плиз. В какую сторону копать подобные ошибки?

Научите, пожалуйста.

Показать полностью
[моё] Программирование Python Парсинг Блокировка Текст
12
Sat50
3 года назад

Нужно было парсить сайт⁠⁠

Нужно было парсить сайт эльдорадо, просматриваю sitemap. И вдруг неожиданно увидел как они расширили товарную матрицу)

Нужно было парсить сайт
Показать полностью 1
Парсинг Интернет-магазин
11
13
Есть официальный ответ
vaka.vaka
3 года назад

Немой звонок. Что это могло быть?⁠⁠

Только что узнал прикольную вещь.
Вам когда-либо поступали немые звонки, которые сами сбрасываются?
Так вот: Кому-то понадобилась база данных телефонных номеров. Они натравливают робота допустим на авито. Этот процесс называется "парсинг" (от англ. Parse) . Робот так или иначе доказывает сайту что он человек, а не робот, и получает телефонный номер из объявления. Далее, робот прозванивает номер, дабы убедиться что номер реален и может вести голосовой диалог.
Если вам поступил немой звонок - в некой степени вероятно, что вы попали в какую-то базу данных, на попадание в которую вы своего согласия скорее всего не давали.
Я сам с деревни если что. Если это давно известный факт, то не пинайте

[моё] База данных Парсинг Авито Текст Вопрос
4
9
rick1177
rick1177
3 года назад
Программирование на python

Вопрос к парсерам сайтов⁠⁠

Товарищи, подскажи новичку, плиз.

Много материалов, где можно посмотреть, как брать данные с сайтов. Но вот у меня возник такой вопрос... Допустим, что тебе нужно много страниц, но ты не знаешь их количество, т.е. тебе не известна "глубина и широта" ресурса. А тебе надо спарсить весь. Вот как это сделать?

Программирование Python Парсинг Разработка Текст
32
TikhayaNoch
TikhayaNoch
3 года назад

Технологии vs Катя (1:0)⁠⁠

Привет, друзья! Помогите, пожалуйста, вот с чем: я вчера захотела разбогатеть и в одной, презираемой молодёжью соцсети (ну там ещё классы ставят), создала группу с товарами ~ 4000 шт, загрузила товары через предложенную сайтом- поставщиком программу ( узнала, что это называется парсинг), оформила соответственно общим настроениям соцсети и начала заводить обширные знакомствах. А сегодня заметила, что цены на сайте чуть подросли!! Вводить покупателей в заблуждение я не хочу, как и вводить 4 тысячи новых цен вручную, а вот узнать, как автоматизировать процесс корректировки цен хочу. Я вообще-то читаю Пикабу и знаю,что здесь можно найти ответы на все вопросы, но вот с самостоятельным изучением вопроса парсинга не сложилось. В *сами знаете каких* группах я поняла только предлоги и союзы и Питон; там что-то не для средних умов. Поэтому вопию к тем, кто может объяснить🌿
Пришла веснааа, набухли почки, стаял снег 🌱🌿

[моё] Парсинг Помощь Социальные сети Текст
14
673
BugsDead
BugsDead
3 года назад
Программы и Браузеры

Как в 1 клик извлечь все изображения с веб-сайта | Парсинг картинок⁠⁠

Парсинг всех картинок со страницы сайта - долгий и трудоемкий процесс, если делать это вручную. Раньше так и происходило. К счастью, в 21 веке можно воспользоваться автоматизированными сервисами для парсинга картинок/изображений. Можно скачать фото даже с инстаграм (instagram)

📌 Сервисы:

Image Extractor: https://extract.pics/

Instagrabber: https://instagrabber.ru/

[моё] Автоматизация Парсинг Парсер Полезные сайты Вебмастер Видео
93
Посты не найдены
О нас
О Пикабу Контакты Реклама Сообщить об ошибке Сообщить о нарушении законодательства Отзывы и предложения Новости Пикабу Мобильное приложение RSS
Информация
Помощь Кодекс Пикабу Команда Пикабу Конфиденциальность Правила соцсети О рекомендациях О компании
Наши проекты
Блоги Работа Промокоды Игры Курсы
Партнёры
Промокоды Биг Гик Промокоды Lamoda Промокоды Мвидео Промокоды Яндекс Маркет Промокоды Пятерочка Промокоды Aroma Butik Промокоды Яндекс Путешествия Постила Футбол сегодня
На информационном ресурсе Pikabu.ru применяются рекомендательные технологии