телефонов - 1 563
снг группы (чаты)
снг группы (чаты)
У вас должно быть более 10 реакций для просмотра скрытого контента.
log.rar - AnonFiles
anonfiles.com
-
XSS.stack #1 – первый литературный журнал от юзеров форума
чем такой парсинг делается?
- Автор темы
- Добавить закладку
- #3
не думал, что вызовет такой интерес....
софт - свой (серверный, через свое тг/апликейшен приложение)
раз такое дело, тогда, спаршу еще что-то
след раз выложу 500к (на днях)
можем по сути спарсить много чего (хоть все снг чаты) при минимальных финансовых расходах
можно личный пожалуйста? не хватает симпатий(
- Автор темы
- Добавить закладку
- #5
я как раз и отписал Вам на эту тему в личку
Вы в личку просите дать Вам то, что положено под МИНИМАЛЬНЫЙ хайд ....
и даже лайк не ставите... ну вот и кино )
всем кому интересна тема - хочу спарсить все снг чаты/группы, нужны минимальные рессы... будет здорово если админ/модер соберет 3-5 чел )) с каждого аж !до 50-100 долл. вопрос не в деньгах, нужно будет потратить время на формирование групп + акки для парса вот и все
А точнее на самый дешеванский дедик рублей 500 на месяц.
Чем обусловлена такая цена? Скрипт на пионе? бесплатно зарегать приложуху? Сапсибо конечно, что ты парсишь для себя и выкладываешь, но драть такие деньги с простых смертных такое себе...
- Автор темы
- Добавить закладку
- #7
ну да
простым смертным же не понять ... и никто не хочет быть "ободранным" аж на 50 долл
1) на 1ну симку можно повесить всего до 300 групп (по инфе из гугла максимальный лимит 500), у меня бан прилетает за +-300 групп
у меня 1на симка стоит ±5 долл
10 симок = 50 долл и это всего 3к групп....
2) через 1н дедик запускаем 3-4 симки.... (за парсинг - ипы дедиков тоже уходят в бан и все акки, которые с него ходили или пробуют = бан)
дедик стоит ±10 долл + комсы за оплату в крипте, по сути еще удорожание на 5 длолл на каждых 3 дедиках (на 1м акке)
и вот вам простая математика на ВСЕГО 3к групп через 10 симок/через 3 дедика ....
чистая финансовая математика ±50$ (симки) +35$ (дедики) = 85 долл (как я и писал 50-100 долл.)
3) люди нужны не просто, которые скинут 50 долл, а кто так-же поучавствуют
3.1 - вобьет группы в акки, токены с которых потом передаст под парсинг (сейчас 10 групп и пауза на добавление ±5-10 мин..., сразу добавиться в 200-300 групп нельзя)
3.2 - почти во всех группах нужно боту разгадать загадку или нажать "я не бот"
и куча других приятных вещей, которые обычным смертным не понять....
вбивать группы нужно тоже с разных айпи....
поэтому "цена обусловлена" ...не желанием заработать эти слезы....
я с радостью дам кому-то 100, если кто-то распарсит по моему списку пару К групп (я даю ссылки на группы)
если есть желающие - прошу ПМ
ну да
простым смертным же не понять ... и никто не хочет быть "ободранным" аж на 50 долл
1) на 1ну симку можно повесить всего до 300 групп (по инфе из гугла максимальный лимит 500), у меня бан прилетает за +-300 групп
у меня 1на симка стоит ±5 долл
10 симок = 50 долл и это всего 3к групп....
2) через 1н дедик запускаем 3-4 симки.... (за парсинг - ипы дедиков тоже уходят в бан и все акки, которые с него ходили или пробуют = бан)
дедик стоит ±10 долл + комсы за оплату в крипте, по сути еще удорожание на 5 длолл на каждых 3 дедиках (на 1м акке)
и вот вам простая математика на ВСЕГО 3к групп через 10 симок/через 3 дедика ....
чистая финансовая математика ±50$ (симки) +35$ (дедики) = 85 долл (как я и писал 50-100 долл.)
3) люди нужны не просто, которые скинут 50 долл, а кто так-же поучавствуют
3.1 - вобьет группы в акки, токены с которых потом передаст под парсинг (сейчас 10 групп и пауза на добавление ±5-10 мин..., сразу добавиться в 200-300 групп нельзя)
3.2 - почти во всех группах нужно боту разгадать загадку или нажать "я не бот"
и куча других приятных вещей, которые обычным смертным не понять....
вбивать группы нужно тоже с разных айпи....
поэтому "цена обусловлена" ...не желанием заработать эти слезы....
я с радостью дам кому-то 100, если кто-то распарсит по моему списку пару К групп (я даю ссылки на группы)
если есть желающие - прошу ПМ
Сразу чувствуется непрофессионализм.
1. Зачем покупать сим-карты? Можно купить зарегистрированные аккаунты с отлёжкой, стоить будут 15-20 рублей за штуку.
2. Зачем менять дедик, если забанили ip? Можно использовать отдельные прокси на каждый аккаунт, чтобы не заблокировали всю сетку, висящую на одном ip. Стоят прокси копейки.
3. Зачем вбивать группы вручную? Пишется простенький скрипт (вернее, дополнение к основному скрипту) который будет парсить участников групп по списку даже не добавляясь в эти группы! И не надо никакой капчи разгадывать. Это касается любых открытых групп. В закрытые действительно надо добавляться, но это другая история.
Ваш метод парсинга - это метод дилетанта, потому что вы скачали скрипт для парсинга с ГитХаба, коих там десятки, и кроме как запустить его через свой клиент не смогли. И раздуваете щёки, рассказывая про какой-то уникальный "серверный скрипт" и "своё тг/апликейшен приложение".
В прямых руках себестоимость такого парсинга будет в районе 3-5 тысяч рублей (это себестоимость расходников). Время и навыки, конечно, тоже стоят денег и их тоже надо оплачивать, но вы затеяли разговор о стоимости технических средств, поэтому я прокомментировал только эту составляющую.
Последнее редактирование:
- Автор темы
- Добавить закладку
- #9
можете сообщить кошелек я закину 100тку а Вы спарсите 3к групп?Сразу чувствуется непрофессионализм.
1. Зачем покупать сим-карты? Можно купить зарегистрированные аккаунты с отлёжкой, стоить будут 15-20 рублей за штуку.
2. Зачем менять дедик, если забанили ip? Можно использовать отдельные прокси на каждый аккаунт, чтобы не заблокировали всю сетку, висящую на одном ip. Стоят прокси копейки.
3. Зачем вбивать группы вручную? Пишется простенький скрипт который по списку будет парсить участников групп даже не добавляясь в эти группы! И не надо никакой капчи разгадывать. Это касается любых открытых групп. В закрытые действительно надо добавляться, но это другая история.
Ваш метод парсинга - это метод дилетанта, потому что вы скачали скрипт для парсинга с ГитХаба, коих там десятки, и кроме как запустить его через свой клиент не смогли. И раздуваете щёки, рассказывая про какой-то уникальный "серверный скрипт" и "своё тг/апликейшен приложение".
В прямых руках себестоимость такого парсинга будет в районе 3-5 тысяч рублей (это себестоимость расходников). Время и навыки, конечно, тоже стоят денег и их тоже надо оплачивать, но вы затеяли разговор о стоимости технических средств, поэтому я прокомментировал только эту составляющую.
можем на постоянной основе !
и да скриптик в 2 строки будет сам группы искать и добавляться, удаляться и так нонстопом 24/7 с отслеживанием изменений в группах и переименованиями/добавлениями юзверей
давайте от моей дилетантской истории к делу! заработаете денег в конце концов
То, о чём вы пишите, это уже не просто парсинг, а мониторинг. Да и по стоимости, вы должны понимать, что 50 долларов - это только себестоимость расходников (аккаунты, прокси, оплата сервера). За услуги можно смело накинуть ещё доларов 200, а то и 300. Поймите, я не критиковал сумму, я раскритиковал ваш подход. Оптимальный вариант, который я вижу, вы идёте в группу разработчиков в Телеграме (к примеру, в эту @botoid) и заказываете себе профессиональный пасрер со всеми хотелками. А дальше сами запускаете его когда надо и парсите, или оставляете в режиме мониторинга. Это выйдет вам намного дешевле, чем оплата разовых услуг на регулярной основе, или пляски с бубном вокруг примитивного скрипта с ГитХаба, который пытаетесь применить в промышленных масштабах. ?
Последнее редактирование:
- Автор темы
- Добавить закладку
- #11
"Да и по стоимости, вы должны понимать, что 50 долларов - это только себестоимость расходников" - по сути тоже самое, что и написал я.. )
мой подход обоснован тучей тестов с аками по 50 рублей регнутыми на микс мировые номера с разных ипов, которые дохнут как мухи зимой и полудохлыми проксями от которых воняет за 1 км..) поэтому я и написал то, что написал про расходную часть. не из пальца
а бан акка за 50 рублей, в который ты вбивал группы для мониторинга на протяжении 3х дней и вбил например 100 шт....(да везде проходил "капчи" и занимался математикой с ботами, доказывая что ты не бот) такой приятный момент.....и все по новой
простой тупой парсер мне нужен) от слова совсем) группы-свалки аля "проститутки и знакомства по 100к тел" - тоже не нужны, ну так для коллекции
пысы - у каждого своя тема, и свои задачи)
и да с докером, нодой, все хорошо) я даже знаю что такое пг и пг-кли, редис и монго
(это я про гитхаб)хорошего дня) спасибо за общение! искренне!
я напишу сегодня как я вижу "коллективный граббинг тг, для нуждающихся", если кому интресно, прошу лайкнуть-дизлайкнуть этот пост.
лайки-дизы - чисто счетчик, чтобы понять/определить интересантов коллективного парсинга.
как говорится - толпой то проще)
Последнее редактирование:
Не надо в разделе попрошайничать. 100 раз предупреждал.
Тут нет нуждающихся. Тут некоммерческий раздел. Собирать деньги ни с кого я не буду. Вся коммерция вне этого раздела.
Есть чем - делимся. Нет - не делимся.
- Автор темы
- Добавить закладку
- #13
вопрос не в коммерции
у меня нет цели заработать) тут будет только минус)
деньги - уйдем от денег, они никому не нужны тут
я в личку всем и отвечаю - что парсить за деньги и софт я не продаю
сори если неправильно написал
Лично для меня был бы интересен такой функционал.
Есть дохрена чатов. Нужно циклически их обходить и собирать данные об участниках.
Что имеется ввиду под данными - tg_id, username, first_name, last_name и время парсинга.
Если у человека ничего в данных не меняется - считаем запись за дубль и удаляем. Если что-то поменялось - пишем в БД и записываем время парсинга. Т.е. таким образом пишем историю изменения данных аккаунта - ников, которые себе человек ставил и first last name.
Из специалистов, подскажите, что для этого потребуется? Сколько чего?
Есть дохрена чатов. Нужно циклически их обходить и собирать данные об участниках.
Что имеется ввиду под данными - tg_id, username, first_name, last_name и время парсинга.
Если у человека ничего в данных не меняется - считаем запись за дубль и удаляем. Если что-то поменялось - пишем в БД и записываем время парсинга. Т.е. таким образом пишем историю изменения данных аккаунта - ников, которые себе человек ставил и first last name.
Из специалистов, подскажите, что для этого потребуется? Сколько чего?
Бюджет на парсинг точно. Иначе у тебя подсети по маске будут уходить
Слышал, если держать определенные лимиты с 1ого аккаунта, то проблем с БАНанами быть не должно.
Т.е. меня бы устроил и раз в месяц проходиться по чатам.
Не. Я не о том. Я о том что бы парсить весь телеграм.
- Автор темы
- Добавить закладку
- #18
если парсить 1н раз в месяц - то нету вообще никаких проблем.
Нужно список групп и все
Если их 100-200 - то ничего не стоит
Getting a list of groups should be easy with snowball sampling.если парсить 1н раз в месяц - то нету вообще никаких проблем.
Нужно список групп и все
Does this also happen when you join them and leave after you got the data needed? Could be a good workaround.
По гео юса не парсите группы?