Дек 18

Парсинг списка сайтов LiveJournal

Категория: Парсинг сайтов | Опубликовано: 18-12-2017

Как-то раз задумался над тем, как получить список всех сайтов сервиса LiveJournal.

Поиск в интернете ничего не дал, единого списка/реестра я не нашел. Тогда мне стало интересно — можно ли собрать список LiveJournal-овских  сайтов анализируя сами сайты изнутри (точнее кто у кого в друзьях)?

Написал программу (чисто ради интереса), для того что бы было с чего начинать работать — добавил в программу первоначальный небольшой список LJ-cайтов и возможность парсинга произвольного поста на предмет комментариев от других LJ-сайтов.

После этого, имея стартовую базу в несколько тысяч уникальных адресов, дописал функционал ,что бы идти по списку и анализировать профиль, тут же добавляя новые адреса в список. Проход по списку пришлось делать с задержкой, т.к. выяснилось, что если дергать LJ чаще, чем раз в две секунды — то за это банят на срок не меньше суток. Хотя и это не проблема, прокси ведь никто не отменял. Дописал функционал по параллельной обработке (с регулируемым количеством потоков) через список прокси.

В общем, не спеша обработав меньшую часть списка удалось при помощи самописного парсера удалось получить 2 миллиона LJ-сайтов:

Дек 09

Нестареющий анекдот 2014 года — про пирожок с яйцами

Категория: Мысли вслух | Опубликовано: 09-12-2017

Анекдот 2014 года:

Идет президент Украины Янукович по президентской столовой в городе Киеве.
Размышляет, чем бы поужинать. И вдруг с одного из подносов, где лежат пирожки, раздается тихий голосок:
— Возьми меня, Янукович! Я тебе пригожусь!
— Чем же ты можешь мне пригодиться, маленький пирожок? — удивился Янукович.
— А я с яйцами!

В связи с последними событиями (олимпиада), Воландеморту Воландемортовичу тоже бы не помешал пирожок с яйцами.

Ноя 10

Очередные перлы на мове

Категория: Занимательная буквология | Опубликовано: 10-11-2017

Русский язык:

«за мелом выстроилась изысканная очередь очередных дежурных по классу»

Перевод на мову:

«за крейдою вишикувалася вишукана черга чергових чергових по класу»

 

или вот еще

Ноя 10

Кратко о производителях с хитрой фасовкой товара

Категория: Рубрика гнева | Опубликовано: 10-11-2017

Буду краток.
Производители, фасующие упаковки масла по 180 грамм, плавленые сырки по 45 грамм, крупы по 840-900 грамм и т.д. — горите в аду, твари!

 

 

 

 

Авг 16

Вопросы ценообразования в Д(Н)Р + цены на продукты август 2017

Категория: Без рубрики | Опубликовано: 16-08-2017

Общался недавно с продавцом из одного небольшого пищевого магазина (ассортимент от сыра и колбасы до овсяных хлопьев).

Закупаюсь там частенько, в лицо знают.

Зашел разговор за белорусские продукты (у нас тут продаются во многих местах). Спросил — как они заходят в Д(Н)Р.

Оказывается, исключительно через РФ.

Цепочка такая: РБ -> РФ (+8% к цене из-за таможни) -> Д(Н)Р (+12% к цене из-за таможни) -> Магазин (у этого +7% наценки) -> покупатель.

Итого, почти 30% удорожания товара как с куста. И это наверняка еще без транспортных расходов.

Вот так.

 

Цены на продукты:

Свинина — 300-320 (лопатка мякоть), гуляш 200

Курица — 105

Банка шпрот (240 грамм) — 120

Май 23

Внезапный парсинг крупнейшего украинского сайта объявлений

Категория: Парсинг сайтов | Опубликовано: 23-05-2017

Предыстория написания парсера такова.

На одном украинском сайте объявлений (сайт с трехбуквенным именем, кстати, довольно мощный, является аналогом российского сайта Slando.ru)  я как-то размещал объявление о продаже ненужной всячины. Указал номер телефона, по которому можно со мной связаться. Указал и указал, ничего особенного. Через несколько дней вечером получаю SMS-сообщение приблизительно в таком тоне: «Здравствуйте, %моё имя%! Мы супер-пупер компания, занимающая веб-дезигном, заказывайте сайты у нас. Наши поезда самые поездатые поезда в мире! тел. XXX-XXXXXХХ«.

Телефон мой, имя моё. Странно. Откуда?
Позвонил по номеру. Спрашиваю вежливым, но недобрым голосом:

- «Это та самая-супер-пупер компания?»

— «Ну да, это мы» — отвечает человек невеселым голосом

- «Мне тут SMS от вас пришло. Что это за спам рассылка?»

— «Ну …это не спам рассылка, это у нас информирование такое»

Мар 05

Иосифу Виссарионовичу — вечная память!

Категория: Без рубрики | Опубликовано: 05-03-2017

Stalin

 

Фев 21

Виталий Иванович Чуркин убит или «всё хорошо, прекрасная маркиза»?

Категория: Рубрика гнева | Опубликовано: 21-02-2017

20 февраля 2017  -  умер(убит?) Виталий Иванович Чуркин, постоянный представитель России в ООН.

nee_v_i_churkin

20.02.1720:06
О кончине Постоянного представителя Российской Федерации при ООН В.И.Чуркина
337-20-02-2017
СООБЩЕНИЕ ДЛЯ СМИ
МИД России с глубоким прискорбием сообщает, что 20 февраля, за день до своего 65-летия, в Нью-Йорке скоропостижно скончался Постоянный представитель Российской Федерации при ООН В.И.Чуркин.
Выдающийся российский дипломат ушел из жизни на рабочем посту.
Выражаем родным и близким Виталия Ивановича Чуркина глубокие соболезнования.

http://www.mid.ru/web/guest/foreign_policy/news/-/asset_publisher/cKNonkJE02Bw/content/id/2652864

А немного ранее:

Фев 20

Готовим вкусные печенюхи «Гусиные лапки»

Категория: Кулинарка | Опубликовано: 20-02-2017

Готовим печенюхи под названием «Гусиные лапки»

pechenyuhi_rezultat_vid_sboku


Нам понадобится
:

мука — 350 грамм,

сода — чайная ложка (без горки!),

творог — 400 грамм,

пачка сливочного масла — 200 грамм,

руки, пропатченные выше уровня «Ура! Я пожарил яичницу без скорлупы!» — 2 штуки.

Фев 02

Смартфоны и симкарты — несоответствие размеров

Категория: Рубрика гнева | Опубликовано: 02-02-2017

Размеры смартфонов (а также планшетов) уже достигли такого размера, что туда во внутренности устройства, можно вставлять хоть десяток mini-sim карт, или одну старую полноразмерную sim-карту (формат FF — на фото самая большая слева, была размером с банковскую пластиковую карточку)
NEE_SIM

Но при том, что размеры позволяют — производители упорно делают разъемы в устройствах все меньшего и меньшего размера — micro-sim(3FF)  затем и nano sim (4FF).

Места теперь достаточно, ибо размеры экранов вынуждают. Пользоваться этими микро-нано разъемами неудобно, пролюбить потерять малюсенькую сим-карту становится все проще.
Зачем? Не понимаю.

ПН. Разъемов USB это тоже касается, производителем придуманы идиотские разъемы micro-BM и mini-BM, писал про это уже ранее.