100тыс. твитов и украинский топ

Сегодня у моего твиттера юбилей - 100 тыс. сообщений оставлено за 5,5 лет. Я заметил, что среди ряда медийных читателей бытовало мнение, что это "украинский твиттер-топ", из-за того, что в нем много новостей про Украину. Но взглянув на самый первый твит этого аккаунт, обнаружил, что он также был сделан на украинском в 2009 году. Более того, открыв аналитику, оказалось, что большая часть читателей этого твиттера 5600 чел. из Украины. Картинка со статой ниже. Такие дела, только через 5 лет, узнаешь, что создал не русский, а украинский топ твиттера =).


Метки:   Категории:t30p | topbot | Twitter


Мобильное приложение t30p.ru

Примерно 3 года назад я говорил, что сайту нужна мобильная версия. Естественно, никто не про-инвестировал эту сомнительную разработку и ранее она мне казалась очень сложной. Но вот, не прошло и три года мне удалось своять мобильное приложение, которое обладает следующим функционалом:

  1. Читать актуальные новости из социальных сетей. Это топы, видео, инстаграм. Почти все, что есть на t30p.ru.
  2. Смотреть кто что пишет рядом с вами, используя геолокацию, а также постить с гео-тэгом и картинкой
  3. Мобильный социальный поиск. Искать упоминания слов в общедоступных сетях.

Доступна эта радость пока на двух платформах - Android,WP8 (wp7 пролетает). Недели через 3 думаю будет и в AppStore для Apple. Так как только там процесс публикации занимает много времени на модерацию. 

Сделано, как все гениальное, просто. На базе триала в Telerik Appbuilder (Icenium) и Kendo UI. Все можно использовать бесплатно. В итоге создается фактически сайт прямо в Visual Studio 2013, а потом на сервере конвертирует уже в нужный код для публикации на маркете. Плюс, там еще разная заморочка, чтобы подписать уже скомпиленный файл. В итоге создание мобильного приложение становиться простым как и создание сайта на .net с использованием JS.

Скриншоты приложения есть по ссылкам по кнопкам маркетом. Будет здорово, если хоть кто-то их протестирует и начнет ими пользоваться. И да, отзывы тоже пишите, можно прямо на маркете.


Метки: ,   Категории:Code | life | Mobile | t30p | topbot


Yandex Map 2.1

Примерно полгода назад было объявлено о новой версии 2.1 яндекс-карт. За полгода они так и не успели выйти из беты, но это не помешало мне перевести карту гео-сообщений на новую версию. Улучшено определение местоположения пользователя, да и просто стало работать как обещают на треть быстрее. Кто хочет тестируйте, так как все-равно, судя по логам, эта карта не популярна. Нужно когда-нибудь сделать мобильное приложение, чтобы пользователи начали читать о том, что происходит рядом с ними.


Метки:   Категории:Code | t30p | topbot


Тренды Твиттера - update

В конце прошлого года было небольшое изменение в фильтр трендов твиттера на т30п, что теперь темы раскручиваемые ботами более не попадают в общий список. Так и сегодня, когда падал Вконтакте, на графике хорошо видно, что это произошло в 14-00 по Москве. Однако другая тема, раскручиваемая одновременно с этим - #ОНФНаучитЭкономить - хоть и индексировалась, но не была включена в тренды, так как крутилась ботами.

Метки:   Категории:t30p | topbot | Twitter


Не могу не пропиарить

Один из блогеров, узнав, что попал на общую карту из миллиона русских блогеров, решил, что это обусловлено тем, что у его канала 1 млн. просмотров. И снял следующее видео. Можем только порадоваться за Олега и пожелать роста популярности.


Метки:   Категории:topbot


Немного про t30p и youtube

Итак, два момента. Во-первых, видео на ютубе часто стали удалять, поэтому я добавил копирование почти всех популярных видео из видеотопа. То есть получить копию видео с большой вероятностью можно по примерно такой ссылке http://www.t30p.ru/cache.aspx?youtube.com%2fwatch%3fv%3dvuQgPtS_W_Y, где в аргументах можно поставить другую ссылку. Либо перейти по ссылке "Копия поста" из самого видеотопа. Стоит отметить, что копия видео при помощи html5 работает и на мобильных устройствах, так что мои опасения не оправдались.
Почему "почти все видео" - потому что в видеотоп попадают и те видео, которые опубликованы "не для всех", а для тех кто знает прямую ссылку, если эта ссылка покала как-то в очередь на индексирование. Однако сам Youtube не позволяет скачиваеть подобные видео. Более того, сама функция скачки прямого видео с серверов американской кампании - не является документированным использованием сервиса. Напомню, что по задумке американских спецслужб, вы все свои видео-знания должны загружать им на модерацию, а о скачке назад - только если они вам позволят.

Функция YouTube.DirectLink получения прямой ссылки для скачивания видео с Youtube в различных форматах, как всегда в открытом доступе в библиотеке BlogsAPI.

Второй момент, хочу обратить, что индексируется Facebook, GooglePlus, Vkontakte, первый дает 150-200 тыс русскоязычных постов в сутки. Второй - 1000 постов. Третий - 50-100тыс. (тут точно не все, зато больше, чем у яндекса). Отмечу, что никто в эти цифры мне не верит. Наверное они думают, что и в ЖЖ делается 100 тыс постов в сутки, а не 15 тыс. Но тем не менее, когда у меня все работает стабильно, в условиях жесткой нехватки ресурсов, то получаются такие цифры. Стоит отметить, что у фейсбука в след.месяце будут серьезные изменения в API, так что заново придутся думать.


Метки:   Категории:Facebook | Google | t30p | topbot | trend


Наглядная иллюстрация к книге "Уши машут ослом"

Как видно из картинки ниже, что если топблогеру в лоб сказать правду, что информационная повестка формирует топблогеров, так тут же включается защитный механизм самоидентификации, что я топблогер, так как знаю, что хочет народ. Ага, а народ читает то, что хочет, а не то что пишут? Для ясности, контекст обсуждения заключался в том, что высказано неудовлетворение содержимым постов топблогера в точки зрения общей информационной картины.


Метки:   Категории:humor | t30p | topbot


[2012] - Обзор блогосферы от t30p.ru

Несколько запоздалый ежегодный обзор блогосферы, на этот раз третий, может быть скачан по ссылке http://yadi.sk/d/D20xMWx221XGu

Метки:   Категории:Analytics | t30p | topbot


Обновление в топе, видеотоп

Вчера случился сбой подсчета трендов твиттера. Но сегодня вроде все нормально и уже обновилось. Кроме того с сегодняшнего дня в потоковом режиме индексируются русскоязычный Ютую, поэтому в Видео топе начали появляться совершенно незнакомые ранее авторы, которые действительно популярны. Что с этим делать и как вернуть привычные ролики про политику - пока не понятно. Но можно кликать на иконку платформы или пользоваться простым поиском по ютубу с любым интересующим словом, например Каникулы в Мексике. В видео-топе появились совершенные шедевры. Да, из области видео-игр, но это очень смешно.

Метки: ,   Категории:t30p | topbot


Техническое по топу

На выходных переключились с A записи по дефолту, на CNAME с www (картинка ниже приведена). Это последний этап помещения топа в облачную архитектуру. Сейчас все выглядит примерно следующим образом.
  • За DNS отвечают 5 серверов Dynect с технологией Anycast. Их же использует Твиттер.
  • Веб-часть выдает Azure CDN, который имеет точку в москве
  • Картинки хранятся в BlobStorage вместимостью 100ТБ и доступом до 5000 обращений в секунду.
  • База данных в Amazon RDS multi A-Z, large.
Итого, из любой точки мира должно открываться за 4 секунды, выдержит любые нагрузки, к ядерной войне готовы.
Неудобство CDN лишь в том, что используя OpenDNS я постоянно попадаю на сервер CDN в америке, к которому видимо мало обращений, так что постоянно попадаю на долгий "холодный старт" прокси-сервера CDN.

Остается немного и можно конкурировать с Яндексом
  • Перенести контекстное индексирование постов в облако. Благо есть библиотека Lucene Azure + Lemmatizer
  • Запустить динамическое обновление социального авторитета, а то пока он статический.
  • Разобраться с влиянием ссылок твиттера на топы.
  • Много других мыслей, например, объединить Сводный и Чистый топы, и добавить "НародныйТОП", где можно было бы голосовать за записи.



Метки:   Категории:t30p | topbot


Facebook meltdown

Сегодняшнее падение фейсбука уже широко обсуждается на том же хабре. Говорят ошибка была в DNS. Наглядно падение активности русских людей в фейсбуке видно на странице рейтинга, где число talks упало суммарно аж на 12%. Сейчас все восстановилось. Куда более интересна проблема спама, которая захлестнула ЖЖ и прежде всего выдачу яндекса по блогам как раз после окончания выборов. Странно, что яндекс до сих пор не бьет тревогу. Очень много ботов пишут теперь не про политику, а про всякие турпоездки да авиаперелеты. Это негативно влияет на качество работы топа по части ЖЖ, поэтому все больше сообщений попадает в топ из ГуглПлюса.

Метки:   Категории:t30p | topbot


Twitter Streaming and Twitter Trends

Не так давно Яндекс заявил об интеграции с Твиттером по технологии firehorse. Это доступно не каждому, а только избранным, как можно видеть в документации. Зато существует немалополезная функция track, которая уже реализована в Twitterizer 2.4, а значит и в BlogsAPI 0.4.5. На практике она используется следующим способом
Copy Source | Copy HTML
  1. public override void Work(object sender, ElapsedEventArgs e)
  2. {
  3.     try
  4.     {
  5.         var uso = new UserStreamOptions()
  6.                                     {
  7.                                         AllReplies = true,
  8.                                         Count = -100,//отмотаем 100 назад
  9.                                         Track = new List<string>(
  10.                                             "слово1,слово2,слово3".Split(','))
  11.                                     };
  12.         TwitterStream stream = new TwitterStream(tokens, Twitter.appName, uso);
  13.         IAsyncResult result = stream.StartPublicStream(
  14.             StreamStopped,
  15.             NewTweet,
  16.             DeletedTweet,
  17.             OtherEvent
  18.         );
  19.         // Wait for the WaitHandle to become signaled.
  20.         result.AsyncWaitHandle.WaitOne();
  21.         // Close the wait handle.
  22.         result.AsyncWaitHandle.Close();
  23.     }
  24.     catch (Exception exception)
  25.     {
  26.         FireException(exception);
  27.     }
  28. }

Благодаря использованию потоковой функции Track удалось интегрировать T30P с Твиттером плотнее и теперь при формировании топа Твиттера, как по твитам, так и по трендам, есть полная независимость от Яндекса. А новые алгоритмы фильтрования ботов позволяют делать топ действительно качественным. По нагрузке получилось, что не смотря на поток в 2млн. русскоязычных сообщений в твиттере в сутки, токлько примерно 1 сообщение в 2 секунды не является спамовым и является популярным сообщением или обсуждением популярного сообщения, что заметно упростило задачу.

Метки:   Категории:t30p | topbot | trend | Twitter


@masterhost_ru второй день лежит

мастерхост падает вторую ночь подряд, со всеми своими DNS, что также привело к падению топа постов блогосферы Т30П. Однако, не смотря на это, топ можно открыть по прямому адресу 89.108.115.22. DNS еще не успели смениться.

Метки:   Категории:t30p | topbot


Masterhost down

Опять завалился masterhost, а вместе с ним все мое, что перечисленно в тэгах. Особенно печально, что t30p недоступен. Наверняка за неуплату отключили трафик у мастерхоста. Но пока нет никакой информации о случившемся, однако уже час не работает и непонятно сколько еще это будет продолжаться. При включении все домены будут перенесены.

Метки:   Категории:MailID | t30p | topbot


Обзор блогосферы

Обзоз блогосферы за 2011 год скачать можно тут . В отчете собрана текущая статистика т30п до ресета. Напоминаю, что каждый год в новый год сбрасываются некоторые счетчики, такие как число постов в текущем году.

Метки:   Категории:t30p | topbot


Падение DNS мастерхоста

Подтверждаю, что с 8 до 12 утра #24дек неработали DNS сервера мастерхоста, что привело к неработоспособности многих сайтов, в том числе и t30p.ru.

Метки:   Категории:t30p | topbot


Индекс блогеров ЖЖ

С нового года в ЖЖ появится индекс активности аудитории блогеров. Это не число френдов, не посещаемость, так как и то и то уже научились накручивать за 10 лет существования. Теперь нас ждет так называемый "социальный капитал". Социальный - так как завязан на социуме ваших друзей, а капитал, наверное потому, что от всех этих интернетов веет равенством и коммунизмом. Где все равны, но некоторые равнее как раз из-за наличия этого социального капитала. Узнать значение своего социального капитала можно уже сейчас на страницах т30п и также для сообществ. Там пока первые 300 из каждой группы. Хорошо видно тех, кто не светился в топах, но имеет определенную активность.

Метки:   Категории:t30p | topbot | trend


10 декабря

Кратко, так как сегодня надышался сигаретного дыма, а это сильно мешает думать.
  • Печально видеть как знакомые за хорошие деньги продались западу и теперь собирают устроить революцию. При этом думают только о своем кармане, а о том, что "вырастет стоимость гробов" - молчат.
  • После того, как t30p.ru успешно публикует топ блогосферы, который переполнен оппозиционными текстами - яндекс почему-то сильно уронил ТИц сайта.
  • У нас появились новые фишки, кроме топа твиттера теперь есть и список русскоязычных трендов в твиттере.
  • В топе по рекламным поста, если пост импортирован с Промо ЖЖ, теперь показывается его стоимость. Интересно видеть как посты с политикой оценены
  • Тиньков призвал выходить на митинг. Ничего удивительного, просто реклама, так как в москве и в питере больше всего людей в процентах проголосовало против Единой России.
  • Следите за нашим топом в твиттере он публикует не только ссылки на топы в блогах, но и топовые (наиболее заретвиченные) твиты. То есть полноценный топ твиттера.

Метки:   Категории:t30p | topbot | trend | Twitter


Like LJ?

По многочисленным просьбам убираю из блога ЖЖ (topbloger) в начале поста кнопки лайка (lj-like). Во-первых, ЖЖ не смогла за 2 месяца починить RSS выдачу, чтобы дурацкое слово Tweet не появлялося. Во-вторых, размещение рекламных блоков AdSense в блоге провалилось и мне рельно безразницы в денежном отношении расшаривают ТОПы или нет и растет посещаемость или нет. Проблема рекламных блоков AdSense в том, как я упомянал ранее, что после включения их в интерфейсе ЖЖ они успешно прокрутились 3 месяца, однако, ничего не было отражено в аккаунте AdSense по показам. Включение-выключение не помогло. Техподдержка Ж ответила, что ничем помочь не может. Ждем ответа гугла.

Но самая главная причина - это то, что эти дурацкие кнопки лайков действительно тормозят загрузку страницы. Ниже пример для кнопки гугла, которая добавляет 3 секунды. Прежде всего из-за того, что лезет к себе по httpS , но несмотря на все оптимизации обещанные гуглом, защищенное соединение нельзя закэшировать и оно заметно медленнее простого HTTP.

Для фейсбука проблема в том, что когда кнопок много на страницу, то все обращения идут по одному IP адресу , а браузер как мы знаем имеет ограничение на число парраллельных обращений к одному адресу. Что тоже дает потерю на 3 секунды, если у нас 10 кнопок рекомендовать на главной странице.


Метки:   Категории:Facebook | Google | t30p | topbot


промо и прото

ЖЖ обновило свой внутренний рейтинг добавив в него возможности по покупке "promo" первой записи. Действует аукционная система. Цену я предсказываю в районе 300у.е. за сутки. Сейчас порядка 150 у.е. висит. Чем-то это напоминает трендовые тэги в Твиттере. Про которые сами пользователи говорят следующее. Иными словами, для ЖЖ это будет выглядеть так - пользователи кликают на "промо", чтобы 1) все таки понять что же имелось ввиду в первом показанном предложении 2) оставить комментарий к теме, что их задолбала эта тема 3) поспамить своими ссылками.

Потестировал промо, пока оно стоило стобакс. Получилось висеть не более часа, что дало около 300 переходов, 50 комментов, несколько лайков, ссылок, неплохо. Те же кто висел более 2х часов, умудрились также попасть и в простой топ из-за возросшего интереса к записи. То есть ЖЖ нарушает основной принцип экспертной системы, что ее деятельность не должна влиять на получаемую с ее помощью оценку.

Далее, фейсбук в третий раз забанил мой аккаунт, несмотря на сотни вложенные в рекламу. Именно по этому его и не любят маркетологи. Зато он увеличил прибыль в 2 раза в прошлом полугодии.

По уровню нае*ательства ЖЖ не отстает. Как выяснилось после заключения с ним договора по программе GoogleAdsense ЖЖ умудрился 2 месяца крутить у меня в блоге рекламу и ничего мне не платить, что даже в аккаунте AdSense не отображается. Техподдержка пока молчит.

Метки:   Категории:Facebook | t30p | topbot | Twitter


Кто я?

Программист. Я слежу за блогосферой и знаю, как будет развиваться интернет. Когда у меня есть время я даже прилагаю для этого усилия. Подробнее

Последние комментарии

Не отображать

Topbot at FeedsBurner

Мои Твиты

Twitter апреля 14, 20:44
blog Воруем и продаем данные с телефонов (юмор от Vooza): Vooza - это проект, который делает смешные ролики д... http://bit.ly/1FNdYfD

Twitter апреля 12, 13:35
blog Копирайтное право в твиттере: Впервые за 8 лет получит сообщение об удалении твита за нарушение авторски... http://bit.ly/1FBwwPV

Twitter апреля 11, 12:58
blog Разбор фильма Дивергент2 Инсургент: Несколько соображений о фильме Дивергент2 по клику на картинку. Суть... http://bit.ly/1FwQjQC

Twitter апреля 10, 14:14
@yuuuuuuulia ага, особенно если делаешь сообщения с геотэгом

Twitter апреля 9, 19:51
blog NASA обещает доказать инопланетную жизнь за 20 лет: Очередное познавательное видео от NASA, где они рас... http://bit.ly/1FnVjXE

Twitter апреля 6, 16:04
blog Конспирологическая программа передач: Давно не было будоражащих фантазию новостей, все какие-то мелкие. ... http://bit.ly/1PcwSPy

Twitter апреля 3, 14:51
blog Обновление рейтинга инстаграма и ютуба: Пару недель назад обновился рейтинг по русскоязычному инстаграму... http://bit.ly/1EQUGWe

Twitter марта 27, 14:08
blog Владельцы воздуха от обоев до обоев: Вот мужик интересно говорит про ЖКХ и советы многоквартирных домов,... http://bit.ly/1HRD6Ck

Twitter марта 25, 09:29
blog Новости космоса - Мыслить №29: Рассказ о космосе и последних наработках с самых общих позиций. Некоторые... http://bit.ly/1HCdx4J

Twitter марта 22, 15:47
blog Жизнь в перевернутом мире по версии Яндекса: Идея того, что мы живем в "перевернутом мире", где все не т... http://bit.ly/1FXNtTs

Twitter марта 18, 16:36
blog Комментарии к новостям: На Украине частичная демобилизация - не удивительно, так как мобилизация объявля... http://bit.ly/1BUWdYy

Twitter марта 13, 21:11
blog По истерии с пропажей Путина: Все наверное заметили про непонятную истерию либералов про отсутствие Пути... http://bit.ly/1FasMCU

Twitter марта 8, 10:53
blog Победитель среди вирусных видео 8-го марта.: Это музыкальное видео уже взорвало интернет на 8-е марта. К... http://bit.ly/1EZuYxn

Twitter марта 4, 19:09
blog Совет многоквартирного дома: Пора создавать советы многоквартирных домов. Мой опыт и мысли в области жил... http://bit.ly/1GTu9Fm

Twitter марта 2, 09:21
blog Visual Studio 2015 CTPs: Загрузить последнюю версию MSVS 2015 CTP можно по ссылке. В целом на улучшения ... http://bit.ly/1DITBfU

Twitter марта 1, 23:50
@YanaIoanna это означает, что всегда лучше рассматривать вживую. Но внешний вид, показанный на фотках - привлекателен.

Twitter марта 1, 13:59
@YanaIoanna вполне худая и красивая :-P

Twitter февраля 22, 12:45
@Elena_Baturyna @t30p можно читать топ через RssReader или через мобильное приложение, там нет рекламы

Twitter февраля 22, 12:23
@Elena_Baturyna @t30p Увы, это такая фиговая система монетизации через попапы.

Twitter февраля 20, 11:44
blog Будущее носимых девайсов: Смешная пародия на носимые технологии =) http://bit.ly/1LknZki

Мой твиттер

Копирайт

Все мысли, высказанные в блоге, являются моим мнением и за это мнение меня никто не забанит! Кроме того, никто не имеет право копировать материалы блога без использования ctrl+C/V!

© Copyright 2008