• По следам вчерашнего поста: уже собралось 35400 ссылок, не забанило, среднее время прохода ссылки от постинга в твиттер до залетания в мою базу — 14 секунд. Как вы думаете, это реалтайм?

Replies (9)

  • @bb, Это еще не плохой реалтайм)) но все же, что-то он большой? что сказывается?
  • @Bkmz, сказывается что это хакерские методы извлечения информации из твиттеров. Очень хаккерские, потому что официального нет.
  • @bb, Есть же официальное поисковое стриминг-апи...не устраивает?
  • @rise, лол :) 1. сходи почитай какие у него ограничения. И посмотри сколько я уже собрал ссылок. 2. у этого стриминг-апи есть забавная проблема, которую авторы описывают как «вероятно не будет работать с некоторыми уникодными символами». По странному стечению обстоятельств «некотрые» — это почти все, включая русские.
  • @bb, Понятна..
  • @bb, сложно назвать лаг в 14 секунд реалтаймом — но очень и очень свежая информация получается — да
  • @bb, а для чего собираешь, если не секрет?
  • @lomalkin, для души. Строю рейтинги популярности ссылок, а главное — составляю для себя базу твиттер-спаммеров. Ссылка-маячок, вот например один из популряных видов спама: search.twitter.com
  • @bb, неплохо