트위터 Streaming API 의 1%에 관해...

2014.10.26. 19:05

트위터 Streaming API 을 이용해서 빅데이터 분석프로그램을 만드는 중에...

 

트위터 Streaming API의 sample, filter는 firehose(전체트윗)의 1%정도만 제공한다고 한다.

그런데 그 1%가 각각의 User(API)마다 다른 1%을 제공하는지...

아님 전체에서 1%을 산출해서 모든 User(API)에게 제공하는건지...

구글에서 찾아도 안나와서 직접 해보았다.

 

다른 계정으로 API Key을 2개 만들어서 같은 키워드로 filter.json을 통해 테스트를 해 보았는데

(sample.json도 해봤는데 같다.)​

결과는... 그리 원하던 결과는 아니었다.

 

같은 결과가 온다...

서로 다른 1%을 산출한다면 좀더 많은 정보를 얻어서 빅데이터 분석에 활용할 수 있을텐데

정말 firehose가 아닌 이상 1%이상의 결과를 얻긴 힘들것 같다.

 

facebook에서 Streaming API는 없을라나??

음.. 어떻게 '빅'데이터를 얻을지...