Utilizando Big Data
No post de hoje listamos algumas companhias que utilizam Big Data. Facebook As aplicações de BI e Datawarehouse do Facebook, chaves para o entendimento do comportamento do usuário e métricas de campanhas, estavam sendo impactadas pela grande quantidade de dados ( 10TB / dia ) e a plataforma Hadoop, HDFS/ Hive mostrou ser a melhor solução. Os logs dos servidores Apache são coletados via Scribe, os dados são transferidos para o cluster Hadoop / HDFS e é utilizado o Hive para sumarizar os mesmos. Os sumários incluem page views, número de usuários, permanência no site, performance de campanhas e análises específicas. Rackspace O Rackspace provê serviços de hosting, e-mail e infraestrutura em geral para diversas companhias. Os serviços de e-mail geram diariamente um volume muito grande de dados que não estava sendo mais processado em tempo hábil por instãncias MySQL. A solução encontrada foi tra...