Technology is not enough! Barry O’Reilly

Durante os anos empresas aparecem e desaparecem com uma certa frequência, e não apenas pequenas tem desaparecido mas com muita frequência as grandes tem perecido. Para onde foram as ideias? O que aconteceu com o mercado? Estamos fazendo o certo? Estamos tentando controlar o incontrolável o imprevisível? Boa parte destas empresas, que se extinguiram, são fundamentadas em profundas e verticalizadas organizações. Como conseguiremos trabalhar no imprevisível enquanto as decisões apenas dessem estas grandes cachoeiras! [Read More]

Hadoop and the Big Data Ecosystem

Porque devemos nos preocupar? Assim começou o keynote do Todd Lipcon… Talvez porque ao longo dos últimos anos, as empresas têm visto uma explosão no volume, variedade e velocidade dos dados que eles têm de lidar todos os dias. Esta tem sido uma bênção e uma maldição. Ao mesmo tempo que a explosão de dados nos permitiu gerar novos tipos de aplicativos e insights altamente inteligentes, os desenvolvedores descobriram que a geração anterior de ferramentas de gerenciamento de dados e frameworks desmoronavam quando tentando trabalhar e manter terabytes ou petabytes de dados muitas vezes mal-estruturados. [Read More]

Um Sistema de recomendação de produtos baseado em grafos: Titan, Cassandra, Redis e Hadoop em produção

Big data is like teenage sex: everyone talks about it, nobody really knows how to do it, everyone thinks everyone else is doing it, so everyone claims they are doing it.. As maiores empresas estão tentando descobrir e ajudar a empresa a a interseção entre oque as pessoas querem, e o que a empresa quer que as pessoas comprem. Neste contexto o Andre Fatala e o Renato Pedigoni, trazem um case da Magazine Luiza. [Read More]

Data Science em Tempo Real com Storm

Hoje sabemos que temos um monte de dados, e dai descobrimos que estes dados não é só uma caixinha mais várias, você aplica processadores estatísticos, algo de inteligência artificial, e no final temos uma saída com os dados que são esperados. Em 2012 as aplicações da Fabiane eram mais ou menos, um acumulo de dados e que no final estes eram processados em batch com uma saída. Parece que durante muito tempo este processamento ou a necessidade em relacioná-los e processá-los era menor. [Read More]

How Impala has Pushed HDFS in New Ways

Como Impala e a Cloudera tem ajudado a comunidade nos últimos anos, nada melhor que o Aaron para falar sobre isso commiter do Hadoop, vamos ver como funciona HDFS, impala e como o último tem sido alterado para atender novos requisitos. Quando as pessoas falam sobre Hadoop, uma parte esta atrelada ao HDFS (Hadoop Distributed File System). Este é utilizado apenas como um file-system distribuído, ele foi única e exclusivamente para trabalhar com blocos de dados grandes que precisam ser rápidos para uma boa performance de MapReduce. [Read More]

Scaling League of Legends: managing culture, extreme complexity and 30 million active users

O keynote do Jarrod Overson começou as 10:58h com um pouco do seu background, ele como um gamer não poderia trabalhar em algo diferente. Com 15 anos “remunerados” como assim pode dizer, chegou ao ponto em que sua empresa tem um grande produto hoje o League of Legends, em que jogadores on-line se degladeiam, enquanto a plataforma se torna ENORME!!League of legends Imagine agora seu código, ou o código escrito por Jarrod ou sua equipe para aguentar tantos acessos, agora pense em como a empresa cresce para acompanhar o sucesso e escalar as necessidades de um novo mercado que se abre. [Read More]

Building a Data Science Program at NASA/JPL with Visual Analytics

Explorar o universo gera um conjunto enorme de dados. E quando estamos falando sobre os dados que nos deparamos o tempo todo, estamos falando com um conjunto de satélites que estão processando e enviando dados dia e noite durante todo o dia. As tecnologias de troca de dados assim como as suas fontes são cada vez maiores e diversas, a troca de informações por lasers está quase acontecendo, e como podemos olhar estes dados de perto? [Read More]

QConSP 2014! Começou!

 QCon São Paulo 2014 Em sua 5a edição a Qcon começa em São Paulo, no WTC, com novo local, nova infra-estrutura, intervalos maiores para network. Este ano as tracks dos patrocinadores estarão separadas e nomeadas como solutions tracks para que haja transparência sobre oque esperar. A QconSP tem 6 tracks, com programação especifica acompanhavel pelo endereço http://qconsp.com/schedule. Big Data, Data Science e o Poder dos Dados Desempenho e Escalabilidade na Prática Front-end universe: JS, HTML5 e novas fronteiras da UX Java na Crista da Onda Arquiteturas que Você Sempre Quis Conhecer Dinâmicas e Funcionais: Linguagens e Técnicas para o Dev Poliglota Fronteiras do Desenvolvimento Mobile: Portáteis e Furiosos Criando Culturas e Equipes que Funcionam De Projetos a Produtos: DevOps, Continuous Delivery e além Solutions Track Estarei por aqui nos próximos dois dias postando sobre as apresentações legais! [Read More]

Neal Ford – Abstraction Distractions

Falar sobre abstrações nos dias atuais, é refletir sobre a própria natureza da ciência da computação e da engenharia de software. Soluções escaláveis, problemas rotineiros, todos passam em algum momento pela escolha de como serão visto pelos usuários finais, e é comumente aí em que soterramos sob camadas e mais camadas de abstração as nossas soluções. Pensamos na facilidade de entender, de manter, e até de expandir; mas como lidamos com os problemas que existem nas partes que encobrimos com a abstração? [Read More]

O limbo da demanda latente – Alê Gomes

O Alê começou se apresentando e se colocando como indigno de ser keynoter deste grande evento, e começando a definir todos os outros que estão envolvidos no crescimento da comunidade. Para ele um não só é eleito um comitê para representar e lutar pelos interesses de todos uma vez que várias vozes ao mesmo tempo estão clamando. O Agile Brazil tem acontecido bem, e assim acontece quando o interesse deste grupo representa os representados! [Read More]