Microsoft anuncia suporte a Hadoop

Os sites Ars Technica, Wired e ReadWrite Cloud informam que a Microsoft anunciou no PASS Summit 2011 planos para suporte à plataforma de computação distribuída Hadoop.

O Hadoop foi desenvolvido pela Yahoo para implementar os princípios de computação distribuída utilizados pela Google, tais como o Google MapReduce e Google File System. O resultado é uma plataforma que alia alta capacidade de armazenamento de dados a capacidades de processamento de dados largamente distribuído.

Hadoop se tornou o padrão para cargas de trabalho envolvendo enormes quantidades de dados. Hoje ele é suportado por empresas como IBM, Amazon e a própria Google. A Microsoft está anunciando que também irá atender a esta demanda do mercado, suportando o Hadoop. A implementação proprietária da Microsoft para processamento distribuído, o projeto Dryad, não está liberada para produção.

Algumas das ações anunciadas são:

• Integração entre o SQL Server e o Hadoop, para importação e exportação de dados.
• Integração entre o SQL Server Parallel Data Warehouse e o Hadoop.
• Implementação do Hadoop no Windows Azure.
• Suporte ao Hadoop no Windows Server.
• Integração do Hadoop ao Active Directory para segurança e controle de acesso a dados.
• Integração do Hadoop às ferramentas de gerenciamento da Microsoft.
• Integração ao Hive, um data warehouse para o Hadoop.
• Suporte à análise de dados do Hadoop com as ferramentas de BI da Microsoft, inclusive as novas, como PowerView e PowerPivot.
• Publicação de dados do Hadoop no Windows Azure Marketplace.

A Microsoft se comprometeu a manter a compatibilidade com a versão oficial do Hadoop e a compartilhar com a comunidade do projeto as implementações que venha a desenvolver. O trabalho está sendo feito em parceria com a Hortonworks, fornecedor de distribuições comerciais do Hadoop que se originou da Yahoo.

Esta iniciativa colocará ao alcance dos desenvolvedores Microsoft e da plataforma Windows Azure as capacidades de processamento distribuído que estão sendo utilizadas com grande sucesso pelos desenvolvedores Java e pelos clientes da Amazon e Google.