Informatica amplia experiência em comunidade web para 120 mil participantes e anuncia vencedor nesta categoria

MICHELLE ITO NOTÍCIAS - INFO & TI

A Informatica Corporation (NASDAQ: INFA), fornecedora líder e independente de soluções de software de integração de dados, comemora o crescimento do Informatica Marketplace. A comunidade online, que conecta fornecedores, parceiros e desenvolvedores individuais, permite que este público compartilhe soluções de integração de dados em um ecossistema aberto e abrangente, com mais de 120 mil usuários ativos.

Inaugurado em junho deste ano, o Marketplace tem mais de 129 tipos de soluções, ativos que oferecem resoluções em oito categorias de tecnologia, criados pela Informatica e por terceiros. Estas categorias são Integração de Dados Corporativos, Qualidade de Dados, Troca de Dados B2B, Gerenciamento do Ciclo de Vida das Informações, Processamento de Eventos Complexos, Integração de Dados em Nuvem, Ultra Messaging e Gerenciamento de Dados Mestres.

Entre julho e agosto de 2010, o Marketplace registrou um aumento de 237% no número de downloads. Ao todo, a comunidade teve um total de 532 downloads no trimestre. O Informatica Marketplace possui vários parceiros novos e antigos, incluindo empresas como Appfluent, Binary Bolt, Cisco Tidal, Fyghtsoft, Interface Development, Kapow Tech, Star Analytics, StrikeIron e TCS.

“O sucesso imediato e o crescimento do Informatica Marketplace confirma a necessidade de um ambiente aberto em que profissionais de integração de dados possam encontrar e compartilhar ideias”, afirma Tony Young, CIO da Informatica. “Com o número e a qualidade dos Blocks inovadores que chegaram ao Marketplace em apenas alguns meses, podemos afirmar que estamos em um ótimo caminho”, complementa.

O CIO da companhia explica também que o principal objetivo do Marketplace é oferecer um lugar confiável, que permita aos clientes da Informatica reduzir seus custos de implementação e acelerar os prazos para o lançamento de novos produtos. “Ao alavancar o conhecimento da comunidade de integração de dados com o uso de componentes pré-construídos, inibimos a necessidade de codificar soluções manualmente. Nós continuaremos a inovar e introduzir novos recursos e esperamos o sucesso contínuo do Marketplace”.

Prêmio da categoria – Neste, ano a empresa vencedora do Marketplace Contest foi a Analytix Data Services, empresa de software e serviços de integração de dados especializada em data warehousing e soluções de inteligência de mercado. A solução vencedora, Analytix Mapping Manager, é a primeira do segmento de integração a solucionar problemas de mapeamento de-para “pre-ETL”.

Com base na web, essa solução permite que os analistas de negócios e dados possam consolidar e classificar metadados de sistemas em uma base de dados para o mapeamento de-para. O objetivo é construir e mapear informações em todo o ciclo de vida, de forma dinâmica para transformá-los em dados aprovados e limpos para os desenvolvedores de aplicações ETL (Extract, Transform and Load). O Analytix Mapping Manager complementa o PowerCenter da Informatica, aprimorando o gerenciamento e a automação, além de melhorar os padrões de qualidade de dados para tornar todo o processo de mapeamento mais rápido fácil de gerenciar e colaborativo.

“Estamos honrados por ter vencido a competição do Informatica Marketplace”, afirma o CEO da Analytix Data Services, Linh Vu. “Além dos benefícios de ter ganhado o prêmio principal, — que incluem, entre outras coisas, a possibilidade de demonstrar nossa solução no mais importante evento de integração de dados, o Informatica World —, oferecer a nossa solução no site do Marketplace criou muitas oportunidades. Entre elas, destacamos a geração de leads qualificados, o crescimento da nossa base de clientes domésticos e internacionais, e o crescimento de nossa receita”.

O CEO da Analytix Data Services acrescenta que, como resultado do sucesso do Informatica Marketplace, a empresa já assinou contratos com revendedores em cinco países diferentes e conquistou um grande número de clientes no exterior.“Atualmente, estamos iniciando uma presença dedicada no Brasil, para cobrir o mercado latino-americano, que vem crescendo rapidamente. Tem sido uma ótima experiência para nós”, conclui.

Comunidades da Informatica - A companhia anuncia também o reposicionamento e a consolidação do Informatica Communities, um ponto de encontro online no qual os usuários podem se conectar, colaborar, discutir e compartilhar ideias.

O Informatica Communities oferece um login único para toda a linha de subcomunidades online orientadas a usuários e permite que eles interajam facilmente e amplamente com base em suas funções ou interesse em determinados produtos. Ao utilizar a reconhecida plataforma de comunidades Jive, o Informatica Communities servirá como plataforma para todas as redes online da Informatica a partir de agora.

“Nós consideramos a comunicação e a colaboração social uma das dez maiores tendências em tecnologia para 2011”, prevê Bhavish Sood, analista de pesquisa do Gartner. “O crowdsourcing, que é parte desta tendência, pode ser um grande espaço para que as organizações obtenham ideias e informações fora da empresa e ofereça a elas a habilidade de aumentar exponencialmente os recursos disponíveis para realizar uma tarefa ou desafio. Esforços bem definidos em redes colaborativas podem estimular o interesse e ampliar a criatividade ao realizar um trabalho”. O Informatica Communities está aberto a todos os clientes, prospects, parceiros e formadores de opinião, permitindo inscrição em qualquer comunidade, por meio de um único login. Atualmente, ela inclui as seguintes subcomunidades dentro da Informatica:

· Comunidades de produtos – A rede é baseada em produtos, no qual os usuários podem discutir sobre os produtos da Informatica, ver conteúdos de produtos e compartilhar dicas e truques.

· Comunidade de desenvolvedores – Uma fonte de informações para todos os desenvolvedores da Informatica, que oferece acesso a todas as ferramentas necessárias, incluindo amostras de código e SDKs Informatica

· Comunidade de arquitetos – A primeira comunidade aberta e gratuita com foco no valor da integração e serviços de dados em arquiteturas ágeis, incluindo o SOA.

· Comunidade User Group – Uma comunidade que permite aos usuários da Informatica se conectarem a outros usuários da Informatica, em todo o mundo, participando dos programas User Group.

· The Marketplace – Um lugar ideal em que os usuários podem comprar e vender soluções comprovadas em integração, qualidade e gerenciamento de dados.

"O Informatica Communities é um grande avanço na forma com que o nosso ecossistema de clientes, clientes potenciais, formadores de opinião, consultores e parceiros se comunicam, colaboram e compartilham informações", diz o CMO e vice-presidente sênior de Education and Enablement da Informatica, Chris Boorman. "Com as comunidades da Informatica, modernizamos completamente nossa infraestrutura de interação direta e online com o cliente e, hoje, podemos criar rapidamente novas subcomunidades que atendem aos interesses e necessidades dos novos usuários, à medida que continuamos a crescer enquanto empresa".

Sobre a Informatica Corporation

A Informatica Corporation é a líder independente em software de integração de dados. A plataforma da Informatica oferece às organizações uma tecnologia abrangente, unificada, aberta e econômica para reduzirem seus custos de TI e extraírem vantagens competitivas de seus ativos de informações. Mais de 4.200 empresas do mundo inteiro utilizam as soluções da Informatica para acessar, integrar e garantir a confiabilidade dos dados mantidos na companhia e em nuvem na Internet. Para mais informações, acesse www.informatica.com/br.

Fonte: http://www.segs.com.br/index.php?option=com_content&view=article&id=25012:informatica-amplia-experiencia-em-comunidade-web-para-120-mil-participantes-e-anuncia-vencedor-nesta-categoria&catid=48:cat-info-ti&Itemid=329

Particionamento no PowerCenter - Pipeline Partitioning

Escrevo este post sobre um dos temas mais importantes sobre o PowerCenter atualmente, o Particionamento. Por ser um recurso precioso de otimização de carga e que a maioria das empresas possuem comprado, os desenvolvedores devem conhecer, no mínimo, os principais tipos de particionamento e onde pode ser aplicado no seu dia-a-dia. São estas informações que eu trago no texto abaixo.

Quando usar Particionamento?
Algumas vezes necessitamos de acelerar a entrega das informações de uma determinada carga e podemos utilizar nesses casos o plug-in de Particionamento do PowerCenter. Com este plug-in podemos criar até 64 threads (partições) para acelerarmos o tempo de execução de um processo demorado.

Como usar Particionamento?
A partir de um mapa construído, é preciso apenas na sessão ser definida a quantidade de partições (threads) que você quer utilizar e selecionar o tipo apropriado em cada transformation. Dessa forma, não é necessário construir um mapa “próprio” para ser particionado, como é o caso atualmente do DataStage Parallel.

Tipos de Particionamento:

Pass-Through
Este é o tipo de Particionamento mais comum. Os dados de cada partição não são reorganizados quando você usa este tipo. Os dados de cada partição continuam na mesma partição ao passar por uma transformation com este tipo de particionamento configurado.

Hash Auto-Keys
O próprio PowerCenter define por qual campo os dados irão ser organizados na partição por um valor hash interno. Normalmente utilizamos este tipo de particionamento em sorter, joiner e aggretator. Dessa forma, o PowerCenter agrupa os dados de acordo com o campo que é feita a ordenação, a condition ou o group by, respectivamente.

Hash User-Keys
O usuário define o campo que deseja q o PowerCenter organize os dados utilizando um campo interno de hash.

Round-Robin
O intuito deste tipo de Particionamento é fazer o balanceamento da quantidade dos dados nas partições criadas. Suponha que você tenha uma sessão com 4 partições: a primeira possui 1000 registros, a segunda 10, a terceira 90 e a quarta 100. Utilizando este tipo de Particionamento os dados serão reorganizados de forma que cada partição tenha 1200/4=300 registros. Isto é útil para a distribuição correta de CPU/memória para processamento dos dados e sincronização da finalização de carga de cada partição.

Key-Range
Para este tipo, o usuário pode definir o intervalo de dados de um determinado campo que deseja dividir por cada partição. Se você quiser dividir, por exemplo, pessoas do sexo masculino e feminino em duas partições e gravar em arquivos separadamente, basta usar este Particionamento.

Database Partitioning
Você pode utilizar este tipo de partição em sources e targets, definindo nos mesmos, a partição que está criada fisicamente no banco de dados.

Cuidados ao utilizar Particionamento
O maior cuidado em usar Particionamento é definir o tipo correto em cada transformation. Caso você não defina o tipo correto, quando você utilizar joiner e aggregator, por exemplo, os dados podem ser gerados inconsistentes.

Quando definimos partições na sessão, podemos definir o tipo de merge dos arquivos gerados. O padrão é o Seqüencial Merge. Neste tipo de merge os arquivos gerados das partições são gravados seqüencialmente num único arquivo. Usando o Cuncorrent Merge, não são gerados os arquivos outputs temporários. O arquivo de merge é gerado de acordo com que os dados são gravados em cada partição. Este segundo tipo de merge costuma ser mais rápido.

Pontos que poderiam melhorar
Para a extração de dados de um banco de dados usando particionamento precisamos definir manualmente o SQL ou o intervalo de registros que queremos que os dados sejam buscados. Poderia ser implementado no PowerCenter uma distribuição automática de uma tabela no banco pelas partições criadas, utilizando, por exemplo, o intervalo de rowid de cada partição. Essa característica está presente atualmente no Datastage Parallel.

Abraço a todos.
Marcos David M Caliman

Informatica PowerCenter 9 - New Features

Pessoal,

Como eu ainda não consegui usar a versão 9 do PowerCenter, iniciei uma pesquisa na internet sobre as novidades desta ferramenta.

Uma nova funcionalidade que a nova versão traz, que todo mundo sentia falta, é o uso de SQL override numa lookup que não possui cache. Essa nova opção vai ajudar e muito na otimização de mapas já construídos e traz uma nova opção daqui pra frente. O Data Stage, por exemplo, já possui esta funcionalidade através das lookups em OCI´s a muito tempo.

Uma outra novidade é que uma lookup agora pode retornar múltiplos registros e não somente um, como era até a versão 8. Uma lookup então se torna uma "active transformation".

Na nova versão também, o Powercenter Admin Console mudou de nome. Agora ele é chamado de Informatica Administrator, cuja interface foi redesenhada.

Ouvi dizer em um forum na it.toolbox.com que nesta versão será possível fazer loader no Teradata em mapas particionados. Vamos esperar pra conferir se isto realmente será possível.

No mais, deixo aberto este tópico para comentários de pessoas que já estão usando a versão 9 e que podem contribuir com mais algumas novidades desta versão.

Abraço a todos.
Marcos David M. Caliman

Forrester: Powercenter é líder em ETL

Maurício Renner - segunda-feira, 07/06/2010 - 11:38

O PowerCenter, principal produto da fornecedora de software de integração de dados Informatica Corporation foi reconhecido pela Forrester Research como a ferramenta de ETL mais utilizadas pelas empresas.

Metade dos profissionais de TI familiarizados com integração de dados utilizam a solução da Informatica Corporation.

Nos últimos anos, a Informatica fez aquisições nas áreas de gerenciamento de MDM (Master Data Management) para qualidade de dados, gerenciamento do ciclo de vida das informações, integração em nuvem, processamento de eventos complexos, troca de dados B2B e troca de mensagens de alta performance.

Fundamental
O relatório Enterprise ETL: Evolving And Indispensible To Your Data Management Strategy, desenvolvido pela Forrester Research, em maio de 2010, mostra que cerca de 50% dos entrevistados disseram considerar o ETL imprescindível para suas operações diárias e que aproximadamente três quartos das empresas pretendem expandir o uso de ETL no próximo ano.

Ainda de acordo com o estudo, a classificação e o gerenciamento de metadados são as soluções complementares mais compradas de fornecedores de ETL, seguidas de software de gerenciamento de qualidade de dados.

A Forrester destaca, ainda, que as empresas deveriam migrar suas soluções customizadas para soluções ETL comerciais.

Fonte: http://www.baguete.com.br/noticias/software/07/06/2010/forrester-powercenter-e-lider-em-etl

Matar Worklow no PowerCenter

Alguma vezes, quando desejamos parar a execução de um workflow usando apenas as funções stop ou abort, não temos êxito e o status do workflow fica "eternamente" como running.

Nestes casos, quando o servidor está instalado em ambiente UNIX, podemos utilizar o comando kill para "matar" este workflow ativo.

O número do processo (pid) do workflow pode ser encontrado na sexta linha do log da execução do mesmo:

"Session task instance [s_TESTE]: started a process with pid [820] on node [node_caliman]."

Então, para esse workflow, bastaria executar o comando abaixo:

kill -9 820

Abraço a todos,

Marcos David M Caliman

Banco Popular foca qualidade dos dados

Decision Report, 31/03/2010

Terceira maior instituição financeira espanhola, o Banco Popular acaba de adotar a solução Informatica Data Quality, da Informatica Corporation, para melhorar a qualidade dos dados processados pela companhia e aumentar a eficácia de suas campanhas de negócios.

Essa implementação é parte de uma iniciativa em andamento que visa ao aperfeiçoamento das operações do banco e à atração e retenção de clientes. A nova ferramenta ajudará a companhia a oferecer produtos sob medida e de forma oportuna à base de clientes.

Em dezembro de 2008, o banco estabeleceu, junto com o departamento de TI, uma divisão com a finalidade de examinar a qualidade das informações utilizadas. Isso foi feito devido à consciência de que os clientes devem ser abordados com ofertas de produtos que realmente atendam a suas necessidades. Para isso, precisão é indispensável.

A Divisão de Qualidade do banco publica, mensalmente, um Índice de Qualidade de Dados baseado em 23 variáveis, que assegura a completude e a fidelidade das informações. Essas 23 categorias incluem campos como nome, data de nascimento, formação e os códigos CNAE (classificação nacional de atividades econômicas) e CNO (título profissional).

Todos esses campos são classificados como obrigatórios, necessários ou desejáveis, ou seja, são ligados a questões de conformidade regulatória, a requisitos de negócios e a informações úteis em relação a preferências e interesses do cliente.

Processo otimizado

Antes da implementação do Informatica Data Quality, a distinção entre os tipos de variações era feita por meio de programação manual, um processo de grande complexidade devido ao acréscimo de novos requisitos. Por essa razão, o Banco Popular avaliou diversas ferramentas de automação de qualidade de dados optando pela solução da Informatica Corporation.

Como o Banco Popular Group já utilizava outra ferramenta da companhia, o Informatica PowerCenter, para fazer a integração de dados provenientes de todos os sistemas do banco, foi possível reaproveitar a estrutura desenvolvida para esse projeto.

“Em vista dos resultados obtidos em uma prova de conceito com 280 mil registros, o Banco Popular escolheu o Informatica Data Quality”, afirma o diretor da Divisão de Qualidade do Banco Popular, Alberto Romero. As vantagens proporcionadas pelo software incluem um dicionário completo dos domínios existentes, que é essencial para lançar ofertas por e-mail, e o fato de ser muito fácil de usar, mesmo quando os usuários não têm formação técnica.

Motivada com os resultados da prova de conceito, a instituição pretende fazer com que a solução seja usada pelas áreas de negócios. “Nosso intuito é envolver as pessoas da área de negócios — das agências às diretorias regionais — para que essa disciplina não seja mais vista como uma tarefa que compete exclusivamente ao departamento de TI. Isso também torna as estratégias de negócios mais eficazes”, complementa.

Automação e economia de tempo

Uma das maiores vantagens da implementação prevista para 2010 é aumento da independência e autonomia da Divisão de Qualidade da instituição, que se tornará capaz de definir suas próprias regras sem depender do cronograma das equipes de desenvolvimento. É esperado, ainda, que o nível de qualidade de dados registrado no relatório mensal chegue a 90% em todas as variáveis - atualmente esse valor gira em torno de 74%.

Da mesma forma, a automação do processo como um todo resultará em significativa economia do tempo gasto pela equipe técnica da Divisão de Qualidade, que poderá se dedicar a análises aprofundadas de todas as informações. Além disso, a solução reforçará a capacidade da empresa para acompanhar as mudanças nos requisitos regulatórios que dizem respeito ao gerenciamento e à proteção de dados no setor financeiro.

Fonte:
http://www.decisionreport.com.br/publique/cgi/cgilua.exe/sys/start.htm?infoid=6163&sid=1

Quadrante Mágico para Ferramentas de Integração de Dados - Gartner NOV/2009

Pessoal,

Segue abaixo trecho retirado do mais recente relatório do Gartner, divulgado em novembro de 2009, sobre ferramentas de integração de dados.
A Informatica segue como líder de mercado, seguida por perto pela IBM:



Pontos Fortes

- É o fornecedor mais reconhecido no mundo empresarial.

- Apesar das condições do mercado de 2009 e forte concorrência, a Informatica tem continuado a crescer, organicamente e através de aquisições.

-Lançamento da versão 9, que reúne a integração de dados e a qualidade de dados, alinhado com a nova tendência do mercado de consolidação destas duas classes de tecnologia.


Cuidados

- Forte concorrência de grandes fornecedores (IBM, Microsoft, Oracle e SAP).

- É uma das soluções de integração de dados mais caras do mercado e continua enfrentando um concorrentes com menores custos