Passos para construção do primeiro processo de carga

No post anterior descrevi para que serve cada ferramenta da suíte do PowerCenter. Agora mostro o que fazer em cada ferramenta para construir o primeiro processo de carga.
Deverão ser criados para isso os objetos: folder, mapa, source, target, database connection, session e workflow.

Repository Manager
1. Criar Folder e Usuários
Workflow Manager
2. Criar Database Connections
Designer
3. Importar sources e targets para o repositório
4. Criar Mapa
Workflow Manager
5. Criar Workflow e adicionar a session para o mapa criado
6. Executar o Workflow
Workflow Monitor
7. Acompanhar a execução do workflow e identificar problemas da carga

Ferramentas do PowerCenter 8

Para aqueles que estão começando a trabalhar agora com o PowerCenter e não sabe qual ferramenta utilizar para uma determinada construção, segue abaixo um resumo de cada uma delas:

Repository Manager
É uma ferramenta voltada para administração do repositório. Com ela podemos criar projetos, usuários, gerenciar permissões, e várias outras funções relacionadas à administração do repositório. A primeira coisa a fazer após a instalação do PowerCenter é utilizar esta ferramenta para criação de folder (projeto) e usuários.

Designer
Principal ferramenta do software. É através do Designer que conseguimos construir nossos processos ETL (mapas). Um mapa mais simples deve ser composto por um source, um source qualifier e um target. Para construir um mapa, primeiro deve ser importado os metadados da tabela/arquivo do source e target para o repositório.Os componentes, tratados pelo fabricante como ‘transformations’, mais utilizados no designer são:

• Filter – filtrar registros
• Expression – fazer tranformações
• Joiner- unir dois fluxos no mapa
• Lookup – buscar valores de tabelas de lookup

Workflow Manager
É uma ferramenta que permite executar, agendar as execuções dos procedimentos ETL no servidor ETL. Nela podemos também criar conexões do servidor com o banco de dados (database connections). Para executarmos a carga de um mapa construído no Designer precisamos criar uma session e colocar esta session dentro de um workflow. Podemos construir um workflow com outras tasks, tais como o command e e-mail.

Workflow Monitor
É uma ferramenta que permite visualizar, monitorar, parar, abortar e re-executar os processos no servidor ETL, além de visualizar logs dos processos em execução e os últimos executados.

Estatísticas do Site: Junho de 2009

Olá Pessoal!

Estamos próximos de completar 1000 visitantes.
Atualmente foram 752 visitantes e um total de 1.934 páginas visitadas.

Segue abaixo a lista dos países com maior acesso a este blog:

1- Brasil
2- Estados Unidos
3- Portugal
4- Canadá
5- Espanha

Qual a diferença entre os comandos STOP e ABORT usados no Workflow Monitor?

Esta é uma dúvida que pelo menos metade dos desenvolveres em PowerCenter possui.

Muitas vezes utilizamos o comando ABORT por ele finalizar a execução de uma session de uma maneira mais rápida que o STOP.

O comando ABORT deve ser utilizado apenas em casos extremos. Ele força o término da execução da sesssion em no máximo 60 segundos.

Caso algum processo de banco de dados demore mais que 60 segundos para responder ao Powercenter, ele continuará ativo no banco de dados. Neste caso, peça ao dba que mate o processo preso diretamente no banco de dados.

Então o recomendado é utilizar sempre o comando STOP.

Abraço
Marcos Caliman

Informatica Corporation comemora faturamento de US$ 109,1 milhões

A Informatica Corporation, fornecedora global de soluções e serviços para integração de dados, registrou faturamento de US$ 109,1 milhões no primeiro semestre de 2009, um aumento de 5% em relação aos US$ 103,7 milhões registrados no memo período do ano anterior.

O crescimento comprova que a crise econômica mundial não impactou os negócios da empresa, pelo contrário: “quanto maior a incerteza econômica, mais importante são os dados”, afirma Carlos André, vice-presidente da Informatica Corporation para a América Latina. Segundo o executivo, isto foi possível porque as soluções da Informatica auxiliam as companhias a fazer mais com menos, proporcionando a integração consistente dos dados empresariais e disponibilizando-os em forma de informação relevante para a tomada de decisões estratégicas.

“Oferecemos uma plataforma completa de integração de dados capaz de atender algumas das mais importantes iniciativas de negócios que as empresas estão adotando na fase atual da economia, tais como consolidação, globalização, redução de risco e conformidade regulatória”, explica André. Por este motivo, a aquisição de soluções da empresa continuaram sendo prioridade nos investimentos das companhias. Como destaque no período, o executivo cita o Powercenter, produto principal da plataforma da Informatica, presente em grande parte dos projetos, e o Data Quality, solução para qualidade de dados.

Ainda em 2009, a Informatica Corporation enxerga no mercado grandes oportunidades de negócios, pois está envolvida em projetos estratégicos de grandes empresas de vários segmentos, entre eles o de finanças, telecom e governo. “Por exemplo, as fusões e aquisições, decorrente da consolidação de alguns setores, são casos que envolvem diretamente soluções de integração de dados, assim como projetos de visão única do cliente”, finaliza André.

Desde janeiro deste ano, a Informatica renovou contratos com 190 grandes clientes, como Vivo, Amtrak, Chinabond, EchoStar Communications, Departamento de Polícia de Nova York, Union Bank of California e Virgin Media, e conquistou mais de 212 clientes, além das 153 empresas que foram acrescentadas a sua base por meio da aquisição da Applimation. Entre os novos clientes, destacam-se: Aeropostale, Arbonne International, Bank of the West, Delta Dental Plan of Michogan, Kredyt Bank SA Centrala, Key Energy e Universidade de Yale.

Resultados
A receita operacional no primeiro trimestre, calculada segundo o GAAP dos Estados Unidos, bateu o recorde para um primeiro trimestre da companhia, totalizando US$ 15 milhões, 21% a mais em relação aos US$ 12,4 milhões do mesmo período de 2008. A receita (GAAP) foi afetada negativamente pelas flutuações cambiais. Assim, usando as taxas de câmbio do primeiro trimestre de 2008, a receita (GAAP) foi US$ 0,8 milhão mais alta no primeiro trimestre de 2009.

Já o lucro GAAP foi de US$ 11,1 milhões ou US$ 0,12 por ação diluída. No primeiro trimestre de 2008, a Informatica registrou US$ 11,2 milhões ou US$ 0,12 por ação diluída. O lucro diluído por ação foi calculado incluindo o add-back de US$ 1,1 milhão da amortização de juros e do custo de emissão de notas conversíveis, líquido dos impostos de renda.

A receita operacional (não-GAAP) totalizou US$ 23,6 milhões, 28% superior aos US$ 18,5 milhões registrados no mesmo período de 2008. O lucro líquido não-GAAP, por sua vez, foi de US$ 17,1 milhões ou US$ 0,18 por ação diluída, equivalente a um aumento de 9% sobre os US$ 15,7 milhões ou US$ 0,16 por ação diluída obtidos no mesmo trimestre do ano anterior, Tanto a receita operacional não-GAAP quanto o lucro líquido não-GAAP excluem encargos e beneficios fiscais relativos à amortização de tecnologia adquirida e bens intangíveis, reestruturações de empréstimos e pagamentos em ações.

Fonte: http://www.metaanalise.com.br/inteligenciademercado/momento/noticias/informatica-corporation-comemora-faturamento-de-us-109-1-milhoes.html

Acessos / Comunidade do Orkut / Próximos posts

Pessoal,

Já estamos discutindo alguns temas importantes através da nossa comunidade no Orkut.
Apenas atavés da divulgação dela aqui no blog já temos 6 membros.

O blog está cada dia sendo mais visitado.
Brasileiros em todo o mundo estão conhecendo um pouco mais do PowerCenter através deste site. Estamos tendo muitos acessos dos Estados Unidos, e da Europa, principalmente de Portugal.

Estou bastante satisfeito com a repercursão deste blog. Quando o criei não esperava tantas visitas.

Se alguém desejar o conteúdo de algum tema ainda não abordado, favor entrar em contato que postaterei aqui.

Pretendo em breve escrever sobre Particionamento, Pushdown Optimization, Loaders, Versionamento de Objetos, Teradata e algumas outras opções de performance.

Abraço
Marcos David Caliman

Trabalho à distancia

Bom dia pessoal!

O tema de hoje é trabalho a distância. Mais especificamente trabalho a distância utilizando ferramentas ETL.

Depois de quase um mês sem postar estou aqui para escrever sobre trabalho de projetos de BI remotamente. Neste tempo, andei ministrando mais dois treinamentos e iniciei dois projetos em uma empresa de Telecom.

No começo deste ano certa empresa sediada em São Paulo divulgava vagas de trabalho remotamente através do PowerCenter. A princípio a idéia era sensacional: de qualquer lugar do Brasil a qualquer hora do dia você constrói localmente os objetos e depois basta apenas exportar o XML e esperar o dinheiro na chegar na sua conta! :)

Não vou divulgar neste espaço o nome da empresa em questão, mesmo porque não fiz qualquer trabalho para ela, mas achei a idéia muito interessante. Esta empresa contratava profissionais por um valor relativamente alto e procurava por muitos profissionais.

Mas, o que leva uma empresa a contratar tal tipo de trabalho?

- Cronograma apertado para os profissionais que a empresa possui- Falta de profissionais qualificados no mercado.

- A empresa não paga os impostos para contratação de tal profissional. Não terá vínculo empregatício e não precisará arcar com custos de trazer um profissional de uma outra localidade do país.

- Confiança de que uma completa padronização dos processos de construção possa atingir um elevado grau de qualidade de desenvolvimento.

Quais dificuldades ela pode encontrar?

- A falta de contato do desenvolvedor com o restante da equipe faz com que as dúvidas iniciais sejam mais dificilmente resolvidas.

- Deve ser criado um meio para definição de o quanto correto os objetos foram construídos a partir do que foi especificado e de que forma isso irá ser vinculado com o pagamento ou não de um trabalho.

Deixo aberto esse post para discussão sobre este assunto:
- Empresas que aceitam trabalhos a distância.
- Profissionais que já fizeram este tipo de trabalho e as principais dificuldades encontradas.
- O valor pago por hora/objeto trabalhado.

Abraço a todos
Marcos David Caliman