Gerentes de dados de mercado reconhecem cada vez mais as vantagens de aderir à nuvem, e elencam benefícios que incluem desde a redução de custos de armazenamento e computação até melhoria do desempenho e maior vantagem competitiva.
- As empresas estão enfrentando um duplo desafio: crescente demanda por dados de tick history enquanto os custos de aquisição, gerenciamento, armazenamento e uso desses elementos no próprio local –por meio de software e harware que compõem as chamadas ticker plants— sobem exponencialmente.
- Como resultado, tem havido uma mudança na estratégia de dados de mercado de tick history, com as organizações abandonando sistemas pensados para funcionar no local e recorrendo a uma abordagem centrada em dados na nuvem.
- Inclusive, alguns clientes da Refinitiv chegaram a reduzir o custo total de propriedade (Total Cost of Ownership ou TCO) dos dados de tick history em mais de 90% com a mudança para o Refinitiv Tick History no Google Cloud Platform.
No que diz respeito a dados, as firmas de serviços financeiros estão diante de uma situação complicada.
A necessidade de dados de tick history (ou históricos de ticks, em tradução livre) nunca foi tão grande, seja no front, no middle ou no back office. Isso porque eles são usados para backtesting em estratégias de negociação, análises de custos de transação ou suportes a novas soluções de machine learning ou de inteligência artificial.
E, como se essa nova demanda, por si, só já não fosse um desafio, o volume de dados necessários também vem aumentando em um ritmo dramático.
Custos elevados impõem mudança na estratégia de dados
Os custos associados à aquisição, gerenciamento, armazenamento e uso de tick history data no próprio local da empresa só vem subindo. Isso ocorre devido ao maior volume de dados que hoje é necessário para desenvolver os algoritmos analíticos e de machine learning empregados no mercado financeiro.
De acordo com uma recente pesquisa da Refinitiv, para cada US$ 1 gasto com dados no mercado financeiro, outros US$ 8 vão para o processamento, armazenamento e transformação desses elementos até que possam ser analisados.
Para ter mais clareza sobre esses custos, o time do Refinitiv Tick History fez uma análise detalhada das despesas associadas a um sistema local para o gerenciamento de dados de tick históry. Elas incluem:
- Footprint do servidor – Inclui o custo dos servidores para processar os dados e a hospedagem, em algum local, de todo o hardware. Há ainda gastos com resfriamento, racking, conectividade de rede e outras infraestruturas de suporte, como soluções integradas para de redundância.
- Hardware de armazenamento – É o que será desembolsado para fornecer e armazenar um banco de dados com soluções para os dados, juntamente com a capacidade de acessar dados para os vários casos de uso relacionados ao mercado. Aí também estão incluídos os custos de resfriamento, racking, conectividade de rede e outras infraestruturas de suporte, como soluções integradas para de redundância.
- Backup de armazenamento externo – Para Planos de Continuidade de Negócios (PCNs), costuma ser um requisito regulamentar que as empresas tenham uma cópia de seu banco de dados de tick history em execução em algum outro local –ou seja, mais um custo.
- Taxas de tecnologia de database de séries temporais –Como o próprio nome diz, essas são as tarifas pagas ao provedor de software de banco de dados (KDB, Microsoft, Oracle etc).
- Capital humano – Consiste no que é gasto com os funcionários que gerenciam bancos de dados e infraestrutura de rede e fazem o planejamento de capacidade para o hardware, manutenção de banco de dados e armazenamento.
Todos esses custos podem atingir uma soma considerável, e vão continuar crescendo à medida que mais e mais dados são armazenados no local –e, quando falamos de dados de ticks, o volume de dados aumenta constantemente, já que eles são adicionados a cada dia que passa.
Ao final dessa conta, a Refinitiv estimou que as empresas que desejarem manter seus dados de tick history em suas instalações vão desembolsar cerca de US$ 110 por gigabyte de dados armazenados. E são gastos que certamente vão subir com o tempo, já que esses dados nunca páram de se proliferar.
Modelo focado menos no sistema e mais nos dados
Dadas as pressões impostas pela crescente utilização de dados de tick history no front, middle e back office, e os altos custos de um armazenamento em uma ticker plant local, não é de se admirar que as instituições financeiras estejam procurando uma forma de transformar essa situação.
Muitas empresas estão aposentando a abordagem centrada no sistema e adotando uma estratégia de dados baseada em nuvem. Explica-se: na primeira opção, o cliente tem a responsabilidade de construir um sistema para armazenar os próprios dados, o que exige uma infraestrutura de hardware local bem cara. Além disso, isso acaba criando diversas versões dos dados ao longo de toda a organização, conforme grupos internos produzem subconjuntos para diversos casos de uso.
Outro problema é que dados de ticks centralizados na companhia criam dificuldades para usuários dispersos geograficamente, normalmente resultando em várias cópias. Isso podem elevar ainda mais os gastos e, claro, ameaçar a integridade desses elementos.
Por isso, aproveitar a tecnologia de nuvem vem se mostrando uma grande oportunidade.
Mudar para uma estratégia que seja centrada em dados pode resolver muitos desses entraves de uma só vez. A primeira etapa é se envolver com dados e análises de tick history na nuvem.
Essa abordagem permite:
- Racionalização da ticker plant
- Descomissionamento de hardware local
- Realocação de recursos e infraestrutura
- Aproveitamento de novos recursos de nuvem para ciência e análise de dados
- Migração de fluxos de trabalho para a nuvem – “consulta na nuvem –análise na nuvem”
Como resultado desses benefícios, alguns clientes da Refinitiv chegaram a reduzir seu Custo Total de Propriedade (TCO) de dados de tick history em mais de 90% com a migração para a nuvem.
Ao trabalhar com o Refinitiv Tick History no Google Cloud Platform, o custo pode ser reduzido para US$ 4 por gigabyte, já que os dados armazenados, o banco de dados e o mecanismo de computação são todos transferidos para a nuvem.
Além da economia, a adoção de soluções baseadas em nuvem para dados, análises e fluxo de trabalho ainda pode oferecer vantagem competitiva às empresas de serviços financeiros.
Assista o vídeo: “Refinitiv Tick History –25 years of historical data from 500+ venues across all asset classes”
Como transformamos essa história em realidade
Refinitiv Tick History no Google Cloud Platform é um banco de dados de serviços gerenciados que contém toda a gama de dados do Refinitiv Tick History.
O Refinitiv Tick History é um arquivo histórico de dados de preços em tempo real, que cobre OTC e instrumentos negociados em bolsa de mais de 500 locais de negociação e colaboradores terceirizados. A base de dados contém cerca de 70 milhões de títulos ativos e aposentados, com cobertura que remonta a 1996. No geral, a base de dados contém mais de 6 PB de dados históricos.
Os dados do Refinitiv Tick History no Google Cloud Platform são fornecidos por meio do Refinitiv Data Platform. A Refinitiv Data Platform oferece acesso a dados e análises do mercado global como um serviço em nuvem.
As empresas podem potencializar e implantar seus apps para o mercado em tempo reduzido, aproveitando o modelo de dados da Refinitiv e recursos de permissão e direitos, bem como ferramentas baseadas em nuvem, como o mecanismo Google® BigQuery.
As instituições financeiras já não precisam limpar, normalizar e gerenciar os dados de tick history; os dados da Refinitiv estão prontos para consulta. Os profissionais podem acessar esse banco de dados diretamente na nuvem usando o mecanismo Google® BigQuery, seja por meio da GUI fornecida pelo Google ou via API do ambiente preferido da empresa (por exemplo, Jupyter) e linguagem de programação.
Depois de realizar análises, é possível deixar os resultados na nuvem, movê-los para outros locais na própria nuvem ou para um sistema local que a empresa terá (ou seja, “consulta na nuvem – análise na nuvem”).
A implantação do Refinitiv Tick History no Google Cloud Platform vem gerando economias significativas para os clientes.
Para ajudá-lo a entender melhor como a mudança para uma estratégia de dados de mercado centrada em dados vai impactar a sua empresa, a equipe do Refinitiv Tick History pode realizar uma análise personalizada para apontar a real dimensão dos seus custos associados aos dados de tick history e compará-los com o Refinitiv Tick History no Google Cloud Platform.
O nosso time também pode conversar com os stakeholders sobre os outros benefícios embutidos nessa nova abordagem, fornecendo, inclusive, um teste gratuito.
Para saber mais, entre em contato conosco e peça para falar especificamente sobre os custos do Refinitiv Tick History no Google Cloud Platform.
