Publicação
Hadoop MapReduce tolerante a faltas bizantinas
| Resumo: | O MapReduce é frequentemente usado para executar tarefas críticas, tais como análise de dados científicos. No entanto, evidências na literatura mostram que as faltas ocorrem de forma arbitrária e podem corromper os dados. O Hadoop MapReduce está preparado para tolerar faltas acidentais, mas não tolera faltas arbitrárias ou Bizantinas. Neste trabalho apresenta-se um protótipo do Hadoop MapReduce Tolerante a Faltas Bizantinas(BFT). Uma avaliaçãao experimental mostra que a execução de um trabalho com o algoritmo implementado usa o dobro dos recursos do Hadoop original, em vez de mais 3 ou 4 vezes, como seria alcançado com uma aplicação directa dos paradigmas comuns a tolerância a faltas Bizantinas. Acredita-se que este custo seja aceitável para aplicações críticas que requerem este nível de tolerância a faltas. |
|---|---|
| Autores principais: | Costa, Pedro Alexandre Reis Sá da Costa |
| Assunto: | Hadoop MapReduce Tolerância a faltas bizantinas Faltas arbitrárias Replicação Teses de mestrado - 2011 |
| Ano: | 2011 |
| País: | Portugal |
| Tipo de documento: | dissertação de mestrado |
| Tipo de acesso: | acesso aberto |
| Instituição associada: | Universidade de Lisboa |
| Idioma: | português |
| Origem: | Repositório da Universidade de Lisboa |
Registos relacionados
school Hadoop mapreduce tolerante a faltas bizantinas
por: da Costa, Pedro Alexandre Reis Sá
Publicado em: (2011)
por: da Costa, Pedro Alexandre Reis Sá
Publicado em: (2011)
school CONCRETIZAÇÃO DE UMA BIBLIOTECA PARA REPLICAÇÃO TOLERANTE A INTRUSÕES
por: Sousa, André Filipe Farias de
Publicado em: (2009)
por: Sousa, André Filipe Farias de
Publicado em: (2009)
school Balanceador de carga tolerante a faltas bizantinas
por: Campos, Rúben Filipe Cadima de
Publicado em: (2013)
por: Campos, Rúben Filipe Cadima de
Publicado em: (2013)
school RAVE REPLICATED ANTIVIRUS ENGINE
por: Silva, Carlos Miguel da Silva dos Santos
Publicado em: (2009)
por: Silva, Carlos Miguel da Silva dos Santos
Publicado em: (2009)
school Cache-conscious Splitting of MapReduce Tasks and its Application to Stencil Computations
por: Magro, Daniel Lobato Vieira
Publicado em: (2015)
por: Magro, Daniel Lobato Vieira
Publicado em: (2015)
school Evolução da biblioteca para replicação tolerante a faltas bizantinas BFT-SMaRt
por: Brito, Bruno Filipe Cabo Verde de Branco e
Publicado em: (2011)
por: Brito, Bruno Filipe Cabo Verde de Branco e
Publicado em: (2011)
school Concretização de uma biblioteca para replicação tolerante a intrusões
por: Sousa, André Filipe Farias de
Publicado em: (2009)
por: Sousa, André Filipe Farias de
Publicado em: (2009)
school Hive on spark and MapReduce : a methodology for parameter tuning
por: Forster, Rodrigo Richard
Publicado em: (2018)
por: Forster, Rodrigo Richard
Publicado em: (2018)
school Rave replicated antivirus engine
por: Silva, Carlos Miguel da Silva dos Santos
Publicado em: (2009)
por: Silva, Carlos Miguel da Silva dos Santos
Publicado em: (2009)
groups On Power Consumption Profiles for Data Intensive Workloads in Virtualized Hadoop Clusters
por: Qureshi, Basit
Publicado em: (2017)
por: Qureshi, Basit
Publicado em: (2017)
school TYPHON: UM SERVIÇO DE AUTENTICAÇÃO E AUTORIZAÇÃO TOLERANTE A INTRUSÕES
por: Sousa, João Catarino de
Publicado em: (2010)
por: Sousa, João Catarino de
Publicado em: (2010)
groups Data analytics in the cloud with flexible MapReduced workflows
por: Gonçalves, Carlos Jorge de Sousa
Publicado em: (2013)
por: Gonçalves, Carlos Jorge de Sousa
Publicado em: (2013)
school Threat-adaptive Byzantine Consensus
por: Rodrigues, Lívio Grifo Jorge
Publicado em: (2023)
por: Rodrigues, Lívio Grifo Jorge
Publicado em: (2023)
school Confidential BFT state machine replication
por: Vassantlal, Robin
Publicado em: (2019)
por: Vassantlal, Robin
Publicado em: (2019)
school Typhon: um serviço de autenticação e autorização tolerante a intrusões
por: Sousa, João Catarino de
Publicado em: (2010)
por: Sousa, João Catarino de
Publicado em: (2010)
school Scalable low latency consensus for blockchains
por: Avelãs, Diogo Miguel do Carmo
Publicado em: (2022)
por: Avelãs, Diogo Miguel do Carmo
Publicado em: (2022)
article On Energy Efficiency and Performance Evaluation of Single Board Computer Based Clusters: A Hadoop Case Study
por: Qureshi, Basit
Publicado em: (2019)
por: Qureshi, Basit
Publicado em: (2019)
school Intrusion Tolerance in Large Scale Networks
por: Veronese, Giuliana Santos
Publicado em: (2010)
por: Veronese, Giuliana Santos
Publicado em: (2010)
school Distributed processing of large remote sensing images using MapReduce - A case of Edge Detection
por: Tesfamariam, Ermias Beyene
Publicado em: (2011)
por: Tesfamariam, Ermias Beyene
Publicado em: (2011)
school Detection of outliers and outliers clustering on large datasets with distributed computing
por: Pais, Rui Manuel Aleixo
Publicado em: (2012)
por: Pais, Rui Manuel Aleixo
Publicado em: (2012)
school Byzantium: Contribuições para o desenvolvimento de um sistema de replicação de bases de dados tolerante a falhas bizantinas
por: Garcia, Rui Alexandre Bom
Publicado em: (2009)
por: Garcia, Rui Alexandre Bom
Publicado em: (2009)
school Desenvolvimento de processos de business intelligence em ferramentas de Big Data
por: Vieira, Tiago da Silva
Publicado em: (2018)
por: Vieira, Tiago da Silva
Publicado em: (2018)
school FTRMI: plataforma transparente tolerante a faltas para invocações remotas
por: Reis, Diogo André Mota dos
Publicado em: (2012)
por: Reis, Diogo André Mota dos
Publicado em: (2012)
assignment Tolerância a Intrusões em Sistemas Informáticos
por: Neves, Nuno Ferreira
Publicado em: (2005)
por: Neves, Nuno Ferreira
Publicado em: (2005)
school Gestão de estado eficiente no serviço de coordenação DDS
por: Félix, João Luís Monteiro
Publicado em: (2012)
por: Félix, João Luís Monteiro
Publicado em: (2012)
school Revisiting blockchain consensus with trusted components
por: Antão, Tiago Miguel Gomes
Publicado em: (2025)
por: Antão, Tiago Miguel Gomes
Publicado em: (2025)
school Arquitetura de um SIEM tolerante a falhas para análise forense
por: Fernandes, Pedro Dinis Reis
Publicado em: (2015)
por: Fernandes, Pedro Dinis Reis
Publicado em: (2015)
school Distributed Attestation Service for IoT
por: Carvalho, Tiago Rafael Neto
Publicado em: (2023)
por: Carvalho, Tiago Rafael Neto
Publicado em: (2023)
school Multi-party computation as a service for privacy-preserving distributed applications
por: Carvalho, Miguel João Novo Faísca de
Publicado em: (2025)
por: Carvalho, Miguel João Novo Faísca de
Publicado em: (2025)
school Analysis and implementation of consistency and fault tolerance mechanisms in soft real-time systems
por: Figueira, Pedro Miguel Ferreira
Publicado em: (2014)
por: Figueira, Pedro Miguel Ferreira
Publicado em: (2014)
school Inclusão de funcionalidades MapReduce em sistemas de data warehousing
por: Silva, Dário Almeno Matos da
Publicado em: (2013)
por: Silva, Dário Almeno Matos da
Publicado em: (2013)
school Substrato de coordenação e serviço de directorias para sistemas de ficheiros seguros para cloud-of-clouds
por: Mendes, Ricardo Samuel Portinha
Publicado em: (2012)
por: Mendes, Ricardo Samuel Portinha
Publicado em: (2012)
school Improving Confidential BFT State Machine Replication
por: Santos, Cristiano Miguel Coutinho dos
Publicado em: (2024)
por: Santos, Cristiano Miguel Coutinho dos
Publicado em: (2024)
school Dependable data storage with state machine replication
por: Santos, Marcel Henrique dos
Publicado em: (2014)
por: Santos, Marcel Henrique dos
Publicado em: (2014)
school Serviço de coordenação para bases de dados replicadas
por: Posse, Rui Jorge Raposo
Publicado em: (2011)
por: Posse, Rui Jorge Raposo
Publicado em: (2011)
school A cessação do contrato de trabalho por facto imputável ao trabalhador : a relevância disciplinar das faltas injustificadas e as faltas injustificadas enquanto justa causa para o despedimento
por: Lavajo, Pedro Miguel do Nascimento Lopes Monteiro
Publicado em: (2018)
por: Lavajo, Pedro Miguel do Nascimento Lopes Monteiro
Publicado em: (2018)
school Low-cost cloud-based disaster recovery for transactional databases
por: Alcântara, Joel Melão
Publicado em: (2016)
por: Alcântara, Joel Melão
Publicado em: (2016)
school Faltas por motivo de prisão: uma comparação entre o regime de Direito Público e o regime de Direito Privado
por: Cerejo, Eduarda Teles
Publicado em: (2023)
por: Cerejo, Eduarda Teles
Publicado em: (2023)
school A consistent and fault-tolerant data store for software defined networks
por: Botelho, Fábio Andrade
Publicado em: (2013)
por: Botelho, Fábio Andrade
Publicado em: (2013)
school Refinamento de testes para localização de faltas
por: Luís, Filipe Miguel Martins Serra, 1989-
Publicado em: (2012)
por: Luís, Filipe Miguel Martins Serra, 1989-
Publicado em: (2012)
Registos relacionados
-
school Hadoop mapreduce tolerante a faltas bizantinas
por: da Costa, Pedro Alexandre Reis Sá
Publicado em: (2011) -
school CONCRETIZAÇÃO DE UMA BIBLIOTECA PARA REPLICAÇÃO TOLERANTE A INTRUSÕES
por: Sousa, André Filipe Farias de
Publicado em: (2009) -
school Balanceador de carga tolerante a faltas bizantinas
por: Campos, Rúben Filipe Cadima de
Publicado em: (2013) -
school RAVE REPLICATED ANTIVIRUS ENGINE
por: Silva, Carlos Miguel da Silva dos Santos
Publicado em: (2009) -
school Cache-conscious Splitting of MapReduce Tasks and its Application to Stencil Computations
por: Magro, Daniel Lobato Vieira
Publicado em: (2015)