分布式技术

大规模分布式存储系统笔记二

单机存储篇概述CPU架构IO总线未完待续概述本篇我们先谈谈单机存储。单机存储系统是单机存储引擎的一种封装,对外提供文件、键值、表格或者关系模型。本篇会从CPU、IO、网络等硬件基础知识及性能参数、接着介绍主流单机存储引擎。CPU架构早期的CPU为单核芯片,提高单核会产生过多的热量且无法带来相应的性能改善。因此,现代服务器基本多核或多个CPU。 »

大规模分布式存储系统笔记一

好玩的分布式存储笔记一那就看看分布式存储吧概述分布式存储数据需求常见分布式存储系统总结那就看看分布式存储吧两个特点:一个特点是规模大,另一个特点成本低(小型机)。企业要做大,流量要做大,逼着分布式技术在互联网应用,而且越来越压榨机器的性能。本篇只是引入一个分布式的话题,有兴趣的小伙伴可以跟着我探索下,博主立下flag,每周至少一篇更新。 »

Java RMI远程方法调用详解

RMI是Java的一组拥护开发分布式应用程序的API。而Java RMI 则支持存储于不同地址空间的程序级对象之间彼此进行通信,实现远程对象之间的无缝远程调用。JRMP是专为Java的远程对象制定的协议。但由于JRMP是专为Java对象制定的,因此,RMI对于用非Java语言开发的应用系统的支持不足。远程对象间通信的细节由RMI处理,对于程序员来说,远程通信看起来像标准的Java方法调用。 »

分布式测试执行框架的建立方式

分布式测试执行框架的建立方式

1.2 分布式平台的选择本方案采用hadoop来作为分布式平台。所以从单机到分布式主要是Case执行集合的一个拆分。我们将分布式测试执行过程封装到一个hadoop job里。每个tasktracker的map任务输入是切分后的case列表,通过这种方式将整个测试执行部分分发到每个tasktracker上。2、测试框架允许case并行。2、从分布式测试执行过渡到云测试服务。 »

分布式自动化测试工具

二、分布式测试系统的特点分布式测试系统是传统网络化测试系统的进一步发展,具有以下主要特点:网络化。分布式环境下的节点通信分布式测试环境中的活动均带有很强的流程性,某一步操作的失败会导致整个测试流程的中断和异常,因此需要一个稳定的通信环境。以上对分布式测试系统的特点和部分关键技术进行了简单分析。 »

百度disconf分布式配置管理平台

百度disconf分布式配置管理平台

百度内部的BJF配置中心服务[3]采用了类似淘宝diamond的实现,也是配置打散化、只支持KV和非实时推送。功能特点与设计理念disconf是一套完整的基于zookeeper的分布式配置统一解决方案。使用Disconf后,异构系统的部署只需要一个部署包,不同实例的配置会自动分配。详细设计架构设计disconf服务集群模式: »

12306:分布式内存数据技术为查询提速75倍

12306:分布式内存数据技术为查询提速75倍

大量同时涌入的网络访问造成12306几近瘫痪。中国铁道科学院电子计算技术研究所作为12306互联网购票系统的承建单位,急需寻求办法解决问题。一期先改造12306的主要瓶颈——余票查询系统。12306发现GemFire分布式内存数据平台是这样一种技术。Pivotal GemFire分布式集群内存数据技术对整个技术改造发挥了关键的作用。 »

分布式测试执行

分布式测试执行

所以简单说,单机和分布式的区别是case输入集合有变“而已,其他单机的测试执行过程基本不变。我们将分布式测试执行过程封装到一个hadoop job里。每个tasktracker的map任务输入是切分后的case列表,通过这种方式将整个测试执行部分分发到每个tasktracker上。2、从分布式测试执行过渡到云测试服务。 »

分布式应用测试工作遐想

从大的方面看,这也是测试工作必不可少的一环,而且分布式领域一个为人诟病的缺点,是测试和调试的成本高,综合看来对这个领域的持续积累和提炼需要提上日程。这个几个因素每个点都能形成一个面,一个体系。资源和时间有限,虽然各有侧重,也需要大家不断的分享,相互促进解决,每个人能专注一个方面有所产出,也能通观全局,相互协助。 »

2020年区块链和分布式账本技术的5大趋势

2020年区块链和分布式账本技术的5大趋势

虽然媒体对区块链、比特币和分布式账本技术的炒作热情开始消退,但过去的一年,各大企业仍然持续对相关技术的研发和部署。分析师也预测2020年银行通过使用区块链技术可能会获得超过10亿美元的价值。区块链和其他形式的分布式账本就提供了当前几近完美的解决方案。 »

泛圈科技:YottaChain分布式存储或将会是区块链最佳的应用方式

泛圈科技:YottaChain分布式存储或将会是区块链最佳的应用方式

YottaChain区块链存储是一种数据存储技术。YottaChain区块链存储系统可以在多个独立设备上分发数据。YottaChain分布式存储的优势可扩展:YottaChain分布式存储系统可以扩展到数百个甚至数千个这样的集群大小,并且系统的整体性能可以线性增长。 »

区块链到底能干什么?

对于区块链从业者来说,最近一个多月的经历堪比过山车。许多币圈大佬们前脚刚感叹“幸福来得太突然”,还未换好正规军马甲响应国家号召,后脚就被“剿匪”,整个剧本颇有魔幻主义色彩。 对于我个人来说,除了工作变得需要经常跑动之外,只有一个小变化:原来面对亲戚朋友的灵魂拷问“你最近在做什么”的时候,一直不太好意思说自己是搞区块链的,否则大概率会被认为是传销骗子,现在倒是可以理直气壮介绍了。 不过随之而来的,在... »

Crypto官方推特

Filenet成功被英国头部加密货币分析平台CryptoCompare收录

CryptoCompare对加密货币的收录有着严格的标准,以规范全球资源,监控市场。Filenet通过CryptoCompare的严格要求,并且成功被收录,一方面是对Filenet发展的肯定,一方面也说明了Filenet的全球市场正不断扩大,国际品牌知名度不断得到提高。Filenet作为全球首个上线主网的分布式存储应用公链,致力于成为分布式存储赛道的领导者,存储分发有价值的内容。关注Filenet... »

在这里插入图片描述

19. 【实战】测试redis cluster多master写入、读写分离、高可用性

目录介绍测试redis cluster测试多master写入 -> 支撑海量数据的分布式存储测试不同master各自的slave读取 -> 读写分离测试主备自动故障切换 -> 高可用性思想redis cluster去掉主从架构,读写分离扩展思想--如何学习技术介绍redis cluster,提供了多个master,数据可以分布式存储在多个master;每个m »

在这里插入图片描述

加拿大数字知名媒体Digital Journal全面报道Filenet项目

前 言为支持社区成员在3.0阶段公平合理的获得激励收益,进一步深化社区共识、全面扩张社区生态,Filenet推出打包节点招募活动。活动开展至今,已有众多社区加入Filenet成为打包节点,共同构建Filenet社区生态。Filenet项目的发展引起业界的关注,加拿大数字知名媒体Digital Journal对Filenet进行了全面的报道。Digital Journal,加拿大数字期刊,在世界20... »

分布式账本简介

分布式账本简介

网络的参与者对分布式账本中记录的更新进行管理并达成共识。企业通常使用多个分布式账本来跟踪其各个业务部门中的资产所有权和参与者之间的资产转移。Hyperledger Fabric框架在许可的网络上支持分布式分布式账本解决方案,成员之间彼此了解,适用于广泛的行业。商业网络的所有参与成员都同意的共识协议可确保仅使用网络验证的交易更新分布式账本。 »

联盟链FISCO-BCOS入门指南(一)

1.概述 FISCO BCOS是一个区块链底层平台,由金融区块链合作联盟(深圳)(以下简称:金链盟)开源工作组以金融业务实践为参考样本,在BCOS开源平台基础上进行模块升级与功能重塑。特点:深度定制的安全可控、适用于金融行业且完全开源。金链盟开源工作组的首批成员包括:微众银行、深证通、腾讯、华为、神州数码、四方精创、博彦科技、越秀金科、亦笔科技等9家单位。 联盟链的升华:分布式商业与公众联盟链 商... »

此次疫情被战胜后,或将给区块链的发展带来深远的影响

此次疫情被战胜后,或将给区块链的发展带来深远的影响

一场突如其来的疫情,牵动着数十亿人的心。此次疫情被聚焦关注,湖北红十字会也被曝出种种问题,公众的质疑声不断。从每次自然灾害或者说疫情来看,人类从未战胜过大自然,更多的是利用科学技术来开发自然资源。最后,愿疫情早日结束,全国人民的生活重回原有的轨道。这次疫情对你个人或者所处的行业的影响主要有哪些? »

在这里插入图片描述

Redis分布式集群实战(4)——redis集群之Codis讲解和搭建

从 Redis 的广泛流行到 RedisCluster 的广泛使用之间相隔了好多年,Codis 就是在这样的市场空缺的机遇下发展出来的。Codis 上挂接的所有 Redis 实例构成一个 Redis 集群,当集群空间不足时,可以通过动态增加 Redis 实例来实现扩容需求。每个槽位都会唯一映射到后面的多个 Redis 实例之一,Codis 会在内存维护槽位和Redis 实例的映射关系。 »

在这里插入图片描述

云计算(1.2)Google云计算三大核心技术 – 分布式数据处理MapReduce

前言GFS解决了Google的大数据存储问题针对大数据进行计算并获得预期结果的技术就是MapReduceGoogle的MapReduce不开源后面可以通过使用Hadoop MapReduce深入理解MapReduce对于Google搜索,一次简单的搜索也就是一个请求,在云端需要大量的计算最终返回结果如何进行分布式计算? »

在这里插入图片描述

Filenet被欧洲知名数字货币行情平台Coinranking收录

近日,Filenet被CoinMarketCap等五大国际知名数字货币行情平台收录,意味着 Filenet在技术、生态建设,商业落地等方面已经获得了全球区块链市场的认可。12月26日,Filenet又被欧洲顶尖的数字货币行情平台Coinranking收录,标志着Filenet国际化市场又往前迈了一大步,这是对Filenet发展的巨大肯定。关注Filenet媒体平台,掌握更多动态消息。 »

smiley_12.png

微众银行“梦见”区块链

来源 | 浅黑科技 作者 | 史中 责编 | Carol 出品 | 区块链大本营(blockchain_camp) 说来,这已经是二十年前的事儿了。 那天下午,浓稠的光线从窗户射进来,教室里没有飞扬的粉笔末。刚上初一的小中哥坐在教室第一排,毫无预兆地被卷入了我人生中第一次“选秀”。 班主任李丽敏老师决定用这节课的前15分钟选一下班长。她在黑板上写了五个候选人的名字,其他三个路人我已经忘记了,我只记... »

在这里插入图片描述

JAVA工作4年要来应聘16k最后没要,细节如下(来看看原因)

前奏:今天小编和大家分享一位以前面试的一位应聘者,工作4年26岁,统招本科。以下就是他的简历和面试情况。这次问的相对来说不会太难,因为工作4年要16k薪资不是很高,最后还是没有给第二面的机会,主要还是觉得对技术深度不够,广度是OK的,今天的面试分享就到这里,如果大家需要更多的Java面试题,我整理了一些需要的si xin小编即可。 »

在这里插入图片描述

云计算(1.3)Google云计算三大核心技术 – 分布式结构化数据表BigTable

前言 前面学习了GFS(分布式存储系统),MapReduce(分布式数据处理) 接下来学习最后一个技术:分布式结构化数据表BigTable 谷歌技术”三宝”之BigTable Google Bigtable 中文版 引进BigTable GFS(2003年发表)使用商用硬件集群存储海量数据。文件系统将数据在节点之间冗余复制。MapReduce(2004)是GFS架构的一个补... »

泛圈科技:YottaChain分布式存储改变数据的存储方式

泛圈科技:YottaChain分布式存储改变数据的存储方式

从本质上讲,我即将描述的YottaChain分布式云存储网络也是类似的。这意味着除了数据所有者之外,任何一方都不能访问数据,这使得YottaChain的分布式方法成为目前最安全的云存储解决方案。YottaChain分散式云存储网络可能会使用数百万台服务器设备,而不是数百或数千台。 »

Page 1 of 3123