对于当前几乎所有行业的各种规模的企业组织机构而言，迁移到云计算早已经不再是一个新的趋势——而是一项势在必行的计划了。根据市场调研机构Gartner公司最近的研究显示，“预计在未来几年，企业云策略将达到没有采用云服务就像不能上网一样罕见的一个境地。”Gartner公司的研究副总裁杰弗里·曼恩表示说，“甚至是那些曾经主要取决于客户而定制设计的软件，也将逐步迁移到云中。”对于这一在全球范围内的各行各业都在掀起的从企业内部部署的IT迁移到基于云服务的IT的趋势，实在没有什么神秘的。作为一款平台，云服务为那些依赖于信息技术来运行他们的企业业务，并在今天的全球市场竞争的企业组织们带来了诸多的好处。降低了I
2021-02-26 09:06:18
198KB
1
Uber的早期架构由一个单体后端应用程序构成，该应用由Python编写，Python使用Postgres以实现数据持久化。自那时起，Uber架构已发生巨变，逐步转化为微服务模式和新的数据平台。特别是在之前一些使用Postgres的案例中，现在则改用Schemaless（一个基于MySQL的全新数据库分片）。本文将探索Postgres的缺陷，解释迁移到MySQL的基础上构建Schemaless和其它后端服务的原因。Postgres有很多局限性：写入架构低效数据复制低效表损坏的问题糟糕的从库MVCC支持新版本更新难度升级下文将分析Postgres的表表示法和磁盘上的索引数据，重点对比MySQL通过
2021-02-26 09:05:54
328KB
1
随着Web2.0的到来，互联网数据快速增长。大规模数据的采集和处理及应用直接影响着用户体验，决定着企业的发展。比较传统关系型数据库和分布式非关系型数据库两者处理大数据的性能，将本地数据迁移到分布式数据库势在必行。文章分析了现有迁移工具的利弊，基于HBase数据库提出了一种有效的数据迁移策略，并依据提出的策略实现了一种半自动化移工具。以美国城市和方言系统CityDetail数据库数据为例，阐述了该迁移工具的工作原理并对迁移后的数据进行多次查询比较，证明了使用该工具进行数据迁移的高效性。Web2.0时代，网络技术飞速发展，个人与企业都在不断地创造海量数据，在新的掘金大潮中，如何利用数据以及将数据转
2021-02-26 09:05:53
180KB
1
“只要站在风口，猪也能飞起来”，这碗心灵鸡汤不知道激励了多少英雄豪杰踏上寻风口之路。而现如今，Docker这阵龙卷风呼啸来袭，更让众人生起迎风而上、直冲云霄的欲望。为了找到这风口，腾讯数据平台部开始全面拥抱docker，基于多年的大数据集群管理经验，倾力打造DockerOnGaia云平台（简称Gaia云），并动员将数平自身的核心系统全面接入Gaia云。Lhotse系统作为先锋部队，经过一段时间的改造-验证-灰度，目前现网已经完全接入、稳定运营。本文旨在分享Lhotse接入Gaia云的一些实践经验，抛砖引玉，期待更多的系统加入队伍，一起在Docker云中探索前行。Lhotse是一个大数据任务调度
2021-02-25 16:06:24
434KB
1