浅析腾讯TDW对Hive的应用和优化

来源 :程序员 | 被引量 : 0次 | 上传用户:jiangyubojs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
腾讯分布式数据仓库(Tencent distributed Data Warehouse,以下简称TDW)是腾讯工程技术事业群数据平台部基于Hadoop、Hive、PostgreSQL研发的大数据处理平台,并在它们的基础上做了大量优化。目前TDW是腾汛内部规模最大的分布式系统,集中了腾讯内部各个产品的数据,为腾汛的子个产品提供海量数据存储和分析服务,包括数据挖掘、产品报表、经营分析等服务。TDW平台现在的机器总量达到5.000台以上,最大集群约2,000个节点,覆盖嘴讯90%以上的业务产品。
其他文献
【摘 要】自尊的形成不仅能引发儿童的自信心和追求成功的行为,而且还是平稳过渡到少年期的重要条件。文章从尊重学生、评价学生、惩罚学生三个方面提出培养高年级学生自尊的做法。  【关键词】高年级学生 尊重 评价 惩罚  自尊作为一个起中介作用的人格变量,对儿童的认识、动机、情感、品德和社会行为都有广泛的影响。自尊在心理系统中起着制约和支柱作用,它的制约作用体现在它直接影响人的情绪,并通过情绪
The dc glow discharge plasma nitriding of austenite stainless steel with severe surface deformation layer is used to produce much thicker surface modified layer
<正> 我院从1960.1~1995.12手术治疗甲状腺机能亢进症(以下简称甲亢)927例,现予报告,并就本病的术前药物准备进行讨论: 1 临床资料 本组927例,其中男206例(22.22%),女721例(77.
2012年9月18日,我有幸在南宁听了吴正宪老师的《重叠》一课,这节课使我更深刻地认识到“作为老师的我们,用心读懂孩子的心”是何等的可贵。下面我们就带着这句话走进吴老师《重叠》一课的课堂。  片段:把一位叫“子涵”的同学请上台,像讲故事一样说:“子涵,你呀,站在一排队伍中,从前数了数你是第五个,从后数了数你还是第五个,那这个队伍里一共有多少人?”  小学生学数学离不开举例子。对于教材中例1出现的同
《论语&#183;微子篇》"不仕无义"章,传统的解释存在诸多问题,尤其是将"不仕无义"解作"不做官是不义的",无形之中使孔子以及儒家"君臣之义"的深刻内涵和超越维度受到遮蔽。通过对"仕"与"
审美教育不仅对学生在初中阶段的能力培养和人文素养的形成有推动作用,而且有利于使学生在紧张的学习环境中保持愉悦的心情,提高学习效率。审美教育应该贯穿于美术教学的始终,因
有些幼儿在刚入园时不愿意主动参加谈话,在活动中教师提问也不乐于回答。创设一个能使他们想说、敢说、喜欢说、有机会说并能得到积极应答和肯定的环境。
《乐记》云:“审乐以知政,而治道备矣”。荀子认为音乐可以“正身行、广教化、美风俗”。的确如此,音乐教育的最大特点是培养学生的审美。通过美感教育来启发学生的道德情操,这是其他各门学科所不及的。音乐课的思想教育要体现在与音乐艺术的美感为一体来进行,使学生受到潜移默化的教育,能逐渐形成正确的审美观,培养感受美、鉴赏美、表现美和创造美的能力,提高分辨“真”与“假”,“美”与“丑”,“善”与“恶”的能力。使
【摘 要】在初中物理教学中运用多媒体教学手段,能够让生动的物理场景走进学生的视野从而激发学生学习物理的兴趣,也能够促进学生主动学习,提高教学效果,优化教学过程。只有充分发挥多媒体技术优势进行物理课堂教学,才能实现初中物理课堂教学的最优化。  【关键词】多媒体技术 物理教学 教学效果 教学过程最优化  1多媒体技术简介  多媒体(Multimedia),在计算机系统中,组合两种或两种以上媒体
研究了西北高海拔干燥地区特重烧伤电解质代谢多器官衰竭的发生原因及相互关系;方法:利用Evans公式指导休克斯复苏补液,观测血清电解质及脑,肺、心等器官功能。结论:认为 高钠血症的原