Hadoop读书笔记(一),Hadoop读书笔记(


1.Hadoop是什么?

适合大数据的分布式与计算平台。
HDFS:Hadoop Distributed File System 分布式文件系统
 MapReduce:并行计算框架

2.HDFS的架构

    主从结构     主节点,只有一个:namenode         从节点,有很多个:datanodes namenode负责: 接收用户操作请求 维护文件系统的目录结构 管理文件与block之间关系,block与datanode之间关系
  datanode负责: 存储文件 文件被分成block存储在磁盘上 为保证数据安全,文件会有多个副本

3.MapReduce的架构

主从结构

主节点,只有一个:JobTracker 从节点,有很多个:TaskTrackers JobTracker负责: 接收客户提交的计算任务 把任务分给TaskTrackers 监控TaskTracker的执行情况 TaskTrackers负责: 执行JobTrackers分配的计算任务

4.Hadoop的特点

扩容能力(Scalable):能可靠的(reliably)存储和处理千兆(PB)数据。 成本低(Economical):可以通过普通机器组成服务器来分发以及处理数据。这些服务器群总计可达数千个节点 高效率(Efficient):通过分发数据,hadoop可以再数据所在的节点上并行(parallel)处理它们,这使得处理的非常的快速。 可靠性(Reliable):hadoop能自动的维护数据的多份副本,并且在任务失败后能自动的重新部署(redeploy)计算任务。

欢迎大家一起讨论学习!

有用的自己收!

记录与分享,让你我共成长!欢迎查看我的其他博客;我的博客地址:http://blog.csdn.net/caicongyang


  


读书笔记一则

读《命运》有感

前阵子在书城买了本书,叫《滴水藏海》,里边有300个经典的哲理故事。现在我来品味一篇小故事,叫《命运》。
《命运》讲的是连个孩子的命运,一个被高僧占卜为“状元”,另一个为“乞丐”。二十年后,当初的“状元”成了乞丐,而“乞丐”却成了“状元”。
上帝说:“我赋予每个人的天分之占他命运的三分之一,其余的在于他如何去把握。”
看了这段话,我很受触动。把握,把握命运,多简单的字眼,可是又有多少人真正把握住了自己的命运呢?不必埋怨自己的天分,更不必埋怨自己的命运,因为命运掌握在自己的手中,你随时都可以改变它的!只要你愿意
读《永别了武器》有感
一个告别了武器的人,不是敌人的俘虏,就是爱的俘虏.我不是不善于自我保护,实在是一个放弃自我保护的人.就如同生命的数据库,已经不需要进入的密码,随时都可以打开全部程序,可以读出全部的文件.我说的俘虏,就是这个意义上的俘虏.当我把自我放到阳光下的时侯,我明白从此不能有所伪装,隐蔽的日子一想起就令人不安.当我意识到抗拒的无奈,有多少时间无可挽回,有多少记忆渐渐从内心淡出.说到底,俘虏就是一个不能抵挡伤害的人,就是要有足够的勇气放弃希望,必须承受生存的全部压力.本来,在属于个人的空间,可以沉浸于独自的幻想,可以从尘埃里开出虚拟的花朵.而一个放弃自我保护的人是连欺骗自己都不能,只有不断地净化内心世界.
 

随便一本书的读书笔记

骆驼祥子读书笔记:
主要内容:
《骆驼祥子》是老舍的代表作。 作品以旧中国北平为背景,描写了人力车夫祥子由人堕落为“兽”的悲惨遭遇,表达了作者对挣扎在社会最低层劳动者苦难命运的关怀和同情,歌颂了祥子勤劳、朴实、善良、向上的优良品质,深刻揭示了造成祥子悲剧命运的原因。

好词:
甘居人后、与世无争、省吃俭用、兵荒马乱、卖好讨俏、
任劳任怨、低声下气、一清二白、一刀两断、忘恩负义

好句:
1.那辆车是他的一切挣扎与困苦的总结果与报酬,像身经百战的武士的一颗徽章.。
2.他们自己可是不会跑,因为腿脚被钱赘的太沉重.
3.钱会把人引进恶劣的社会中去,把高尚的理想撇开,而甘心走入地狱中去。
4.为金钱而工作的,怕遇到更多的金钱,忠诚不立在金钱上。
5.经验是生活的肥料,有什么样的经验便变成什么样的人,在沙漠里养不出牡丹来

好段:
1、他什么也不知道了,只茫茫地觉得心有点热气,耳边有一片雨声。他要把车放下,但是不知放在哪里好。想跑,水裹住他的腿。他就那么半死半活地,低着头一步一步地往前拽。坐车的仿佛死在了车上,一声不出地任凭车夫在水里挣命。——此段形象地写出了祥子拉车时的艰辛,也对比写了坐车人的冷漠,更衬托出祥子的可怜。
2、不知道是往前走呢,还是已经站住了,心中只觉得一浪一浪的波动,似一片波动的黑海,黑暗与心接成一气,都渺茫,都起落,都恍惚,祥子像被一口风哽住,往下连咽了好几口气。——此段刻画了祥子内心的困苦彷徨,很生动。

老舍—一个伟大的人民艺术家一生创作了许多经典的作品,但其中最著名的要算《骆驼祥子》了。
《骆驼祥子》描绘了祥子的悲惨命运。他拼命的赚钱,经过三年的努力换来了一辆洋车。但是没过多久,乱兵抢走了他的车;接着特务又诈去了他仅有的积蓄,主人为躲避特务还使他丢了比较安定的工作,迎着这一个个打击,他作过挣扎,仍然执拗地想用更大的努力来实现自己梦寐以求的愿望。但一切都是徒然:他用虎妞的积蓄买了一辆车,很快又不得不卖掉来办虎妞的丧事。他所喜爱的小福子的自杀,吹熄了心中最后一朵希望的火花,他丧失了对于生活任何企求和信心,从上进好强沦为自甘堕落:原来那个正直善良的祥子,被生活的磨盘辗得粉碎。
小说,真实地展现了那个黑暗社会的生活面目,展现了军阀、特务、车厂主们的丑恶面目,如果不是他们的迫害,祥子也不会从充满希望走向堕落,一个曾经勤劳坚忍,有着自己目标的人最后却沦为了社会垃圾----这不就是可悲的人生吗?
祥子的人生理想是狭小的,他的斗争手段更是错误的。结果,使自己远离了周围的朋友,更加无力抗拒一次又一次的打击。既然“要买上自己的车?”成了他奋斗向上的全部动力,以至于是他生活在世上的唯一目的,那么,在他逐渐意识到自己根本无法实现这样的要求以后,他失去的就不单是一个理想,而是生活的全部意义,从而必然陷于精神崩溃的境地。
我看完《骆驼祥子》后,有一种意犹未尽的感觉。我非常不想这长篇小说完结,有想继续看下去的感觉。老舍写这部长篇小说非常出神入化,能够引人入圣,而且警动后世。

最近,我读了老舍的名著——《骆驼祥子》,从而令我感触良多。
小说通过一个旧人力车夫的辛酸故事,描绘了旧社会如何把一个正直、好强、善良、自食其力的洋车夫从肉体到灵魂加以毁灭的过程。祥子老实、健壮、纯朴,对生活有骆驼般的积极和坚韧精神,他的唯一愿望就是买一辆自己的车来拉,做一个独立的劳动者。后来,经过3年的省吃俭用,他用自己的血汗钱换来了一辆车,但没过多久,却被大兵抢走。第二次他又攒够了钱,却又被那可恶的孙侦探给怍了去。第三次,他娶了虎妞,还用虎妞的钱买了车子,本......余下全文>>
 

相关内容