大数据笔记之Hadoop集群部署笔记

    1、修改hostname  [root@aaahadoop]#hostnamehadoop.datanode1.com  [root@aaahadoop]#vi/etc/sysconfig/network  修改:&...
2014年03月21日 性能优化 4647次阅读 条评论

css,js,图片资源都应该明确的指定一个缓存时间

    设置静态内容缓存时间,指标解释:css,js,图片资源都应该明确的指定一个缓存时间。指标解释:css,js,图片资源都应该明确的指定一个缓存时间。评估标准:如果有静态文件的过期时间设置小于30天,将会得到警告。nginx做为web服务器的情况下,我们有时候需要让浏览器缓存(B...
2014年03月19日 性能优化 15694次阅读 条评论

百度Hadoop分布式系统揭秘:4000节点集群

         百度的高性能计算系统(主要是后端数据训练和计算)目前有4000节点,超过10个的集群,最大的集群规模在1000个节点以上。每个节点由8核CPU以及16G内存以及12TB硬盘组成,每天的数据生成量在3PB以上。规划当中的架构将有超过...
2014年03月13日 性能优化 5140次阅读 条评论

一次线上OOM故障排查经过

    本文是一次线上OOM故障排查的经过,内容比较基础但是真实,主要是记录一下,没有OOM排查经验的同学也可以参考。现象我们之前有一个计算作业。最近经常出现不稳定,无法正常响应的情况。具体表现是:各种连接超时,从mysql、mongodb和zookeeper到netty,能超时的都超时过了。其他看不到太多...
2014年03月05日 性能优化 5974次阅读 条评论

10个出色的NoSQL数据库

    虽然NoSQL流行语火起来才短短一年的时间,但是不可否认,现在已经开始了第二代运动。尽管早期的堆栈代码只能算是一种实验,然而现在的系统已经更加的成熟、稳定。不过现在也面临着一个严酷的事实:技术越来越成熟——以至于原来很好的NoSQL数据存储不得不进行重写,也有少数人认为这就是所谓的2.0版本。这里列...
2014年03月05日 性能优化 4938次阅读 条评论

基于大数据分析系统Hadoop13个开源工具

    Hadoop是由Apache基金会开发的一个大数据分布式系统基础架构,最早版本是2003年原Yahoo!DougCutting根据Google发布的学术论文研究而来。用户可以在不了解分布式底层细节的情况下,轻松地在Hadoop上开发和运行处理海量数据的应用程序。低成本、高可靠、高扩展、高有效、高容错...
2014年03月05日 性能优化 5360次阅读 条评论

Hadoop求职高薪必备6大攻略

    开源Apache Hadoop项目一直是个热门,这对于具备Hadoop及相关技能的IT求职者来说是个好消息。  MattAndrieux是旧金山RivieraPartners公司技术招聘部门负责人,他告诉我们对Hadoop及相关技能的需求在过去几年中呈直线上升趋势。Andrieux在...
2014年03月05日 性能优化 4870次阅读 条评论

oracle大数据优化,Oracle数据库日常维护

    在Oracle数据库运行期间,DBA应该对数据库的运行日志及表空间的使用情况进行监控,及早发现数据库中存在的问题。一、Oracle警告日志文件监控Oracle在运行过程中,会在警告日志文件(alert_SID.log)中记录数据库的一些运行情况:●数据库的启动、关闭,启动时的非缺省参数;●数据...
2014年02月28日 性能优化 4301次阅读 条评论

nginx-性能优化,突破十万并发必看哦。

    一般来说nginx配置文件中对优化比较有作用的为以下几项:worker_processes8;nginx进程数,建议按照cpu数目来指定,一般为它的倍数。worker_cpu_affinity000000010000001000000100000010000001000000100...
2014年02月26日 性能优化 3764次阅读 条评论

SVN出现黄色感叹号,红绿双箭头。

    SVN无法对文件修改,提交。,更新。纠结了好久,在工程中显示为“红绿双箭头”,在工程目录下是“黄色感叹号”,你的本地副本与SVN服务器没有同步,产生了冲突。。出现这种情况的原因,我提交到SVN上的文件,被同事给删除了,然后他在本地又提交了一个同名文件,然后我更新,结果就是这样了。解决方法,在你本机中...
2014年02月19日 性能优化 44434次阅读 条评论
5/7 ‹‹ 1 2 3 4 5 6 7 ››
博主介绍
乌云蔽月,人迹踪绝,说不出如斯寂寞。
控制面板
您好,欢迎到访网站!
  [查看权限]
站点信息
  • 文章总数:1279
  • 页面总数:2
  • 分类总数:9
  • 标签总数:61
  • 评论总数:331
标签列表
友情链接