运维

TechEd是微软一年一度的技术大会,是一个学习和分享的平台,可以满足 IT 专业人员和开发人员的创新激情,与微软技术专家和业内同行共同探讨技术发展热点和趋势。传媒的工作人员对TechEd 2012微软技术大会主会进行在线直播,感兴趣的读者可以点击这里观看。 现任亚太区技术支持中心系统平台支持部资深专家工程师李锋带来了关于“WindowsServer2012活动目录”的主题演讲。李峰老师提到,WS 2012新提供

2022-10-23  371
运维

  当前大并发的网站基本都采用了Nginx来做代理服务器,并且做缓存,来扛住大并发。先前也用nginx配置过简单的代理,今天有时间把整合过程拿出来和大家分享,不过其中大部分也是网上找来的资源。   nginx完整的反向代理代码如下所示 : [root@dataconf]#vimnginx.conf userwwwwww; worker_processes10; error_log/var/log/nginx/nginx_erro

2022-10-23  352
运维

Hadoop(大数据分析领域无可争辩的王者)专注于批处理。这种模型对许多情形(比如为网页建立索引)已经足够,但还存在其他一些使用模型,它们需要来自高度动态的来源的实时信息。为了解决这个问题,就得借助 Nathan Marz 推出的 Storm(现在在 Twitter 中称为 BackType)。Storm 不处理静态数据,但它处理预计会连续的流数据。考虑到 Twitter 用户每天生成 1.4 亿条推文 (tweet),那么就很容易看到此

2022-10-23  409
运维

HDFS是Hadoop Distribute File System 的简称,也就是Hadoop的一个分布式文件系统。 一、HDFS的主要设计理念 1、存储超大文件 这里的“超大文件”是指几百MB、GB甚至TB级别的文件。 2、最高效的访问模式是 一次写入、多次读取(流式数据访问) HDFS存储的数据集作为hadoop的分析对象。在数据集生成后,长时间在此数据集上进行各种分析。每次分析都将设计该数据集的大部

2022-10-23  390
运维

一、问题描述 由于namenode 是HDFS的大脑,而这个大脑又是单点,如果大脑出现故障,则整个分布式存储系统就瘫痪了。HA(High Available)机制就是用来解决这样一个问题的。碰到这么个问题,首先本能的想到的就是冗余备份,备份的方式有很多种,前辈们设计的有元数据备份方案,secondary namenode以及avatarnode等方案。而这些方案中最有优势的自然是能够让HDFS以最短的时间完成故障切换的方案。也就是我们今天

2022-10-23  365
运维

  一旦在服务器上安装并运行了群集服务,该服务器即可加入群集。群集化操作可以减少单点故障数量,并且实现了群集化资源的高可用性。下述各节简要介绍了群集创建和群集操作中的节点行为。  创建群集   在服务器群集产品中含有用来在服务器上安装群集软件和创建新群集的群集安装实用工具。创建新群集时,首先在选择作为群集的***个成员的计算机上运行该实用工具。***步是确定群集名称并创建群集数据库和初始的群集成员列表来定义新群集。Windowsserve

2022-10-23  331
运维

据Gmail官方博客报道,Google发布了一项新功能,可以用于搜索Gmail信箱中超过指定大小或者指定日期的邮件,这个功能主要用于清理Gmail的空间,防止邮箱爆满。   指定大小搜索:size或者larger命令,单位是字节、KB、MB等,可以使用缩写,例如搜索size:5m 或者 larger:5m ,就可以找到大于5M的邮件。大于 500KB 可以使用 size:500k ,相反,小于某个大小的搜索可以使用smaller命令。  

2022-10-23  393
运维

查看iptables关于nat的日志的方法有许多种,我在这里介绍一个简单的方法。   使用iptables -t mangle -A POSTROUTING -j LOG –log-level debug –log-prefix "OUT PACKETS:"   然后修改/etc/syslog.conf   加上一行 kern.debug /var/log/iptables   重启syslog

2022-10-23  404
运维

FTP连接能在iptables下开放,让我们看看这是如何实现的!   iptables 的filter表的INPUT链的默认策略设为了DROP,其余的链均为ACCEPT。 该服务器即要作ftp服务器,也要连上别的ftp服务器。即是说要把源端口和目的端口都开放21才行:   iptables -A INPUT -p tcp –sport 21 -j ACCEPT   iptables -A INPUT -p tcp –

2022-10-23  455
运维

我们来看看Linux iptables将nat中内网多台ftp服务器映射出去的具体方法。   首先分两步:   1 首先把三台ftp服务器的源地址转换成网关的地址   192.168.0.254是网关 10.0.0.0/24 是网段   iptables -t nat -A POSTROUTING -s 10.0.0.0/24 –sport 20,21 -j SNAT –to-source 192.168.0.25

2022-10-23  446