服务器128G内存能处理多大日志文件

服务器128G内存能处理多大日志文件,第1张

具体如下。

128G内存能够存128g、1024m、1024kb、1024byte150字节(一个文件块占用150字节)=9亿。

计算:一个文件对应一个切片->maptask。

解决办法:har归档重点、自定义Inputformat->减少nn内存。

CombineTextInputformat->减少切片数->减少maptask。

jvm重用:开始块大小、副本数。

由于服务器上一致跑着项目,时间久了日志会越来越大,这样很占内存,如不即使清理,有可能会把服务器的服务搞崩。

有一个简单的方法,就是不用停止服务,可以对日志进行动态清楚。

如何做一台文件服务器 假如你是某公司的系统管理员,现在公司要做一台文件服务器。公司购买了一台某品牌的服务器,在这台服务器内插有三块硬盘。 公司有三个部门---销售,财务,技术。每个部门有三个员工,其中一名是其部门经理(另两名是副经理)1 在三块硬盘上共创建三个分区(盘符),并要求在创建分区的时候,使磁盘实现容错的功能; 2 在服务器上创建相应的用户帐号和组; 命名规范,如:用户名:sales-1,sales-2……;组名:sale,tech…… 要求用户帐号只能从网络访问服务器,不能在服务器本地登录 3 在文件服务器上创建三个文件夹分别存放各部门的文件,并要求只有本部门的用户能访问其部门的文件夹(完全控制的权限),每个部门的经理和公司总经理可以访问所有文件夹(读取),另创建一个公共文件夹,使得所有用户都能在里面查看和存放公共的文件; 4 每个部门的用户可以在服务器上存放最多100M的文件; 5 做好文件服务器的备份工作以及灾难恢复的备份工作; 发送给我的好友 提醒我回答有更新 你可以把这个生意经分享给旺旺,MSN或QQ上的好友 当这个生意经的回答有更新时,您可以及时收到提醒 发送给好友 生意经链接: 窗体顶端 发送描述: 窗体底端 郁闷啦!看看这个问题,你一定要帮我啊! 这个东东太实用了,看完记得收藏哦! 旺旺浮出提醒好友 生意经的地址已经复制 您可以粘帖到MSN或者邮件发给您的好友 收藏成功,回答有更新时旺旺会浮出提醒你哦!现在就去查看我的收藏 网友回答 (1) 学会安装和配置文件服务器。 (2) 学会服务器端共享文件夹的配置和管理。 (3) 学会客户端访问共享文件夹的方法。 (4) 学会分布式文件系统的设置方法。 (5) 实验学时:2 2 实验相关理论与知识 计算机网络的基本功能是在计算机间共享信息,文件共享可以说是最基本、最普遍的一种网络服务。虽然越来越多的用户购置专用文件服务器(如NAS),但是通用操作系统提供的文件服务器功能也非常实用,完全能满足一般的文件共享需求,下面主要介绍Windows Server 2003文件服务器的配置、管理和应用。 文件服务器负责共享资源的管理和传送接收,管理存储设备(硬盘、光盘、磁带)中的文件,为网络用户提供文件共享服务,也称文件共享服务器。除了文件管理功能之外,文件服务器还要提供配套的磁盘缓存、访问控制、容错等功能。部署文件服务器,主要要考虑以下3个因素。 ·存取速度:快速存取服务器上的文件,例如可提供磁盘缓存加速文件读取。 ·存储容量:要有足够的存储空间以容纳众多网络用户的文件,可使用磁盘阵列。 ·安全措施:实现网络用户访问控制,确保文件共享安全。 文件服务器主要有两类解决方案,一类是专用文件服务器,另一类是使用PC服务器或PC计算机组建的通用文件服务器。 专用文件服务器是专门设计成文件服务器的专用计算机,以前主要是运行操作系统、提供网络文件系统的大型机、小型机,现在的专用文件服务器则主要指具有文件服务器的网络存储系统,如NAS和 SAN。NAS独立于操作系统平台,可支持多种操作系统和网络文件系统,提供集中化的网络文件服务器和存储环境,比一般的文件服务器的功能更强大,可看作是专用存储服务器,可为那些访问和共享大量文件系统数据的用户提供高效、性能价格比优异的解决方案。SAN全称存储区域网络,是一种用户存储服务的特殊网络,通常由磁盘阵列、光盘库、磁带库和光纤交换机组成。NAS可作为独立的文件服务器,提供文件级的数据访问功能,更适合文件共享。而SAN提供数据块级的数据访问功能,更适合数据库和海量数据。 目前一般用户使用PC服务器或PC计算机,通过网络操作系统来提供文件服务,UNIX、Linux、Novell、 Windows等操作系统都可提供文件共享服务。Windows网络操作系统,如Windows NT Server、Windows2000 Server和最新的Windows Server 2003由于操作管理简单、功能强大,在中小用户群中的普及率非常高,许多文件服务器都运行Windows网络操作系统。下面将重点以Windows Server 2003为例介绍文件服务器的配置、管理和应用。 3 实验环境与设备 C/S模式的网络环境,包括一台Windows XP客户机和一台Windows Server 2003服务器。 两种可选的物理拓扑(交叉线连接或通过集线器/交换机用直连线连接)。 4 实验内容与步骤 40 服务器的基本网络配置,包括IP地址为"192168105XX"、网关为"192168105254"等。(注:"XX"代表你配置机器的主机编号,"nXX"代表你的服务器主机名,例如你坐在5号机上则"XX"代表"05","1XX"代表"105",配置此机的IP地址为"1921681055"、主机名为"n05",下同)。 41 安装和配置文件服务器 文件服务器提供网络上的中心位置,可供存储文件并通过网络与用户共享文件。当用户需要重要文件时,可以访问文件服务器上的文件,而不必在各自独立的计算机之间传送文件。如果网络用户需要对相同文件和可通过网络访问的应用程序的访问权限,就要将该计算机配置为文件服务器。默认情况下,在安装Windows Server 2003系统时,将自动安装"Microsoft网络的文件和打印共享"网络组件。如果没有该组件,可通过网络连接属性对话框安装。 1.准备工作 在部署文件服务器之前,应当做好以下准备工作。 ·划出专门的硬盘分区(卷)用于提供文件共享服务,而且要保证足够的存储空间,必要时使用磁盘阵列。 ·磁盘分区(卷)使用NTFS文件系统,因为FAT32缺乏安全性,而且不支持文件和文件夹压缩、磁盘配额、文件加密或单个文件权限等重要特性。 提示:使用Windows Server 2003自带的工具即可将FAT32转换成NTFS格式。该工具名为Convertexe,位于Windows安装目录下的System32目录中。在命令行状态运行该工具即可,如Convert E:/FS:NTFS。 ·确定是否要启用磁盘配额,以限制用户使用的磁盘存储空间。 ·确定是否要使用索引服务,以提供更快速、更便捷的搜索服务。 2.配置文件服务器 只要将Windows Server 2003计算机上的某个文件夹共享出来,就会自动安装文件服务器,也可通过"配置您的服务器向导"工具来安装文件服务器角色。这两种方法的差别是,第二种方法提供更多的选项,并在程序菜单中提供文件服务器管理台工具。这里介绍采用第二种方法的基本步骤。 (1) 启动"配置您的服务器向导"工具。默认情况下,登录Windows Server 2003时将自动启动"管理您的服务器"(也可从控制面板中选择管理工具→管理您的服务器),单击添加或删除角色。另一种方法是直接从控制面板中选择管理工具→管理您的服务器→配置您的服务器向导。单击下一步按钮。 (2) 在配置选项界面中选择自定义配置,单击下一步按钮。 (3) 在服务器角色界面中,如果文件服务器的已配置状态为"否",就单击文件服务器,然后单击下一步。 注意:如果文件服务器的已配置状态为"是",就单击文件服务器,再单击下一步按钮打开角色删除确认界面,并选择删除文件服务器角色复选框,即可删除文件服务器角色,这样该服务器上的文件和文件夹就不再共享,依赖于这些共享资源的网络用户、程序或宿主都将无法与它们连接。 (4) 出现文件服务器磁盘配额对话框中,为服务器上所有NTFS分区设置默认的磁盘配额。勾选为此服务器的新用户设置默认磁盘空间配额和拒绝将磁盘空间给超过配额限制的用户。单击下一步按钮。默认情况下是没有启用磁盘配额。 (5) 出现文件服务器索引服务对话框,确定是否要使用索引服务。单击下一步按钮。一般情况下不需索引服务,只有在用户要经常搜索该服务器上的文件内容时才启用它。 (6) 出现选择总结对话框,查看和确认已经选择的选项,单击下一步按钮。 本例中有"设置默认磁盘配额"、"安装文件服务器管理"和"运行共享文件夹向导来添加一个新的共享文件夹或共享已有文件夹"等选项。 (7) 自动完成相关配置后,出现共享文件夹向导,根据提示配置共享文件夹以供其他用户共享。只有配置了共享文件夹之后,文件服务器才能建立。 (8) 单击下一步按钮,出现文件夹路径对话框,指定要共享的文件夹路径。可通过浏览在C盘目录下新建一个FileShare作为共享目录,此时文件夹路径输入框中将出现C:FileShare(如果C盘中已经建立过此文件夹,才可以在此输入框中直接输入)。 (9)单击下一步按钮,出现名称、描述和设置对话框,指定共享名。 (10) 单击下一步按钮,出现权限对话框,指定共享权限为管理员有完全访 问权限;其他用户有只读访问权限,单击完成按钮。这里提供了几种预置的权限,也可以自定义权限。 (11)共享成功对话框中显示共享成功,给出新建共享文件夹的信息。如果要继续设置其他共享文件夹,则选中下面的复选框。单击关闭按钮,完成。 至此文件服务器配置就完成了。接下来可执行各项文件管理任务。 3.文件服务器管理工具(以下方法至少掌握一种) Windows Server 2003提供了用于文件服务器配置管理的多种工具。 ·文件服务器管理控制台:打开"管理您的服务器"工具,在文件服务器区域单击管理此文件服务器,打开该控制台。要使用"配置您的服务器向导"工具安装文件服务器,可从程序菜单中选择管理工具→文件服务器管理命令打开该控制台。 ·"共享文件夹"管理工具:也可通过"计算机管理"工具中的"共享文件夹"管理工具来执行共享文件夹的配置管理,从程序菜单中选择管理工具→计算机管理,展开共享文件夹节点即可。 ·Windows资源管理器:可直接将文件夹配置为共享文件夹。 ·命令行工具:如net share可显示有关本地计算机上全部共享资源的信息。

最好是用s3000或s3200服务器芯片组主板,文件服务器对cpu要求不是很高,所以cpu无所谓,差不多就可以

电源需要选一个比较稳定的,推荐全汉电源,绿宝或蓝暴都行!

如果文件比较大的话,组raid是必不可少的,scsi卡根据自己的需要来选择

网卡一定要选好的,比如intel或3com,如果有必要的话,可以做多网卡绑定

主板也要选择大厂比较稳定的,比如intel

5月18日 10:02 文件设置大小,我不会,但是,你可以给他们建立一个用户,然后,以管理员身份进入电脑,然后,在每一个盘上启用磁盘配额,来限制每一个人使用的磁盘空间。

揪错 ┆

一:在安装电脑配件的时候一定要插好。因为配件接触不良会引起系统死机。这是很常见的一种现像。

二:CPU。显卡等配件不要超频过高,要注意温度,否则,在启动或运行时会莫名其妙地重启或死机。

三:最好配置稳压电源,以免电压不稳引起死机。

四:如果有条件的话,加装一个UPS,使电脑在停电后不会造成突然死机。

五:BIOS设置要恰当,虽然建议将BIOS设置为最优,但所谓最优并不是最好的,有时最优的设置反倒会引起启动或者运行死机。

六:在机箱中,可能蕴藏了大量的灰尘,灰尘若接触了配件的电路,会使系统不稳定或死机。

七:机器中装有太多设备时,由于机器所配电源功率不足,使用过程中也会死机。

八:键盘、鼠标等外设不正常也容易引起死机。

九:在同一台机器中,不要混装不同的内存,否则机器会莫名其妙的死机。这也是常见的硬件引起的死机。大家一定要注意。

软件方面的原因:

十:在同一个硬盘上安装太多的操作系统引起系统死机。

十一:在安装应用软件当中。若现提示对话框在"是否覆盖文件"。最好先择不要覆盖。因为通常当前的系统文件是最好的。不能根据时间的先后来决定覆盖文件(除非你对文件的时间很在意)。大家平常并不很注意这一点。

十二:在卸载软件的时候。不要删除共享文件。可能被系统或者其他程序作用,一旦删除这些文件,会使应用软件无法启动而死机。或者出现引起系统运行死机。

十三:在加载某些软件的时候。要注意先后顺序。由于有些软件编程的时候不规范。在运行时候不能排到第一,而是让其它设备使用该中断号。否则引起IRQ冲突。从而引起系统死机。

十四:在运行大型应用软件的时候不要在运行时退出。否则会引起整个瘟酒吧系统的崩溃。

十五:在内存小的时候不要运行占用内存大的程序。否刚在运行时容易出现死机。建议在运行这些程序时应及时保存当前正在使用的文件。

另外,防止电脑死机还有以下注意事项:

在内存较小的情况下(如4MB-16MB),最好不要运行占用内存较大的应用程序,否则在运行时容易出现死机。建议在运行这些程序时应及时保存当前正在使用的文件。

对于系统文件或重要文件,最好使用隐含属性,这样才不致于因误操作而删除或者覆盖这些文件。

修改硬盘主引导记录时,最好先保存原来的记录,防止因修改失败而无法恢复原来的硬盘主引导记录。

最好少用软件的测试版,因为测试版在某方面不够稳定,在使用后会使系统无法启动。

在Windows95/98中尽量不要运行16位应用程序,因为16位的应用程序会与Windows中的32位应用程序产生冲突,从而引起死机或无法启动。

在升级BIOS之前,应确定所升级的BIOS版本,同时应先保存一下原先的版本,以免升级错误而使系统无法启动。

尽量不要使用盗版的软件,因为这些软件里隐藏着大量病毒,一旦执行,会自动修改你的系统,使系统在运行中出现死机。

在机箱中,可能蕴藏了大量的灰尘,灰尘若接触了配件的电路,会使系统不稳定或死机。

在执行磁盘碎片整理的时后,不要运行大型应用软件,否则引起死机。

用杀毒软件检查硬盘期间,不要运行其它的应用程序,以防止系统死机。

在上网的时候,不要一次打开太多的浏览窗口,导致资源不足,引起死机。

在关闭计算机的时候,不要直接使用机箱中的电源按钮,因为直接使用电源按钮会引起文件的丢失,使下次不能正常启动,从而造成系统死机。

常用的分区格式有三种,分别是FAT16、FAT32、NTFS格式。

FAT16:

这是MS-DOS和最早期的Windows 95操作系统中使用的磁盘分区格式。它采用16位的文件分配表,是目前获得操作系统支持最多的一种磁盘分区格式,几乎所有的操作系统都支持这种分区格式,从DOS、Windows 95、Windows OSR2到现在的Windows 98、Windows Me、Windows NT、Windows 2000,甚至最新的Windows XP都支持FAT16,但只支持2GB的硬盘分区成为了它的一大缺点。FAT16分区格式的另外一个缺点是:磁盘利用效率低(具体的技术细节请参阅相关资料)。为了解决这个问题,微软公司在Windows 95 OSR2中推出了一种全新的磁盘分区格式——FAT32。

FAT32:

这种格式采用32位的文件分配表,对磁盘的管理能力大大增强,突破了FAT16下每一个分区的容量只有2GB的限制。由于现在的硬盘生产成本下降,其容量越来越大,运用FAT32的分区格式后,我们可以将一个大容量硬盘定义成一个分区而不必分为几个分区使用,大大方便了对磁盘的管理。而且,FAT32与FAT16相比,可以极大地减少磁盘的浪费,提高磁盘利用率。目前,Windows 95 OSR2以后的操作系统都支持这种分区格式。但是,这种分区格式也有它的缺点。首先是采用FAT32格式分区的磁盘,由于文件分配表的扩大,运行速度比采用FAT16格式分区的磁盘要慢。另外,由于DOS和Windows 95不支持这种分区格式,所以采用这种分区格式后,将无法再使用DOS和Windows 95系统。

NTFS:

它的优点是安全性和稳定性方面非常出色,在使用中不易产生文件碎片。并且能对用户的操作进行记录,通过对用户权限进行非常严格的限制,使每个用户只能按照系统赋予的权限进行操作,充分保护了系统与数据的安全。Windows 2000、Windows NT、以及Windows XP都支持这种分区格式。

Ext2:

这是Linux中使用最多的一种文件系统,它是专门为Linux设计的,拥有最快的速度和最小的CPU占用率。Ext2既可以用于标准的块设备(如硬盘),也被应用在软盘等移动存储设备上。现在已经有新一代的Linux文件系统如SGI公司的XFS、ReiserFS、Ext3文件系统等出现。Linux的磁盘分区格式与其他操作系统完全不同,其C、D、E、F等分区的意义也和Windows操作系统下不一样,使用Linux操作系统后,死机的机会大大减少。但是,目前支持这一分区格式的操作系统只有Linux,而Linux对于大部分用户来说还是困难了点,在这里就不作详细介绍了。

分区方案推荐

要想合理的分配硬盘空间,需要从三个方面来考虑:

1、按要安装的操作系统的类型及数目来分区。

2、按照各分区数据类型的分类进行存放。

3、为了便于维护和整理而划分。

下面以60~100GB的硬盘为例提供4种类型的硬盘分区方案,供读者参考(见附表1~6)。

我们以家用型分区方案(60~100GB)为例讲讲这样划分的理由:

家用型是针对办公、娱乐、游戏用途而言的,你可以装一个Windows 98和Windows XP。Windows 98具有出色的兼容性,可专门用来娱乐。Windows XP则有很强的稳定性,可用于办公和学习。

C盘 建议分区的大小是3~5GB,FAT32格式。C盘主要安装的是Windows 98和一些比较小的常用应用程序。3~5G的容量是考虑到当计算机进行操作的时候,系统需要把一些临时文件暂时存放在C盘进行处理。所以C盘一定要保持一定的Free空间,同时也可以避免开机初始化和磁盘整理的时间过长。

D盘 建议分区的大小是10GB,NTFS格式,用来安装Windows XP及一些常用的办公和应用软件,NTFS分区格式有很强的稳定性和安全性,特别适合于办公和学习。

E盘 建议分区的大小是10~15GB,FAT32格式。D盘主要用来安装比较大的应用软件(比如:Photoshop)、常用工具(比如:超级解霸)等,同时建议在这个分区建立目录集中管理。

F盘 建议分区的大小是10~20GB,FAT32格式。主要用来安装游戏软件。如果需要的话,可以再对游戏的类型进行划分。

G盘 建议分区的大小是15~20GB,FAT32格式。如果你是音乐迷,有大量MP3、WMA或是整张VCD拷贝进去的文件要存放的话,可以划分一个比较大的G区,因为你放置的是一些多媒体文件,如MP3、VCD上的dat,由于单个文件(dat)很巨大,需要连续的大块空间,而且这些文件一般不需要编辑处理,只是用专用的软件回放欣赏。回放欣赏的质量和速度同磁盘数据结构的关系微乎其微,主要取决于CPU、显示卡的性能以及当前系统可用物理内存的大小。所以,我们根本没有频繁对这些分区进行碎片整理的必要。

H盘 剩余空间,FAT32格式。H盘主要是用来做文件备份。如Windows的注册表备份、Ghost备份和计算机各硬件如显示卡、声卡、Modem、打印机等驱动程序,以及各类软件的安装程序。这样可以加快软件的安装速度或与局域网里的其他用户共享。同时可以免去以后重新安装或是升级操作系统时寻找驱动程序光盘的麻烦。这个分区并不需要经常进行碎片整理,只要在放置完数据后整理一次就够了,里面数据更新的频率较低。放置gho文件的分区,如果经常运行磁盘整理还可能会破坏压缩包内的数据,造成以后Ghost恢复系统时发生错误。

到这里,所有的磁盘空间都划分完毕。大概是5到6个分区,各种数据分类存放得井井有条。当然,你也可以把数据更细地分类、分区存放,比如Ghost的备份和Windows的安装程序可以分开放,音乐MP3和VCD的dat文件也可分区存放。总之,每个操作系统原则上应该独占一个2~5GB的分区,里面除了操作系统和办公软件外不要放其他重要文档和邮件,以方便用Ghost的方式维护。总的分区数建议不要超过10个,否则管理起来会比较麻烦,容易混乱。

希望对你有所帮助!^_^

文件服务器是一种器件,它的功能就是向服务器提供文件。它加强了存储器的功能,简化了网络数据的管理。它一则改善了系统的性能,提高了数据的可用性,二则减少了管理的复杂程度,降低了运营费用。

磁盘服务器指的是一个运行环境,这个环境中运行着一个安装了磁盘控制软件的服务器,用来捕获磁盘(一般这些磁盘都采用直连存储),以便让这些磁盘在存储过程中被当作一个虚拟的LUN(逻辑设备号码)。我们将之称为“开放平台存储系统”。

文件服务器也叫档案伺服器,是一种专供其他电脑检索文件和存储的特殊电脑,。文件服务器通常比一般的个人电脑拥有更大的存储容量,并具有一些其他的功能,如磁盘镜像、多个网络接口卡、热备援多电源供应器。到后来,文件服务器逐渐进化成带有RAID存储子系统和其他高可用特性的高性能系统。加强了存储器的功能,简化了网络数据的管理。它一则改善了系统的性能,提高了数据的可用性,二则减少了管理的复杂程度,降低了运营费用。

DABAN RP主题是一个优秀的主题,极致后台体验,无插件,集成会员系统
网站模板库 » 服务器128G内存能处理多大日志文件

0条评论

发表评论

提供最优质的资源集合

立即查看 了解详情