• Hadoop


    Hadoop是一个用于运行应用程序在大型集群的廉价硬件设备上的框架。Hadoop为应用程序透明的提供了一组稳定/可靠的接口和数据运动。在Hadoop中实现了Google的MapReduce算法,它能够把应用程序分割成许多很小的工作单元,每个单元可以在任何集群节点上执行或重复执行。此外,Hadoop还提供一个分布式文件系统用来在各个计算节点上存储数据,并提供了对数据读写的高吞吐率。由于应用了map/reduce和分布式文件系统使得Hadoop框架具有高容错性,它会自动处理失败节点。已经在具有600个节点的集群测试过Hadoop框架。
    点击次数   官方主页【官方主页】   下载地址【下载地址】

    网友留言/评论

    我要留言/评论

    相关开源项目

    At4J:At4J是一个开源的压缩文件处理工具,支持读取与创建Zip和Tar文件。At4J比Java内置的Zip类提供更多的Zip处理功能和压缩方法,比如Unix File Metadata和bzip2压缩。
    Kabeja:Kabeja是一个Java类包用于解析Autodesk的DXF格式并转换成SVG格式(dxf2svg) 。你可以把Kabeja加到你的应用程序中或通过命令行来使用它。该项目提供一个简单的DXF2SVGViewer和一个用于XML Web开发框架Cocoon的GeneratorComponent。一个很小的处理系统能够让你把DXF处理,过滤(XSLT),转换成各种不同的输出格式(JPEG,PNG,TIFF,PDF,XML)。
    ONess:ONess是一个运用最新开源技术(Spring,Hibernate,Struts, XDoclet,AspectJ和Maven等)开发地简单Web应用程序类似于Appfuse。但与Appfuse不同,ONess是真实环境(real-world)中模块化设计与技术整合的一个例子.ONess还提供可用于实际应用程序的中一组商业组件。
    Scriptella:Scriptella是一个开源ETL(Extract-Transform-Load)和脚本执行工具。它最主要的特点是简单,你不必学习其它复杂基于XML的语言。Scriptella使用SQL脚本来执行必需的转换。
    jazzlib:对java.util.zip包的一个纯Java实现(没有使用本地代码).
    IntegraTUM WebDisk:IntegraTUM WebDiskis是一个能直接访问文件服务器的Web应程序。这个网络硬盘系统支持文件的上传,下载,重命名,删除,复制,剪切,搜索,创建目录,文件等。还可以设置权限来屏蔽相应的功能。它采用Java Servlets与jCIFS包进行开发。支持的文件服务器包括Samba,MS Windows,NetApp OnTAP和那些基于CIFS协议的服务器。
    Kabeja:Kabeja这个Java类库能够解析、处理和转换Autodesk的DXF文件。所有处理过的数据都能使用类似于DOM的API来获取。Kabeja能够把DXF稿图转换成多种不同的输出格式比如SVG、JPEG、PNG、TIFF、PDF等。
    FlexBean:FlexBean是一个让Netbeans IDE支持Flex的插件。可以利用这个插件创建/编译/运行Flex项目。
    Subsonic:Subsonic是一个在线媒体播放系统。它能够将指定路径下的音乐(mp3,aac,ogg,wma等)和视频转换播放流。需要Java5.0。
    VCS Report:VCS Report是一个免费开源的Java独立应用程序用于从VCS仓库(Versions Control System:版本控制系统)生成统计报表(图表报表,HTML报表,CSV报表)。VCS Report能够显示存储在VCS中的项目文件的各种信息,它当前只支持CVS。你可以把VCS Report当作IntelliJ IDEA, Borland JBuilder,Eclipse的一个插件来使用。VCS Report在将来的版本中将支持SVN(Subversion),CVS SSH。提供Web接口,更多的统计图表,XML报表,通E-Mail发送Report。