Loongoop 大数据支持平台

为Hadoop大数据处理框架而研发的数据接口系统

产品概述

Loongoop是一款以LoongStore分布式存储系统为底座，为上层Hadoop大数据处理框架而研发的数据接口系统，可以使所有Hadoop生态组件应用程序直接运行在LoongStore存储系统上。

Loongoop系统实现了HDFS接口，Yarn（MapReduce）、HBase、Hive、Spark、Oozie、Sqoop等所有Hadoop生态组件均可通过该接口完全兼容地运行在LoongStore存储系统上，空间利用率可达94%。

产品特点

超大数据规模

支持数千亿级数据，视元数据服务器数量和SSD硬盘大小而定。

元数据信息直接持久化在SSD中，SSD容量越大，数量越多，支持的数据数目越多。

安全可靠　无单点故障　

多个元数据服务器，采用两两配对全活的工作方式，组成元数据集群对外提供服务，无单点故障，系统性能随系统规模的扩大而近线性增长。

灵活的数据保护模式　超高空间利用率

依托LoongStore集群存储系统，除了提供副本冗余数据保护模式外，还提供了纠删码冗余校验模式，大大提升了存储利用率，在保证数据高效并行存取的前提下，可提供超过90%以上的空间利用率。

支持多协议互通 无需数据拷贝

支持系统内文件、对象、大数据之间协议互通，使用统一的元数据服务对采集数据和分析数据进行管理，在单一系统内不但可以实现不同数据类型的共池存储，而且实现了免数据拷贝迁移、免格式转换的跨协议数据访问，提升了任务处理效率，节约了存储资源，降低了整体硬件成本。