另外还需要HBase或Redis等NOSQL技术来解决实时查询的问题；除了这些，平台中不可或缺的还有任务调度系统和数据 exchange工具；任务调度系统解决了所有大型数据平台中的任务调度和监控；数据交换工具解决其他数据源与HDFS之间的传输，如:数据库到HDFS，HDFS到数据库等等。关于Da数据platform架构的技术文章，可以搜索lxw的Da 数据 field，有很多。
5、 数据库的基本结构包括哪些数据库系统由四部分组成:1 .数据图书馆是指长期存放在计算机中的数据的有组织的、可共享的集合；2.硬件是指构成计算机系统的各种物理设备，包括存储所需的外部设备；3.软件，包括操作系统、数据图书馆管理系统和应用程序；4.人员，包括系统分析师和数据库设计人员、应用程序程序员(负责使用数据库编写应用程序)、最终用户(通过接口或查询语言访问数据库)、数据库。
(1)物理数据楼层。它是数据 library的最内层，是实际存储在物理存储设备上的数据的集合。这些数据是原数据，是用户处理的对象，由内部模式描述的指令操作处理的位串、字符和字组成。(2)概念数据层。它是数据 library的中间层，是数据 library的整体逻辑表示。指出了每个数据的逻辑定义和数据之间的逻辑关系，是存储记录的集合。它涉及的是数据 library中所有对象的逻辑关系，而不是它们的物理条件，是数据 library管理员概念下的数据 library。
6、c语言常见的 数据结构有哪些?1，linear 数据结构元素一般元素之间是一一对应的关系，这是数据结构最常用的类型，典型的例子有:数组、堆栈、队列、线性表。2.树形结构中的节点之间存在层次关系。每层中的一个节点可以且只能与上层中的一个节点相关，但也可以与下层中的多个节点相关，这就是所谓的“一对多”关系。常见的类型有:树和堆。3.图形结构在图形结构中，允许多个节点相关联，这就是所谓的“多对多”关系。
7、 数据结构都有哪些分类呢?根据数据元素之间关系的不同特点，数据的结构往往分为以下四种基本结构:(1)集合结构。这个结构的数据元素之间的关系是“属于同一个集合”。⑵线性结构。此结构中的数据元素之间存在一对一的关系。⑶树形结构。此结构中的数据元素之间存在一对多关系。(4)图形结构。这个结构中的数据元素之间存在多对多的关系，也叫网络结构。数据结构是计算机存储和组织的方式数据。
8、 数据 架构师有哪些类型?1，渠道类型数据架构Division也会往这个方向分类:一是开源，互联网公司一般都喜欢这个门户，二是商业软件学校，比如Oracle，IBM，通常处理传统企业的数据问题。这个门户受到了阿里、腾讯、华为的巨大冲击。个人认为开源派更符合近几年的趋势。渠道类型数据 架构分部服务仓库类型数据 架构分部。坦白说，你的开发能力应该是牛逼的，应该懂应用。
9、 数据结构有哪些数据结构是计算机存储和组织的方式数据。数据结构指的是数据元素的集合，这些元素彼此之间具有一个或多个特定的关系。总的来说，精心选择的数据结构可以带来更高的运算或存储效率。数据的结构往往与高效的检索算法和索引技术有关。数据的逻辑结构和存储结构是数据结构密切相关的两个方面，同一个逻辑结构可以对应不同的存储结构。算法的设计依赖于数据的逻辑结构，而算法的实现依赖于指定的存储结构。
通过分解，可以分为数据三个层次；然后通过抽象，丢弃数据 element的具体内容，得到逻辑结构。同样，操作的定义也是通过分解将处理需求划分成各种功能，然后通过抽象丢弃实现细节而得到的，数据的物理结构介绍:数据的物理结构是数据结构在计算机中的表示(也叫镜像)，包括数据元素的内置表示和关系的内置表示。因为实现的方式有很多种，比如排序、链接、索引、哈希等，结构可以被表达为一个或多个存储结构。
