【bigdata】Flink总结 Flink 几个最基础的概念: Client、JobManager 和 TaskManager。Client 用来提交任务给 JobManager,JobMana 2023-03-16 · jditlee · bigdata flink 面试 · 0 评论 · 0 浏览
【bigdata】Hbase总结 架构原理 1)StoreFile 保存实际数据的物理文件,StoreFile 以 HFile 的形式存储在 HDFS 上。每个 Store 会有 一个或多个 S 2023-03-16 · jditlee · bigdata hbase 面试 · 0 评论 · 0 浏览
【bigdata】hive总结 hive本质:将hql转成mapreduce hive架构原理 1.用户接口:Client CLI(hive shell)、JDBC/ODBC(java访问hi 2023-03-16 · jditlee · bigdata hive 面试 · 0 评论 · 0 浏览
【bigdata】Hadoop总结 hadoop组成 hdfs架构 namenode:存储文件的元数据 datanode: 存储文件块数据 文件块大小,2以前64M,2之后是128M seconda 2023-03-16 · jditlee · hadoop bigdata 面试 · 0 评论 · 0 浏览
【bigdata】3.idea连接虚拟机Hadoop集群 1.windows配置Hadoop环境 1.Linux环境下解压hadoop-2.6.5的tar包 tar -zxvf hadoop-2.6.5.tar.gz,复 2023-03-16 · jditlee · bigdata hadoop idea 运维 · 0 评论 · 0 浏览
【bigdata】2.Hadoop集群模式安装 上传Hadoop并解压 1.上传Hadoop2.6.5到master 2.解压 tar -zxvf hadoop-2.6.5.tar.gz -C /opt/mod 2023-03-16 · jditlee · bigdata hadoop 运维 · 0 评论 · 0 浏览
【bigdata】4.hive安装 有更新! hive的全部安装过程都是在master节点 安装hive 1.上传并解压 tar -zxvf apache-hive-1.2.2-bin.tar.gz -C / 2023-03-16 · jditlee · bigdata hive 运维 · 0 评论 · 0 浏览
【bigdata】1.hadoop集群搭建 安装虚拟机 打开VMware-》文件-》新建虚拟机: 默认典型,下一步 选择镜像文件位置,下一步 设置用户名密码,下一步(注意,有些镜像是在安装过程中设置,我用的 2023-03-16 · jditlee · bigdata hadoop 大数据集群 运维 · 0 评论 · 0 浏览