博客

博客
2021-08-16	hbase安装
2021-08-16	k8s安装	Server
2020-08-16	图数据库对比
2020-08-16	hbase
2020-03-16	linux硬盘格式化与挂载
2020-03-16	hadoop安装
2019-08-16	spark
2019-08-16	kafka
2019-08-16	docker基本操作	Server
2018-08-16	hexo	Server
2018-08-16	nginx
2018-05-16	loguru elasticsearch kibana 日志处理	Server

hbase安装

2021-08-16 207 字 1 分钟

2.1 HBase 安装部署 2.1.1 Zookeeper 正常部署首先保证 Zookeeper 集群的正常部署，并启动之: [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start [andrew@hadoop101 zookeeper-3.4.10]$ …

k8s安装

2021-08-16 7422 字 15 分钟

Server

k8s-安装 Kubernetes是什么？ Kubernetes是容器集群管理系统，是一个开源的平台，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。通过Kubernetes你可以：快速部署应用快速扩展应用无缝对接新的应用功能节省资源，优化硬件资源的使用 Kubernetes 特点可移植: 支持公有云 …

图数据库对比

2020-08-16 2120 字 5 分钟

<%= wordcount(post.content) %> <%= min2read(post.content) %> <%= totalcount(site) %> 图数据库的对比图数据库是否分布式开发语言支持的节点数量原生图存储 multi_model 查询语言支持开发的语言开发公司落地的公司是 …

hbase

2020-08-16 4121 字 9 分钟

HBase简介什么是HBase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。HBASE是 …

linux硬盘格式化与挂载

2020-03-16 192 字 1 分钟

yum install -y gdisk fdisk /dev/sdb m g w mkfs -t ext4 /dev/sdb mkdir /data mounr /dev/sdb /data base) [root@gpu004:7 /]# fdisk /dev/sdb WARNING: fdisk GPT …

hadoop安装

2020-03-16 510 字 2 分钟

Hadoop 下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ cd /opt/software/ 解压安装文件到/opt/module 下面 [andrew@hadoop101 software]$ tar -zxvf …

spark

2019-08-16 1433 字 3 分钟

Spark简介一、简介二、特点三、集群架构四、核心组件 3.1 Spark SQL 3.2 Spark Streaming 3.3 MLlib 3.4 Graphx 一、简介 Spark 于 2009 年诞生于加州大学伯克利分校 …

kafka

2019-08-16 1175 字 3 分钟

Kafka简介一、Kafka简介二、Kafka核心概念 2.1 Messages And Batches 2.2 Topics And Partitions 2.3 Producers And Consumers 2.4 Brokers And Clusters 一、简介 …

docker基本操作

2019-08-16 0 字 1 分钟

Server

hexo

2018-08-16 3032 字 7 分钟

Server

1、安装node.js https://nodejs.org/zh-cn/ 安装：https://blog.csdn.net/qq_40712862/article/details/120231621 node -v判断是否安装成功下载慢解决方法: 更换淘宝镜像下载源：npm config set registry …

nginx

2018-08-16 0 字 1 分钟

loguru elasticsearch kibana 日志处理

2018-05-16 4014 字 9 分钟

Server

日志的重要性常见日志记录方式一、print() 二、自写模板三、Logging 更优雅的解决方案：Loguru 安装开箱即用 add() / remove() 完整参数 rotation 日志文件分隔 retention 日志保留时间 compression 日志压缩格式字符串格式化异常追溯日志的重要性 …

hbase安装
2021-08-16 发布于博客 207 字 1 分钟
2.1 HBase 安装部署 2.1.1 Zookeeper 正常部署首先保证 Zookeeper 集群的正常部署，并启动之: [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start 2.1.2 …
2.1 HBase 安装部署 2.1.1 Zookeeper 正常部署首先保证 Zookeeper 集群的正常部署，并启动之: [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start [andrew@hadoop101 zookeeper-3.4.10]$ bin/zkServer.sh start 2.1.2 …
k8s安装
2021-08-16 发布于博客 7422 字 15 分钟
Server
k8s-安装 Kubernetes是什么？ Kubernetes是容器集群管理系统，是一个开源的平台，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。通过Kubernetes你可以：快速部署应用快速扩展应用无缝对接新的应用功能节省资源，优化硬件资源的使用 Kubernetes 特点可移植: 支持公有云，私有云，混合云，多重云（multi-cloud）可扩展: 模块化, 插件化, 可挂载, 可组合自动化: 自动部署，自动重启，自动复制，自动伸缩/扩展使用Kubernetes …
k8s-安装 Kubernetes是什么？ Kubernetes是容器集群管理系统，是一个开源的平台，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。通过Kubernetes你可以：快速部署应用快速扩展应用无缝对接新的应用功能节省资源，优化硬件资源的使用 Kubernetes 特点可移植: 支持公有云，私有云，混合云，多重云（multi-cloud）可扩展: 模块化, 插件化, 可挂载, 可组合自动化: 自动部署，自动重启，自动复制，自动伸缩/扩展使用Kubernetes …
图数据库对比
2020-08-16 发布于博客 2120 字 5 分钟
<%= wordcount(post.content) %> <%= min2read(post.content) %> <%= totalcount(site) %> 图数据库的对比图数据库是否分布式开发语言支持的节点数量原生图存储 multi_model 查询语言支持开发的语言开发公司落地的公司是否开源使用场景开源地址文档地址 neo4j 社区单机版/商业是伪分布式 java 百亿是否 cypher java/python neo4j 使用非常广泛否 OLAP …
<%= wordcount(post.content) %> <%= min2read(post.content) %> <%= totalcount(site) %> 图数据库的对比图数据库是否分布式开发语言支持的节点数量原生图存储 multi_model 查询语言支持开发的语言开发公司落地的公司是否开源使用场景开源地址文档地址 neo4j 社区单机版/商业是伪分布式 java 百亿是否 cypher java/python neo4j 使用非常广泛否 OLAP …
hbase
2020-08-16 发布于博客 4121 字 9 分钟
HBase简介什么是HBase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。HBASE是 Google Bigtable的开源实现，但是也有很多不同之处。比如：Google Bigtable利用GFS作为其文件存储系统，HBASE利用Hadoop HDFS作为其文件存储系统 …
HBase简介什么是HBase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。HBASE是 Google Bigtable的开源实现，但是也有很多不同之处。比如：Google Bigtable利用GFS作为其文件存储系统，HBASE利用Hadoop HDFS作为其文件存储系统 …
linux硬盘格式化与挂载
2020-03-16 发布于博客 192 字 1 分钟
yum install -y gdisk fdisk /dev/sdb m g w mkfs -t ext4 /dev/sdb mkdir /data mounr /dev/sdb /data base) [root@gpu004:7 /]# fdisk /dev/sdb WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion. …
yum install -y gdisk fdisk /dev/sdb m g w mkfs -t ext4 /dev/sdb mkdir /data mounr /dev/sdb /data base) [root@gpu004:7 /]# fdisk /dev/sdb WARNING: fdisk GPT support is currently new, and therefore in an experimental phase. Use at your own discretion. …
hadoop安装
2020-03-16 发布于博客 510 字 2 分钟
Hadoop 下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ cd /opt/software/ 解压安装文件到/opt/module 下面 [andrew@hadoop101 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/ 将 Hadoop 添加到环境变量 vim ~/.bashrc #HADOOP_HOME export …
Hadoop 下载地址:https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ cd /opt/software/ 解压安装文件到/opt/module 下面 [andrew@hadoop101 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/ 将 Hadoop 添加到环境变量 vim ~/.bashrc #HADOOP_HOME export …
spark
2019-08-16 发布于博客 1433 字 3 分钟
Spark简介一、简介二、特点三、集群架构四、核心组件 3.1 Spark SQL 3.2 Spark Streaming 3.3 MLlib 3.4 Graphx 一、简介 Spark 于 2009 年诞生于加州大学伯克利分校 AMPLab，2013 年被捐赠给 Apache 软件基金会，2014 年 2 月成为 Apache 的顶级项目。相对于 MapReduce 的批处理计算，Spark 可以带来上百倍的性能提升，因此 …
Spark简介一、简介二、特点三、集群架构四、核心组件 3.1 Spark SQL 3.2 Spark Streaming 3.3 MLlib 3.4 Graphx 一、简介 Spark 于 2009 年诞生于加州大学伯克利分校 AMPLab，2013 年被捐赠给 Apache 软件基金会，2014 年 2 月成为 Apache 的顶级项目。相对于 MapReduce 的批处理计算，Spark 可以带来上百倍的性能提升，因此 …
kafka
2019-08-16 发布于博客 1175 字 3 分钟
Kafka简介一、Kafka简介二、Kafka核心概念 2.1 Messages And Batches 2.2 Topics And Partitions 2.3 Producers And Consumers 2.4 Brokers And Clusters 一、简介 ApacheKafka 是一个分布式的流处理平台。它具有以下特点：支持消息的发布和订阅，类似于 RabbtMQ、ActiveMQ 等消息队列；支持数据实时处理；能保证消息的可靠性投递； …
Kafka简介一、Kafka简介二、Kafka核心概念 2.1 Messages And Batches 2.2 Topics And Partitions 2.3 Producers And Consumers 2.4 Brokers And Clusters 一、简介 ApacheKafka 是一个分布式的流处理平台。它具有以下特点：支持消息的发布和订阅，类似于 RabbtMQ、ActiveMQ 等消息队列；支持数据实时处理；能保证消息的可靠性投递； …
docker基本操作
2019-08-16 发布于博客 0 字 1 分钟
Server
hexo
2018-08-16 发布于博客 3032 字 7 分钟
Server
1、安装node.js https://nodejs.org/zh-cn/ 安装：https://blog.csdn.net/qq_40712862/article/details/120231621 node -v判断是否安装成功下载慢解决方法: 更换淘宝镜像下载源：npm config set registry https://registry.npm.taobao.org 或国内的npm镜像命令：npm install -g cnpm …
1、安装node.js https://nodejs.org/zh-cn/ 安装：https://blog.csdn.net/qq_40712862/article/details/120231621 node -v判断是否安装成功下载慢解决方法: 更换淘宝镜像下载源：npm config set registry https://registry.npm.taobao.org 或国内的npm镜像命令：npm install -g cnpm …
nginx
2018-08-16 发布于博客 0 字 1 分钟
loguru elasticsearch kibana 日志处理
2018-05-16 发布于博客 4014 字 9 分钟
Server
日志的重要性常见日志记录方式一、print() 二、自写模板三、Logging 更优雅的解决方案：Loguru 安装开箱即用 add() / remove() 完整参数 rotation 日志文件分隔 retention 日志保留时间 compression 日志压缩格式字符串格式化异常追溯日志的重要性日志的作用非常重要，日志可以记录用户的操作、程序的异常，还可以为数据分析提供依据，日志的存在意义就是为了能够在程序在运行过程中记录错误，方便维护和调试，能够快速定位出错的地方，减少 …
日志的重要性常见日志记录方式一、print() 二、自写模板三、Logging 更优雅的解决方案：Loguru 安装开箱即用 add() / remove() 完整参数 rotation 日志文件分隔 retention 日志保留时间 compression 日志压缩格式字符串格式化异常追溯日志的重要性日志的作用非常重要，日志可以记录用户的操作、程序的异常，还可以为数据分析提供依据，日志的存在意义就是为了能够在程序在运行过程中记录错误，方便维护和调试，能够快速定位出错的地方，减少 …