失效链接处理 |
业务数据同步环境配置 PDF 下载
本站整理下载:
相关截图:
主要内容:
1. 环境准备
1.1 服务器规划
在大数据物流系统中,一般先在确立一套通用的、可扩展的计算平台,然后基于该平台统一软件栈,最后部署很多的业务系统,各系统又相互依赖。
服务器需要两台虚拟机,分别是:
服务器 主机名 操作系统/版本 IP 内存 硬盘
业务系统服务器 node1.itcast.cn Centos/7.5.1804 192.168.88.10 2GB 60G
大数据服务器 node2.itcast.cn Centos/7.5.1804 192.168.88.20 10GB 60G
1.2 安装CentOS-7.5.1804
在学习大数据的基础课程中已经带领大家安装linux虚拟机,因此在这里不再重复描述,只列出来大体步骤:
使用VMware安装Centos
设置IP地址
设置主机名
设置Hosts文件
关闭防火墙
设置集群ssh
安装docker环境
2. 物流管理系统服务器
2.1 虚拟机数据路径配置
创建文件夹路径
mkdir -p /export/softwares /export/services /export/datas /export/softwares/oracle/db/11gR2 /export/softwares/oracle/ogg /usr/java /opt/oracle /opt/oracle/etc /u01/app/ogg
路径名称 路径说明
/usr/java JDK安装目录
/export/softwares 二进制软件包存储目录
/export/softwares/oracle/db/11gR2 Oracle11gR2版本数据库的存储目录
/export/softwares/oracle/ogg OGG软件包的存储目录
/export/services 软件安装包存储目录
/export/datas 软件安装包的数据存储目录
/opt/oracle Oracle11gR2解压后的存储目录
/opt/oracle/etc 安装Oracle11gR2时所用的配置文件路径
/u01/app/ogg OGG的源端,与Oracle数据库在同一个节点
2.2 软件下载和存放位置
2.2.1 Oracle11gR2软件下载
Oracle11gR2的具体版本是11.2.0.1.0,适用于64位的Linux平台,包含两个软件包,名称分别为:
linux.x64_11gR2_database_1of2.zip
linux.x64_11gR2_database_2of2.zip
安装包所在目录:业务服务器所需软件\Oracle11gR2软件
2.2.2 OGG软件下载
需要使用OGG将Oracle数据库的数据实时的同步到kafka中,因此OGG的安装分为源端和目标端:
源端软件包名称为V34339-01.zip,具体版本为11.2.1.0.3,用于采集源端的Oracle数据库的数据
目标端软件包名称为V971332-01.zip,具体版本为12.3.1.1.1,用于接收目标端发送的数据并写入kafka
安装包所在目录:业务服务器所需软件\goldengate软件
2.2.3 大数据软件下载
因为OGG目标端会将数据发布到Kafka中,为了进行测试所以业务系统服务器安装ZooKeeper和Kafka
安装包所在目录:业务服务器所需软件\大数据相关软件
2.2.4 存储清单
将所有的软件包上传到位于/export/softwares目录下,主要包括Oracle11gR2、OGG的源端软件和OGG的目标端软件。
|