技术分享
Technology SharingHIVE数据备份与导入
一、备份到表1、启动hive;$ ./hive2、进入须要操作的hive数据库$ use nginx_log;3、备份到备份表中，执行以下操作，其中nginx_log_info_20180724 为备份表$ create table nginx_log_info_20180724 as select * from nginx_log_info;二、备份到磁盘文件1、..._hive表备份
2020-08-10
阅读更多
关于数据库的冷备份，热备份
对于oracle数据库只有物理备份和逻辑备份 物理备份：是将实际组成数据库的操作系统文件从一处拷贝到另一处的备份过程，通常是从磁盘到磁带。 逻辑备份：是利用SQL语言从数据库中抽取数据并存于二进制文件的过程。 第一类为物理备份，该方法实现数据库的完整恢复，但数据_常用的数据库备份的方法有冷备份 热备份
2020-08-10
阅读更多冷备份与热备份的区别
热备份针对归档模式的数据库，在数据库仍旧处于工作状态时进行备份。热备份的优点在于当备份时，数据库仍旧可以被使用并且可以将数据库恢复到任意一个时间点。冷备份指在数据库关闭后，进行备份，适用于所有模式的数据库。冷备份的优点在于它的备份和恢复操作相当简单，并且由于冷备份的数据库可以工作在非归档模式下,数据库性能会比归档模式稍好。（因为不必将archive log写入硬盘）..._热备份和冷备份
2020-08-10
阅读更多mysql实时增量备份
启用binlog日志实现对数据的增量备份：日志存储位置： /var/lib/mysql/日志名称：主机名-bin.000001 或mysqld-bin.000001binlog日志概述：二进制日志，记录所有更改数据的操作；默认超过500M自动生成新的日志；修改主配置文件启用binlog日志vim /etc/my.cnf[mysqld]log-bin (或指定日志名log-b..._mysql增量只备份新生成的和没备份过的binlog日志且正在使用的不备份
2020-08-10
阅读更多通过rsync+inotify实现服务器之间数据的实时备份
在上一篇博客中，我们只使用了rsync来实现数据的备份，但却不能做到实时，因为守护进程触发和执行有一段的时间间隔，如果对于数据量大的网站来说，一旦崩溃，就很难做到数据的完整性。在本篇文章中我们使用rsync+inotify的方式来解决这一问题。 inotify是一种强大的、细粒度的、异步的文件系统时间监控机制，Linux内核从2.6.13版本开始就加入了对它的支持，通过它可以监控文件系统中添加、删_异步服务器实时备份
2020-08-10
阅读更多postgresql热备份与恢复
一 热备份的原理是“基础备份文件”+“归档日志”进行restore。1 配置postgresql.conf文件wal_level = hot_standbyarchive_mode = onarchive_command = test ! -f /usr/local/backups/%f && cp %p /usr/local/backups/%f_postgresql 热备份
2020-08-10
阅读更多centos 配置 lsyncd文件实时备份
之前做了一个nfs服务器之间的服务器文件共享，文件服务器宕机其他服务器也访问不到了，毕竟共享和备份概念是不一样的。害怕文件丢失，赶紧做一个lsyncd文件备份，正好多余一台服务器，记录一下。服务器两台 192.168.110.219（源服务器）；192.168.110.220（备份服务器）1，ssh免密登陆，使用lsyncd前提必须能让219免密登陆到220，不然后边启动服务会报权限错误。在..._centos lsyncd
2020-08-10
阅读更多MySQL主从实时备份
主A从B电脑ipA:192.168.1.111B:192.168.1.1122 给主A从B电脑创建相同数据库3 授权（主从都需要）GRANT ALL PRIVILEGES ON *.* TO root@% IDENTIFIED BY root WITH GRANT OPTION;FLUSH PRIVILEGES;grant fi_mysql如何做实时的备份,也就是主从??
2020-08-10
阅读更多HDFS——数据备份与放置策略(转)
HDFS——数据备份与放置策略(转)对于分布式文件系统来说，为了保证数据的高可用性和系统容错能力，往往会把同一数据块在多个节点上进行备份，那么如何分配这些复制数据的位置，不同的文件系统会有不同的策略。一、业界分析在介绍HDFS之前，先简单了解一些其它文件系统的放置策略：1. Lustre——一致性哈希环对于不同的数据备份，需要放到不同的节点上面，一种直观_hdfs数据备份
2020-08-10
阅读更多
