如何把redis的数据实时的同步到hdfs或者hbase上
）导入 ./hbase org.apache.hadoop.hbase.mapreduce.Driver import 表名 数据文件位置 其中数据文件位置可为本地文件目录，也可以分布式文件系统hdfs的路径。
：读取数据的时候先从redis里面查，若没有，再去数据库查，同时写到redis里面，并且要设置失效时间。
，插入时同步，比如先更新了oracle，再更新redis，这个要靠代码逻辑来做。谁先谁后得看设计了。
用distcp在hdfs和S3之间数据传输
1、distcp一般用于在两个HDFS集群中传输数据。
2、先把文件ftp到本地，然后用命令hdfsdfs –put [local_path] [hdfs_path]优点：文件在本地可以进行本地化的一系列操作后，再放回hdfs中 缺点：文件传输经过两层，并且从源服务器到本地提取是单机串行，比较消耗时间。
3、非也，s3是s3，hdfs是hdfs。你可以使用工具将s3上的数据cp到hdfs上面 HDFS。它的优势是快；劣势是它是暂时性存储，会在集群终止时收回。它最适合用于缓存由中间作业流步骤产生的结果。
4、将EC和HDFS集成可以提高存储效率，然而同样提供传统的基于副本机制的HDFS持久化部署，例如：3副本的文件有6个块，将会消耗 6*3 = 18个块的磁盘空间，但是使用EC(6个数据，3个校验)部署，他将只消耗9个块的磁盘空间。
Redis持久化
在自动驾驶项目中，Redis通常用作高速缓存和持久化存储的解决方案。Redis可以将数据存储在内存中以提高读写速度，同时还提供了不同的持久化选项以确保数据持久性。
redis提供两种方式进行持久化，一种是RDB持久化（原理是将Reids在内存中的数据库记录定时dump到磁盘上的RDB持久化），另外一种是AOF（append only file）持久化（原理是将Reids的操作日志以追加的方式写入文件）。
Redis 提供了多种不同级别的持久化方式：RDB 持久化可以在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot)。
hdfs数据到redis的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于redis hdfs、hdfs数据到redis的信息别忘了在本站进行查找喔。