关闭 x
IT技术网
    技 采 号
    ITJS.cn - 技术改变世界
    • 实用工具
    • 菜鸟教程
    IT采购网 中国存储网 科技号 CIO智库

    IT技术网

    IT采购网
    • 首页
    • 行业资讯
    • 系统运维
      • 操作系统
        • Windows
        • Linux
        • Mac OS
      • 数据库
        • MySQL
        • Oracle
        • SQL Server
      • 网站建设
    • 人工智能
    • 半导体芯片
    • 笔记本电脑
    • 智能手机
    • 智能汽车
    • 编程语言
    IT技术网 - ITJS.CN
    首页 » JAVA »使用RxJava从多个数据源获取数据

    使用RxJava从多个数据源获取数据

    2015-12-25 00:00:00 出处:hollischuang
    分享

    试想,需要一些动态数据的时候,只要每次都请求网络就可以了。但是,更有效率的做法是,把联网得到的数据,缓存到磁盘或内存。

    具体的说,计划如下:

    偶尔的联网操作,只为获取最新数据。 尽可能快的读取到数据(通过获取之前缓存的网络数据)。

    我将通过使用 RxJava ,来实现这个计划。

    使用RxJava从多个数据源获取数据

    基本模式

    为每一个数据源(网络,磁盘和内存)创建Observable,使用concat()和first()操作符,构造一个简单的实现方式。

    concat() 操作符持有多个Observable对象,并将它们按顺序串联成队列。 first() 操作符只从串联队列中取出并发送第一个事件。因此,如果使用concat().first(),无论多少个数据源,只有第一个事件会被检索出并发送。

    // Our sources (left as an exercise for the reader)
    Observable memory = ...;  
    Observable disk = ...;  
    Observable network = ...;
    
    // Retrieve the first source with data
    Observable source = Observable  
      .concat(memory, disk, network)
      .first();
    // Our sources (left as an exercise for the reader)
    Observablememory = ...;??
    Observabledisk = ...;??
    Observablenetwork = ...;
    
    // Retrieve the first source with data
    Observablesource = Observable??
    ??.concat(memory, disk, network)
    ??.first();

    这种模式的关键在于concat()操作符只有需要数据的时候才会订阅所有的Observable数据源。由于first()操作符会较早的停止检索队列,所以,如果存在缓存数据,就没有必要访问较慢的数据源。 也就是说,如果memory返回结果,就不必担心disk和network会被访问。相反地,如果内存和磁盘都没有数据,才执行网络请求。

    注意concat()所持有的Observable数据源,是按照一个接一个的顺序被检索的。

    持久化数据

    很明显,下一步是缓存数据。如果不把网络请求后的结果缓存到磁盘,磁盘访问后的结果缓存到内存,那么这根本不就不叫缓存。接下来要写的代码就是,网络数据的持久化操作。

    我的解决方案是,让每个数据源在发送完事件后,都保存或者缓存数据。

    Observable networkWithSave = network.doOnNext(new Action1() {
     @Override public void call(Data data) {
     saveToDisk(data);
     cacheInMemory(data);
     }
    });
    
     Observable diskWithCache = disk.doOnNext(new Action1() {
     @Override public void call(Data data) {
      cacheInMemory(data);
     }
    });
     ObservablenetworkWithSave = network.doOnNext(new Action1() {
     @Overridepublic void call(Datadata) {
     saveToDisk(data);
     cacheInMemory(data);
     }
    });
    
     ObservablediskWithCache = disk.doOnNext(new Action1() {
     @Overridepublic void call(Datadata) {
    ??cacheInMemory(data);
     }
    });

    现在,如果你使用networkWithSave和diskWithCache,数据将会在加载后自动保存。

    (这個策略的另一个优势在于networkWithSave和diskWithCache可以在任何地方被使用,不局限于我们的多数据模式下。)

    陈旧的数据

    不幸的,现在我们保存数据的那些代码,执行的有点过头了。无论数据是否过时,它总是返回相同的数据。我们希望做到,偶尔连接服务器抓取最新的数据。

    解决方法在于,使用first()操作符进行过滤。就是设置它拒绝接收毫无价值的数据。

    Observable source = Observable
        .concat(memory, diskWithCache, networkWithSave)
        .first(new Func1() {
          @Override public Boolean call(Data data) {
            return data.isUpToDate();
          }
        });
    Observablesource = Observable
    ????.concat(memory, diskWithCache, networkWithSave)
    ????.first(new Func1() {
    ??????@Overridepublic Boolean call(Datadata) {
    ????????return data.isUpToDate();
    ??????}
    ????});

    现在,我们只需要发送被断定为最新数据的事件就OK了。因此,只要有一个数据源的数据过期,就继续检索下一个数据源,直到找到最新数据为止。

    first()和takeFirst()操作符的比较

    对于这种设计模式,first()和takeFirst()操作符可以二选其一。

    两种调用方式的区别在于,如果所有数据源的数据均过期,没有任何的有效数据作为事件发送,first()会抛出NoSuchElementException异常(译者注:first()操作符均return false),而takeFirst()操作符则直接调用完成操作,不会抛出任何异常。

    使用哪个操作符,完全取决于是否需要明确处理缺失的数据。

    代码示例

    可以从这里检出,以上所有代码的实现示例: https://github.com/dlew/rxjava-multiple-sources-sample 。

    如果需要一个真实示例,检出 Gfycat App ,它在获取数据的时候使用了这种模式。项目并没有使用以上展示的所有功能(因为不需要),但是,示范了concat().first()的基本用法。

    上一篇返回首页 下一篇

    声明: 此文观点不代表本站立场;转载务必保留本文链接;版权疑问请联系我们。

    别人在看

    电脑屏幕不小心竖起来了?别慌,快捷键搞定

    Destoon 模板存放规则及语法参考

    Destoon系统常量与变量

    Destoon系统目录文件结构说明

    Destoon 系统安装指南

    Destoon会员公司主页模板风格添加方法

    Destoon 二次开发入门

    Microsoft 将于 2026 年 10 月终止对 Windows 11 SE 的支持

    Windows 11 存储感知如何设置?了解Windows 11 存储感知开启的好处

    Windows 11 24H2 更新灾难:系统升级了,SSD固态盘不见了...

    IT头条

    Synology 更新 ActiveProtect Manager 1.1 以增强企业网络弹性和合规性

    00:43

    新的 Rubrik Agent Cloud 加速了可信的企业 AI 代理部署

    00:34

    宇树科技 G1人形机器人,拉动一辆重达1.4吨的汽车

    00:21

    Cloudera 调查发现,96% 的企业已将 AI 集成到核心业务流程中,这表明 AI 已从竞争优势转变为强制性实践

    02:05

    投资者反对马斯克 1 万亿美元薪酬方案,要求重组特斯拉董事会

    01:18

    技术热点

    大型网站的 HTTPS 实践(三):基于协议和配置的优化

    ubuntu下右键菜单添加新建word、excel文档等快捷方式

    Sublime Text 简明教程

    用户定义SQL Server函数的描述

    怎么在windows 7开始菜单中添加下载选项?

    SQL Server 2016将有哪些功能改进?

      友情链接:
    • IT采购网
    • 科技号
    • 中国存储网
    • 存储网
    • 半导体联盟
    • 医疗软件网
    • 软件中国
    • ITbrand
    • 采购中国
    • CIO智库
    • 考研题库
    • 法务网
    • AI工具网
    • 电子芯片网
    • 安全库
    • 隐私保护
    • 版权申明
    • 联系我们
    IT技术网 版权所有 © 2020-2025,京ICP备14047533号-20,Power by OK设计网

    在上方输入关键词后,回车键 开始搜索。Esc键 取消该搜索窗口。