Logo

  • 灰白世界

    发布于:2019-09-07 00:55:36

    8

    Hadoop 之 HDFS
    1HDFS概述1.1HDFS产出背景及定义随着数据量越来越大,在一个操作系统存不下所有的数据,那么就分配到大发红黑更多 的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。HDFS(HadoopDistributedFileSystem),它是一个文件系统,用于存储文件,通过目录树来定位文件;其次,它是分布式
    阅读 10000+ 评论 0 收藏 3 赞赏 1
  • youerning 专栏作者

    发布于:2019-07-27 12:32:05

    1

    python股票市场数据探索指北
    前言虽然同花顺之类的金融理财应用的数据足够好了,但还是有自己定制的冲动,数据自然不会不会比前者好很多,但是按照自己的想法来定制还是不错的。目标通过免费的数据接口获取数据,每日增量更新标的历史交易数据,然后通过Kibana做可视化及数据分析.其实自己通过echarts之类的可视化框架做可视化也是个不错的选择,不过前期成本太大。还有就是pandas+matplotlib已经足以应付大部分需求了,可是交
    阅读 8184 评论 0 收藏 0
  • 宜信大发红黑技术

    发布于:2019-07-08 19:07:44

    0

    大数据虚拟混算平台Moonbox配置指南
    源码快速部署一个大数据虚拟混算平台。
    阅读 4602 评论 1 收藏 0
  • Stitch_x

    发布于:2019-06-28 17:17:26

    5

    Maxwell读取MySQL binlog日志到Kafka
    maxwell生产项目实操
    阅读 2979 评论 0 收藏 2
  • Stitch_x

    发布于:2019-06-22 09:14:33

    5

    生产SparkStreaming数据零丢失最佳实践(含代码)
    生产上保证数据零丢失(断批还原)
    阅读 4355 评论 2 收藏 2
  • 司徒晓宇

    发布于:2018-12-12 16:48:39

    6

    深入浅出分布式文件存储系统之 Ceph 的实现
    一、何为分布式文件文件系统分布式文件系统(DistributedFileSystem)是指文件系统管理的物理存储资源不一定直接连接在大发红黑本地 节点上,而是通过计算机网络与节点相连,它的设计是基于客户端/大发红黑服务 器模式。如上图所示,应用大发红黑服务 器和文件大发红黑服务 器分别存在于网络当中,而这里的网络,可以是统一子网,也可以是不同子网。大发红黑服务 器对文件的存取,均在网络进行,这样就可以突破常用存储设备的容量限制。二、常用分布式文件
    阅读 4855 评论 10 收藏 16
  • 小杨Java

    发布于:2018-11-05 21:04:57

    1

    spring-boot-2.0.3之redis缓存实现,不是大发红黑你 想的那样哦
    小白问小明:“大发红黑你 前面有一个5米深的坑,里面没有水,如果大发红黑你 跳进去后该怎样出来了?”小明:“躺着出来呗,还能怎么出来?”小白:“为什么躺着出来?”小明:“5米深的坑,还没有水,跳下去不死就很幸运了,残是肯定会残的,不躺着出来,那能怎么出来?”小白:“假设没死也没残呢?”小明:“大发红黑你 当大发红黑我 超人了? 那也简单,把脑子里的水放出来就可以漂出来了。”小白:“大发红黑你 脑子里有这么多水吗?”小明:“大发红黑我 脑子里没那么多水大发红黑我 跳下去干嘛?” 
    阅读 4174 评论 0 收藏 1
  • Ox1管理员

    发布于:2018-11-02 10:31:28

    3

    深入浅出爬虫之道: Python、Golang与GraphQuery的对比
    本文将分别使用 `Python` ,`Golang` 以及 `GraphQuery` 来解析某网站的素材详情页面, 通过这个页面的解析过程,深入浅出的了解爬虫的解析思想与这些语言之间的异同。
    阅读 3709 评论 0 收藏 1
  • xpleaf

    发布于:2018-10-09 11:14:27

    5

    Spark on Yarn with Hive实战案例与常见问题解决
    Spark on Yarn with Hive实战案例与常见问题解决
    阅读 7565 评论 0 收藏 1
  • xpleaf

    发布于:2018-04-16 21:44:21

    69

    Flume+Kafka+Storm+Redis构建大数据实时处理系统:实时统计网站PV、UV+展示
    大数据实时计算完整项目案例,Flume+Kafka+Storm+Redis构建大数据实时处理系统:实时统计网站各省份PV、UV+动态展示。
    阅读 10000+ 评论 133 收藏 29
写文章