Stars
System design interview for IT companies
Repo for counting stars and contributing. Press F to pay respect to glorious developers.
Learning the Netty by <<Netty in action>> , there are some demoes
To the programmer's open source and free books collection 给程序员的开源、免费书籍收集,图书集合。
RDF数据的可视化展示:可展示RDF之间的关系与联系、利用SPARQL语句查询不同的数据集、针对于RDF的标签化和TripleBit与其他图数据库性能对比
JStorm源码学习:主要包含Storm集群启动、Nimbus启动、Supervisor启动、Executor创建和启动
Spark源码分析,主要包含SparkContext源码、Executor进程启动、Stage划分、Task执行和Spark2.0的新特性
the project (bfl) can solve the NP problem whether two vertexs can be reached,in the graph
基于Storm的popularity_awaredifferentiatedscheduling不同调度器,由于Storm keygrouping分组策略会造成集群内部极度负载不均衡性.所以popularity_awaredifferentiatedscheduling调度器会将出现频率很高的热词进行重新随机分发给不同机器进行处理,减少集群内部负载不均衡性,极大的提高系统性能。
Storm fieldsGroupingBalancing 基于Storm的fieldsGrouping负载均衡项目 内置PredictHotKeyUtil
论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)
为了解决当前面向大数据系统间数据源传输没有充分发挥分布式系统的优点,无法高效并行快速读取数据的问题,CSFH提供面向Kafka、Storm、Hbase并行化的数据传输方式,提升面向大数据系统的整体吞吐能力。相比于传统的数据传输方式,CSFH可以达到节点服务器可扩展的向大数据系统并行传输数据。
ActiveMQ是由Apache出品的,一款最流行的,能力强劲的开源消息总线。它是一个消息中间件,本项目是一个ActiveMQ的学习项目。包括ActiveMQ的API的使用以及生产者消费者模型 ActiveMQ的负载均衡 Publish-Subscribe消息订阅发布模型 点对点通信模型
MGTag是一个解决图可达性NP问题(主要是图内可达性问题)的程序,采用层次划分、图内Interval和上下索引等思想解决NP难题
Big data performance test analysis platform (including WebUI display)。 BigDataAnalysisWeb Analyze storm, spark, and flink throughput changes in the form of charts.
Hadoop Distributed File System (HDFS) has slow serial read speed of the log stream file, it cannot meet the requirements of the stream processing system and can not fully exert the processing capab…
Ares, a high performance and fault tolerant DSPS. Ares considers both system performance and fault tolerant capability during task allocation. In the design of Ares, we formalize the problem of Fau…