konglingjuanyi Goto Github PK

cleverframe

cleverframe

cloud-images

分布式图像处理框架。

clover

clover 1、开发server和client端 定时向zk集群发送心跳数据包，利用Java自带的timer程序实现该功能 2、开发整天的monitor程序，用来定时向zk中获取server和client端的心跳数据信息，如果超过指定时间没有收到最新的数据包，那么任务server端或者client端死掉了，此时要删除该server或client端节点，发邮件通知相关人员，记录异常日志到系统日志文件和MongoDB中 3、client端接受创建job请求，将job信息创建到client服务端，并根据job时间规则运行，并将任务信息存储到MongoDB中 4、当client端job运行时候，封装执行任务信息,发送到指定客户端机器，更新client端job执行时间和状态，如不在需要继续运行，那删除job并从MongoDB中删除相关任务信息 5、client端接受删除job请求，client服务端，立即执行删除job并将任务信息从MongoDB中删除 6、client端接受更新job请求，client服务端，立即执行删除job并创建新job,并将任务信息从MongoDB中删除,然后再存储新job信息 7、第一版 使用Netty做消息通讯中间件，存储消息放入Redis中，服务器开启Http请求，客户端 通过 发送Http请求到服务器来处理请求，由于任务太多 redis处理能力不行，放弃该方案 第二版 使用Netty RPC框架，自己开发一个Server端和Client，各种启动指定端口，由于 必须要求Server端和Client必须启动才能进行消息发送，所以感觉非常不灵活，因为放弃该方案 第三版 使用架构组推荐的rocketmq,通过使用发现，很严重问题，消息会重复发送，经常会收到重复的消息，在测试的时候发现，经常发生消息异常和报错，跟架构组刘婷峰沟通说，可能是机器性能不行了，他也不知道具体原因，感觉非常不靠谱，果断放弃 第四版 使用 zeromq,通过在网上查资料，对比各种mq后，发现zeromq是最轻量级，出现消息是最快的，经过测试完全能满足业务，果断使用 8、由于项目中使用zk,自己开发zk使用工具类，定制server端增删改查zk消息以及定制client端增删改查zk消息,功能测试zk,目前打算增加zk watch功能 9、开发server和client端 定时向zk集群发送心跳数据包，利用Java自带的timer程序实现该功能 10、开发整天的monitor程序，用来定时向zk中获取server和client端的心跳数据信息，如果超过指定时间没有收到最新的数据包，那么任务server端或者client端死掉了，此时要删除该server或client端节点，发邮件通知相关人员，记录异常日志到系统日志文件和MongoDB中 11、开发console控制台管理，可以查看任务动态运行状态和次数信息 12、zk管理页面，查看server和client端节点信息，更新和删除节点信息 13、job管理页面，查看job详细信息 14、联系人管理页面，增删改查联系人信息 15、log日志管理页面，根据系统报错记录的日志信息，在页面中可以详细查看

cniao5-news

菜鸟新闻项目课程源码

cniao5-shop

菜鸟窝企业项目课程《菜鸟商城》的源码

code-basic

com.mmj.platform

www.zhiyouba.com 社交化导购平台

com.ms.commons

提供了功能比较全面的框架及其依赖包,是web工程必备的常用包

common-utils

useful, powerful, widely Java Utils Library

company_open

a personal forum

config-center

基于zookeeper实现的配置管理中心，并提供了整合spring的API

cosmos-message

cosmos-message，我的工具类，封装了一系列开源项目，更好方便的进行Java Web开发

crm

depponCRM

ctempsync

临时缓存

dashcam

**日志系统

datasync

Swing and database sync

datax

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，实现包括 MySQL、Oracle、HDFS、Hive、OceanBase、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。

db-meta

database meta crawl tool

dbexchange

基于ActiveMQ的数据交换中间件

deeplearning4j

Deep Learning for Java, Scala & Clojure on Hadoop & Spark With GPUs - From Skymind

dexcoder-assistant

dexcoder 快速开发工具包

diamond

来自淘宝diamond：http://code.taobao.org/p/diamond/src/

disconf

Distributed Configuration Management Platform(分布式配置管理平台)

distributed-flexible-transaction

采用Best effort 1pc + 回滚补偿机制实现的一个distributed transaction (分布式事务框架).基于dubbo rpc服务上实现。

distributed-kit

Distributed lock implementation using Redis and Zookeeper.基于redis和zookeeper分布式工具集-包括:分布式锁实现,分布式速率限制器,分布式序列等

distributedlog

A high performance replicated log service.

dockerfile

一些常用的 docker 镜像

drill

Apache Drill is an open source, low latency SQL query engine for Hadoop and NoSQL.

drp

DRP系统主要由库存管理、质量控制、运输管理、采购管理、计划/调度管理、订单管理、数据库接口与数据传输模块组成。

dsp

基于hbase+spark的精准广告平台