Giter VIP home page Giter VIP logo

Tips

由于操作失误(设置为私有项目),导致 hera 分布式任务调度系统500 star 丢失,欢迎大家重新 restar。谢谢各位

个人信息

个人博客 leecode 邮箱 微信

工作:从 2017 年开始至今一直从事大数据周边技术工作,2019 年初入职现公司,主要负责大数据离线计算平台、组件运维以及最新技术的研究,能够根据公司业务场景设计与之匹配的架构产品并落地。擅长离线调度、数据湖的近实时计算、数据集成、数据开发、日志采集、cdc、生产环境的 trouble-shotting。日常也会帮助数仓、数开、分析师解决离线任务的性能问题调优。

开源:在 github 上开源了能支撑数 10W 离线任务调度和开发系统,拥有累计近千的 star,开源群有 600+ 人。平常也积极参加数据湖项目 Apache Hudi 社区的建设,累计提交了十多个 pr,为 hudi + spark 方向上的近实时计算提供了可能。

分享:从大一开始,就一直在写博客,分享自己在学习工作中遇到的问题,获得了 csdn 的博客专家认证、大数据领域优质创作者称号。在 csdn 有累积 270W+ 的访问量,粉丝 2W 附近,累积原创文件数 643 篇。闲暇时间还维护了个人公众号,主要进行技术分享,目前已累积 300+ 粉丝。 总而言之是一个把工作当作爱好,乐于分享,乐于开源,喜欢钻研技术的 IT BOY。


扫码_搜索联合传播样式-标准色版

个人开源项目


github stats

Anurag's GitHub stats

苏承祥's Projects

apollo icon apollo

Apollo(阿波罗)是携程框架部门研发的分布式配置中心,能够集中化管理应用不同环境、不同集群的配置,配置修改后能够实时推送到应用端,并且具备规范的权限、流程治理等特性,适用于微服务配置管理场景。

arctic icon arctic

Arctic is a streaming lake warehouse service open sourced by NetEase

bootstrap-fileinput icon bootstrap-fileinput

An enhanced HTML 5 file input for Bootstrap 3.x with file preview, multiple selection, and more features.

chatgpt-next-web icon chatgpt-next-web

一键拥有你自己的 ChatGPT 网页服务。 One-Click to deploy your own ChatGPT web UI.

chatgpt-web icon chatgpt-web

用 Express 和 Vue3 搭建的 ChatGPT 演示网页

chatgpt_jcm icon chatgpt_jcm

OpenAI管理界面,聚合了OpenAI的所有接口进行界面操作(所有模型、图片、音频、微调、文件)等,支持Markdown格式(公式、图表,表格)等,GPT4接口官方只是在申请阶段,后期会一点一点的将OpenAI接口进行接入大家支持一下呗,微信群号在下方,右上角点个Star,我会一直更新下去,大家一起学习,一起加油,一起努力,一起成长。有招java开发的还望大佬内推一下感谢、感谢。

cloudshuffleservice icon cloudshuffleservice

Cloud Shuffle Service(CSS) is a general purpose remote shuffle solution for compute engines, including Spark/Flink/MapReduce.

cs-notes icon cs-notes

:books: 技术面试必备基础知识、Leetcode、计算机操作系统、计算机网络、系统设计、Java、Python、C++

danmu icon danmu

- 由于是实时弹幕,所以需要时时刻刻读取数据库内容,可是大量的ajax请求会影响服务器性能。于是就使用了goeasy第三方实时消息推送框架。 - 弹幕的动态化可以使用jquery的animate动画来实现 - 至于把弹幕消息发送到数据库就更简单了 ,随便一个请求就可以了 - 最重要的就是视频插件了,这这里我使用的是ckplayer网页视频播放器,觉得很简单实用。 - 还有一点就是显示数据库中的弹幕,由于goeasy只能接收实时弹幕,所以需要通过ckplayer来获得当前视频的播放时间。具体实现是,在视频播放之前使用Ajax请求读取数据中的所有弹幕并保存在一个集合里面(按弹幕时间排序),在视频播放时,轮询集合,当前视频播放的时间和弹幕时间对比即可。

datahub icon datahub

The Metadata Platform for the Modern Data Stack

datalink icon datalink

DataLink是一个满足各种异构数据源之间的实时增量同步,分布式、可扩展的数据交换平台。

delta icon delta

An open-source storage layer that brings scalable, ACID transactions to Apache Spark™ and big data workloads.

demo icon demo

spring boot+jwt+hibernate valid+mybatis plus+dubbo + 权限检验 的小demo

druid icon druid

:hotsprings: 为监控而生的数据库连接池!阿里云DRDS(https://www.aliyun.com/product/drds )、阿里巴巴TDDL 连接池powered by Druid

dubbo icon dubbo

Apache Dubbo is a high-performance, java based, open source RPC framework.

flink-recommandsystem-demo icon flink-recommandsystem-demo

基于Flink实现的商品实时推荐系统。flink统计商品热度,放入redis缓存,分析日志信息,将画像标签和实时记录放入Hbase。在用户发起推荐请求后,根据用户画像重排序热度榜,并结合协同过滤和标签两个推荐模块为新生成的榜单的每一个产品添加关联产品,最后返回新的用户列表。

flink-sql-lineage icon flink-sql-lineage

FlinkSQL字段血缘解决方案及源码。FlinkSQL field lineage solution and source code, The core idea is to parse SQL through Calcite to generate a RelNode tree of relational expressions. Then get the optimized logical paln through optimization stage, and finally call Calcite RelMetadataQuery to get the lineage relationship at the field level.

flinkstreamsql icon flinkstreamsql

基于开源的flink,对其实时sql进行扩展;主要实现了流与维表的join,支持原生flink SQL所有的语法

flinkx icon flinkx

基于flink的分布式数据同步工具

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.