LICSLAN Blog

Thinking will not overcome fear but action will.I Still have lots more to work on!

big data real time compute

spark streaming sql

’’’ spark大数据实时计算平台搭建总结 <br> Author by Weilin Huang -------------------------------------------------------------- 本总结是经过学习Michael__PK老师的课程后而总结 搭建环境要求 由于环境中的依赖的中间件和软件较多 所以...

some improtant things need to do

do something

1.find a girl 2.buy a domain name and build a personal website 3.Review basics knowledge like java python 4.reading 20 books 5.with partens do some interesting things 6.still learning english...

Thread Basic knowledge

Basic knowledge of java`s Thread

下面将要总结一些线程的基础知识,说实话,很多自己也不是很清楚的,所以就想总结一下

springboot

springboot 异步提高并发处理能力

何为异步请求 在Servlet 3.0之前,Servlet采用Thread-Per-Request的方式处理请求,即每一次Http请求都由某一个线程从头到尾负责处理。如果一个请求需要进行IO操作,比如访问数据库、调用第三方服务接口等,那么其所对应的线程将同步地等待IO操作完成, 而IO操作是非常慢的,所以此时的线程并不能及时地释放回线程池以供后续使用,在并发量越来越大的情况下,这将带来严重...

java 锁

并发编程理解

并发编程的两个关键问题 并发编程需要处理两个关键问题:线程之间如何通信以及线程之间如何同步。 通信是指线程之间以何种机制来交换信息。线程之间的通信机制有两种:共享内存和消息传递。 共享内存模型中,线程之间共享程序的公共状态,通过读-写内存中的公共状态进行隐式通信。多条线程共享一片内存,发送者将消息写入内存,接收者从内存中读取消息,从而实现了消息的传递。 消息传递模型中,线程之间通过发...

tec kafka zookeeper storm/Jstorm

kafka zookeeper storm/Jstorm

今天元旦假期第一天 在家没有事情 就大致画了下图 关于jstorm kafka zk 集群的图 实验需求: springboot-kafka 生产数据发送kafka集群 springboot-realtime (jstorm应用)消费kafka集群数据并计算处理落地或是可视化展示都可以 三台虚拟机 192.168.108.128 192.168.108.130 192.168.1...

tec kafka zookeeper

Simply build a kafka_zookeeper cluster

下面主要介绍使用官网来搭建kafka zookeeper 集群 后面也会整合jstorm讲一个实时计算的demo 资料来源于官网比较好 所以我们也要坚持学习英语 我对英语还是蛮有兴趣的 加上工作中也会接触吧 多少都会去官网了解和学习 首先写个demo 后面再在此基础上不断扩展和性能优化 后面我会不断讲自己 学习的东西记录下来 好记性不如烂笔头 关注于大数据 机器学习 容器...

随笔

Multiple language learning

I live in wuhan china, a small village , i love my family even though it is the time of lacking resources and technology, i still have lots of happiness to share with my family and friends . i wir...

随笔

想写什么就写什么

推荐几部电影吧 我其实也不知道该写些什么,随便写写吧 《幸福终点站》 《追风筝的人》 《肖申克的救赎》 《傲慢与偏见》 《美丽心灵》 《遗愿清单》 《pay it forward》 《请叫我第一名》 《深夜加油站遇见苏格拉底》 《闻香识女人》。。。 有意思的电影太有意思了 我觉得自己看了 很是有收获吧 很感谢自己的父母吧 让我有一个自由的童年 虽说他们不怎么管我 他...

sample to use flink & spark

big data ml flink spark

flink Apache Flink is a framework and distributed processing engine for stateful computations over unbounded and bounded data streams. Flink has been designed to run in all common cluster environm...