文档库 最新最全的文档下载
当前位置:文档库 › Java并发--任务执行

Java并发--任务执行

首先来看一下,任务的定义:

所谓的任务,就是抽象,离散的工作单位。你可以简单理解为代码级别的 (Runnable接口)大多数并发应用程序都是围绕着任务进行管理的.

我们来看一小段代码:

Java代码

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

/**

* 顺序化的Web Server.

* @author root

* OS:Ubuntu 9.04

* Date:2010-6-19

*/

public class SingleThreadWebServer {

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(8080);

while(true){

Socket socket=server.accept();

handleRequest(socket);

}

}

private static void handleRequest(Socket socket) {

/**

* 做相关的处理……,比如请求运算与I/O

* 这将会导致出现阻塞,会延迟当前请求的处理,

* 而且会产生非常严重的后果,比如:假死。

* 那样会极度考验用户的耐心,知道他忍无可忍的关闭浏览器。

* 同时,单线程在等待IO操作时,CPU处于闲置状态,这样也降低了资源的利用率

*

* 这样的服务器,缺乏良好的吞吐量和快速的响应性。

*/

}

}

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

/**

* 顺序化的Web Server.

* @author root

* OS:Ubuntu 9.04

* Date:2010-6-19

*/

public class SingleThreadWebServer {

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(8080);

while(true){

Socket socket=server.accept();

handleRequest(socket);

}

}

private static void handleRequest(Socket socket) {

/**

* 做相关的处理……,比如请求运算与I/O

* 这将会导致出现阻塞,会延迟当前请求的处理,

* 而且会产生非常严重的后果,比如:假死。

* 那样会极度考验用户的耐心,知道他忍无可忍的关闭浏览器。

* 同时,单线程在等待IO操作时,CPU处于闲置状态,这样也降低了资源的利用率

*

* 这样的服务器,缺乏良好的吞吐量和快速的响应性。

*/

}

}

上面的代码是顺序地执行任务,主线程在不断接受连接与处理请求之间交替运行。

一个Web请求会做相关的处理……,比如请求运算与I/O

这将会导致出现阻塞,会延迟当前请求的处理,

而且会产生非常严重的后果,比如:假死。

那样会极度考验用户的耐心,知道他忍无可忍的关闭浏览器。

同时,单线程在等待IO操作时,CPU处于闲置状态,这样也降低了资源的利用率

这样的服务器,缺乏良好的吞吐量和快速的响应性。

所以,基于上面代码的基础上,我们需要给他作些小许的改进:

Java代码

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

public class ThreadPerTaskWebServer {

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(80);

while(true){

final Socket socket=server.accept();

new Thread(new Runnable(){

public void run() {

handleRequest(socket);

}

}).start();

}

}

protected static void handleRequest(Socket socket) {

/**

*相比较而言,这样的处理方式有良好的改进:

* 1.执行人物的负载已经脱离主线程,让主循环能更加迅速的重新开始等待下一个连接。提高了响应性

* 2.并发处理任务,多个请求可以同时得到处理,提高了吞吐性

* 3.任务处理代码必须要是线程安全的。防止出现并发性数据共享问题。

*

* 这个程序可能在开发阶段运行良好,一旦部署,就可能出现致命的错误,

* 我们接着来分析:

*/

}

}

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

public class ThreadPerTaskWebServer {

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(80);

while(true){

final Socket socket=server.accept();

new Thread(new Runnable(){

public void run() {

handleRequest(socket);

}

}).start();

}

}

protected static void handleRequest(Socket socket) {

/**

*相比较而言,这样的处理方式有良好的改进:

* 1.执行人物的负载已经脱离主线程,让主循环能更加迅速的重新开始等待下一个连接。提高了响应性

* 2.并发处理任务,多个请求可以同时得到处理,提高了吞吐性

* 3.任务处理代码必须要是线程安全的。防止出现并发性数据共享问题。

*

* 这个程序可能在开发阶段运行良好,一旦部署,就可能出现致命的错误,

* 我们接着来分析:

*/

}

}

相比较而言,这样的处理方式有良好的改进:

1.执行人物的负载已经脱离主线程,让主循环能更加迅速的重新开始等待下一个连接。提高了响应性

2.并发处理任务,多个请求可以同时得到处理,提高了吞吐性

3.任务处理代码必须要是线程安全的。防止出现并发性数据共享问题。

这个程序可能在开发阶段运行良好,一旦部署,就可能出现致命的错误,

我们接着来分析:

我们看到,上面的代码中,是为每个请求的到来,创建一个新的线程来处理,那么这样就会有以下的问题出现:

无限创建线程的缺点:

1.线程生命周期的开销

1.1.线程的创建与关闭并非是免费的,实际的开销根据不同的OS有不同的处理.但是线程的

创建的确需要时间,带来处理请求的延迟.一般的Web Server的请求是很频繁的,为每个请求创建一个线程,无非要耗费大量的资源.

2.资源消耗量

2.1. 活动的线程会消耗资源,尤其是内存.如果可运行的线程数多于可用的处理器数,线程将会空闲。大量的空闲线程占用更多的内存,给垃圾回收器带来压力,而且,线程在竞争CPU 的同时,也会带来许多其他的性能开销。所以,建议在有足够多的线程让CPU忙碌时,不要再创建多余的线程.

3.应用的稳定性

3.1. 应该限制创建线程的数量,限制的数目根据不同的平台而定,同时也受到JVM的启动参数,Thread的构造函数中栈大小等因素的影响. 如果打破了这个限制,你很可能会得到一个OutOfMemoryError. 在一定范围内增加线程可以提高系统的吞吐量,但是一旦超过这个范围,再创建线程只会拖垮你的系统。甚至可能会导致应用程序的崩溃.

我们的解决办法:

使用线程池,当然,你完全没有必要自己写一个线程池的实现(好吧,或许你跟我一样,也希望能从重复创造轮子中,找到自己想要了解的东西),你可以利用 Executor框架来帮你处理,java.util.concurrent提供了一个灵活的线程池实现。在新的java类库当中,任务执行的首要抽象不是Thread,而是Executor.

Executor仅仅是一个简单的接口,但是它很强大,包括用于异步任务的执行,支持不同类型的任务执行策略,为任务提交和任务执行之间的解藕,提供了标准的方式等等,我们后续再重点讨论。

Executor基于生产者-消费者模式。提交任务的是生产者,执行任务的是消费者。也就是说,采用Executor框架实现生产者-消费者模式,十分简单。

Java代码

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

import java.util.concurrent.Executor;

import java.util.concurrent.Executors;

public class TaskExecutionWebServer{

private static final int NTHREADS=100;

//使用线程池来避免为每个请求创建一个线程。

private static final Executor threadPool=Executors.newFixedThreadPool(NTHREADS);

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(8011);

while(true){

final Socket socket=server.accept();

threadPool.execute(new Runnable(){

public void run() {

handleRequest(socket);

}

});

}

}

protected static void handleRequest(Socket socket) {

/**

*

*/

System.out.println(Thread.currentThread().getId());

try {

Thread.sleep(5000);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

}

package com.ivan.concurrent.charpter6;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

import java.util.concurrent.Executor;

import java.util.concurrent.Executors;

public class TaskExecutionWebServer{

private static final int NTHREADS=100;

//使用线程池来避免为每个请求创建一个线程。

private static final Executor threadPool=Executors.newFixedThreadPool(NTHREADS);

public static void main(String[] args) throws Exception {

ServerSocket server=new ServerSocket(8011);

while(true){

final Socket socket=server.accept();

threadPool.execute(new Runnable(){

public void run() {

handleRequest(socket);

}

});

}

}

protected static void handleRequest(Socket socket) {

/**

*

*/

System.out.println(Thread.currentThread().getId());

try {

Thread.sleep(5000);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

}

线程池:

线程池管理着一个工作者线程的同构池,线程池是与工作队列紧密绑定的。工作队列的作用就是持有所有等待执行的任务,工作者队列只需要从工作队列中获取到下一个任务,执行,然后回来等待下一个线程。

Java类库中提供了以下几种线程池:

1.newFixedThreadPool :创建定长的线程池,每当提交一个任务就创建一个线程,直到达到池的最大长度。

2.newCachedThreadPool:创建一个可缓存的线程池,如果当前线程池的长度超过了处理的需要,它可以灵活的收回空闲线程,当需求增加时,它可以灵活添加新的线程,而并不对池的长度做任何限制

3.newSingleThreadExecutor:创建单线程化的executor,它只创建唯一的工作者线程来执行任务,如果这个线程异常结束,会有另外一个线程来取代它.它会保证任务按照任务队列规定的顺序来执行。

4.NewScheduledThreadPool:创建一个定长的线程池,而且支持定时的,以及周期性的任务执行,类似Timer.

Executor的生命周期:

它的创建已经说了,我们来看看它如何关闭, Executor 是为了执行任务而创建线程,而JVM通常会在所有非后台线程退出后才退出,如果它无法正确的关闭,则会影响到JVM的结束。

这里需要提一下,在我们了解如何关闭Executor的一些疑惑,由于Executor是异步执行任务,那么这些任务的状态不是立即可见的,换句话说,在任务时间里,这些执行的任务中,有的可能已经完成,有的还可能在运行,其他的还可能在队列里面等待。为了解决这些问题, Java引入了另外一个接口,它扩展了Executor,并增加一些生命周期的管理方法:ExecutorService.

ExecutorService表示生命周期有三种状态:运行,关闭,终止。

关闭和终止?怎么看上去是一个意思,这里我们先搁置着,留着后续来讨论。

ExecutorService最初创建后的初始状态就是运行状态;

shutdown与shutdownNow方法,都是ExecutorService的关闭方法,区别在于:

shutdown:

会启动一个平稳的关闭过程,停止接受新任务,同时等待已经提交的任务完成(包括尚未开始执行的任务)

shutdownNow:

会启动一个强制关闭的过程:尝试取消所有运行中的任务和排在队列中尚未开始的任务。

一旦所有任务全完成后,ExecutorService会转到终止状态, awaitTermination可以用来等待ExecutorService到达终止状态,也可以轮询isTerminated判断ExecutorService 是否已经终止。

Java代码

package com.ivan.concurrent.charpter6;

import java.io.IOException;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

import java.util.concurrent.ExecutorService;

import java.util.concurrent.Executors;

import java.util.concurrent.RejectedExecutionException;

/**

* 线程池的生命周期是如何管理的?

* @author root

* OS:Ubuntu 9.04

* Date:2010-6-19

*/

public class LifeCycleWebServer {

private static final int NTHREADS=100;

private static final ExecutorService exec=Executors.newFixedThreadPool(NTHREADS);

public void start() throws IOException{

ServerSocket server=new ServerSocket(8011);

while(exec.isShutdown()){

try {

final Socket socket=server.accept();

exec.execute(new Runnable(){

public void run() {

handleRequest(socket);

}

});

} catch (RejectedExecutionException e) { if(!exec.isShutdown()){

//log.error(...)

}

}

}

}

protected void handleRequest(Socket socket) {

Request req=readRequest(socket);

if(isShutDown(req)){

stop();

}else{

dispatchRequest(req);

}

}

public void stop(){

exec.shutdown();

}

//~ Mock Object And Function..

private static class Request{

}

private Request readRequest(Socket socket) {

// TODO Auto-generated method stub

return null;

}

private boolean isShutDown(Request req) {

// TODO Auto-generated method stub

return false;

}

private void dispatchRequest(Request req) {

// TODO Auto-generated method stub

}

}

package com.ivan.concurrent.charpter6;

import java.io.IOException;

import https://www.wendangku.net/doc/b2320267.html,.ServerSocket;

import https://www.wendangku.net/doc/b2320267.html,.Socket;

import java.util.concurrent.ExecutorService;

import java.util.concurrent.Executors;

import java.util.concurrent.RejectedExecutionException;

/**

* 线程池的生命周期是如何管理的?

* @author root

* OS:Ubuntu 9.04

* Date:2010-6-19

*/

public class LifeCycleWebServer {

private static final int NTHREADS=100;

private static final ExecutorService exec=Executors.newFixedThreadPool(NTHREADS);

public void start() throws IOException{

ServerSocket server=new ServerSocket(8011);

while(exec.isShutdown()){

try {

final Socket socket=server.accept();

exec.execute(new Runnable(){

public void run() {

handleRequest(socket);

}

});

} catch (RejectedExecutionException e) {

if(!exec.isShutdown()){

//log.error(...)

}

}

}

}

protected void handleRequest(Socket socket) { Request req=readRequest(socket);

if(isShutDown(req)){

stop();

}else{

dispatchRequest(req);

}

}

public void stop(){

exec.shutdown();

}

//~ Mock Object And Function..

private static class Request{

}

private Request readRequest(Socket socket) { // TODO Auto-generated method stub

return null;

}

private boolean isShutDown(Request req) {

// TODO Auto-generated method stub

return false;

}

private void dispatchRequest(Request req) { // TODO Auto-generated method stub

}

}

OK,了解了线程池的使用,这里有必要介绍介绍执行策略,

执行策略:

简单来说,就是任务执行的”What,When,Where,How”,包括:

1.任务在什么线程中执行(what)

2.任务以什么顺序执行(fifo,lifo,优先级)?

3.可以有多少个任务并发执行?(how many)

4.可以有多少个任务进入等待执行队列

5.系统过载时,需要放弃一个任务,该挑选哪一个?如何通知应用程序知道?

另外,java类库中还提供有一种特别的任务,----可携带结果的任务:

Callable 和 Future

Runnable 作为任务的基本表达形式只是个相当有限的抽象;它的局限在于,不能返回一个值或者抛出受检查的异常。

通常,很多任务都会引起严重的计算延迟,比如执行数据库查询,从网络下载资源,进行复杂的计算。对于这样的任务,Callable是更佳的抽象:它在主进入点,等待返回值,并为可能抛出的异常预先作准备。

Runnable与Callable描述的都是首相的计算型任务,这些任务通常都是有限的。,任务的所生命周期分为4个阶段:创建、提交、开始和完成。

Future描述了任务的生命周期,并提供了相关的方法来获取任务的结果、取消任务以及检验任务是否已经完成或者被取消。

Future的get方法取决于任务的状态,如果任务已经完成,get会立即返回或者抛出异常,如果任务没有完成,get会阻塞直到它的完成。

创建Future的方法有很多, ExecutorService的submit会返回一个Future,你可以将一个Callable或者Runnable提交给executor,然后得到一个Future,用它来重新获得任务执行的结果,或者取消任务。

你也可以显示的为给定的Callable和Runnable实例化一个FutureTask.

OK, 前面介绍了很多关于并发的理论知识,下面我们来看看,如果寻找可强化的并发性。

首先,我们从一个例子开始,开始之前,简单介绍一下这个例子所要表达的事情:它的来源是浏览器程序中渲染页面的那部分功能,首先获取HTML,并将它渲染到图像缓存里。为了简单起见,我们假设HTML只有文本标签。 OK,开始吧。

首先,如果按照一般的处理方式,我们会这样做:

1.遇到文本标签,将它渲染到图像缓存中

2.当遇到的是一个图片标签,我们通过网络获取它,再将它放到缓存里面。

很明显,这是最简单的方式,它很容易实现,但是,问题在于,你这样做,是在考验用户的耐心,结果就是他会对着屏幕丢一句 ****.然后毫不犹豫的关掉浏览器.

另外一种方法:

它先渲染文本,并为图像预留出占位符;在完成第一趟文本处理后,程序返回开始,并下载图像,将它们绘制到占位符上去。但是这样的问题也很明显,需要最少2次的文档处理,其性能与效率稍有提升,但是还不足解决用户希望快速浏览页面的需求。

为了使我们的渲染器具有更高的并发性,我们需要做的第一步就是,将渲染过程分为两部分:一个用来渲染文本,一个用来下载所有图像。(一个受限于CPU,另外一个受限于IO,即使在单CPU系统上,效率的提升也很明显。)

Callable与Future可以用来表达所有协同工作的任务之间的交互。我们来看代码:

Java代码

package com.ivan.concurrent.charpter6;

import java.util.ArrayList;

import java.util.List;

import java.util.concurrent.Callable;

import java.util.concurrent.ExecutionException;

import java.util.concurrent.ExecutorService;

import java.util.concurrent.Executors;

import java.util.concurrent.Future;

public class FutureRenderer {

private static final int NTHREADS=100;

private static final ExecutorService exec=Executors.newFixedThreadPool(NTHREADS);

void renderPage(CharSequence source){

final List imageinfos=scanForImageInfo(source);

Callable> task=

new Callable>(){

public List call() throws Exception {

List result=new ArrayList();

for(ImageInfo imageinfo:imageinfos){

result.add(imageinfo.downloadImage());

}

return result;

}

};

Future> future=exec.submit(task);

//保证渲染文本与下载图像数据并发执行。

renderText(source);

try {

/**

* 到达需要所有图像的时间点时,主任务会等待future.get调用的结果, * 幸运的话,我们请求的同时,下载已经完成,即使没有,下载也已经预先开始了。

*

* 这里还有一定的局限性,用户可能不希望等待所有图片下载完成后才可以看见,

* 他希望下载完成一张图片后,就可以立即看到。……这里还待优化。 */

List imageData=future.get();

for(ImageData data:imageData){

reanderImage(data);

}

} catch (InterruptedException e) {

Thread.currentThread().interrupt();

future.cancel(true);//取消任务

}catch(ExecutionException e){

e.printStackTrace();

}

}

private void renderText(CharSequence source) {

// TODO Auto-generated method stub

}

private void reanderImage(ImageData data) {

// TODO Auto-generated method stub

}

private List scanForImageInfo(CharSequence source) {

// TODO Auto-generated method stub

return null;

}

}

package com.ivan.concurrent.charpter6;

import java.util.ArrayList;

import java.util.List;

import java.util.concurrent.Callable;

import java.util.concurrent.ExecutionException;

import java.util.concurrent.ExecutorService;

import java.util.concurrent.Executors;

import java.util.concurrent.Future;

public class FutureRenderer {

private static final int NTHREADS=100;

private static final ExecutorService exec=Executors.newFixedThreadPool(NTHREADS);

void renderPage(CharSequence source){

final List imageinfos=scanForImageInfo(source);

Callable> task=

new Callable>(){

public List call() throws Exception {

List result=new ArrayList();

for(ImageInfo imageinfo:imageinfos){

result.add(imageinfo.downloadImage());

}

return result;

}

};

Future> future=exec.submit(task);

//保证渲染文本与下载图像数据并发执行。

renderText(source);

try {

/**

* 到达需要所有图像的时间点时,主任务会等待future.get调用的结果,

* 幸运的话,我们请求的同时,下载已经完成,即使没有,下载也已经预先开始了。

*

* 这里还有一定的局限性,用户可能不希望等待所有图片下载完成后才可以看见,

* 他希望下载完成一张图片后,就可以立即看到。……这里还待优化。

*/

List imageData=future.get();

for(ImageData data:imageData){

reanderImage(data);

}

} catch (InterruptedException e) {

Thread.currentThread().interrupt();

future.cancel(true);//取消任务

}catch(ExecutionException e){

e.printStackTrace();

}

}

private void renderText(CharSequence source) {

// TODO Auto-generated method stub

}

private void reanderImage(ImageData data) {

// TODO Auto-generated method stub

}

private List scanForImageInfo(CharSequence source) {

// TODO Auto-generated method stub

return null;

}

}

CompletionService: 当executorService遇到BlockingQueue

CompletionService整合了Executor和BlockingQueue的功能,你可以将Callable任务提交给它去执行,然后使用类似于队列中的take和poll方法,在结果完成可用时,获得这个结果,像一个打包的Future.

我们利用它来为我们的渲染器需要优化的地方做些处理,代码如下:

Java代码

package com.ivan.concurrent.charpter6;

import java.util.List;

import java.util.concurrent.Callable;

import https://www.wendangku.net/doc/b2320267.html,pletionService;

import java.util.concurrent.ExecutionException;

import java.util.concurrent.ExecutorCompletionService;

import java.util.concurrent.ExecutorService;

import java.util.concurrent.Executors;

import java.util.concurrent.Future;

public class FutureRenderer2 {

private static final int NTHREADS=100;

private static final ExecutorService exec=Executors.newFixedThreadPool(NTHREADS);

void renderPage(CharSequence source){

final List imageinfos=scanForImageInfo(source);

CompletionService completionService=new ExecutorCompletionService(exec);

for(final ImageInfo imageinfo:imageinfos){

completionService.submit(new Callable(){

public ImageData call() throws Exception {

//提高性能点一:将顺序的下载,变成并发的下载,缩短下载时间 return imageinfo.downloadImage();

}

});

}

renderText(source);

try {

for(int i=0;i

Future f=completionService.take();

//提高性能点二:下载完成一张图片后,立刻渲染到页面。

ImageData imagedata=f.get();

reanderImage(imagedata);

}

} catch (InterruptedException e) {

Thread.currentThread().interrupt();

}catch(ExecutionException e){

e.printStackTrace();

}

}

private void renderText(CharSequence source) {

// TODO Auto-generated method stub

}

private void reanderImage(ImageData data) {

Java多线程技术及案例

Java多线程技术及案例 进程和线程: 进程:每个进程都有独立的代码和数据空间(进程上下文),进程间的切换会有较大的开销,一个进程包含1–n个线程。 线程:同一类线程共享代码和数据空间,每个线程有独立的运行栈和程序计数器(PC),线程切换开销小。 线程和进程一样分为五个阶段:创建、就绪、运行、阻塞、终止。 多进程是指操作系统能同时运行多个任务(程序)。 多线程是指在同一程序中有多个顺序流在执行。 Java中多线程的多种实现方式 Java中有多种多线程实现方法,主要是继承https://www.wendangku.net/doc/b2320267.html,ng.Thread类的方法和 https://www.wendangku.net/doc/b2320267.html,ng.Runnable接口的方法。 继承Thread类 Thread是https://www.wendangku.net/doc/b2320267.html,ng包中的一个类,从这个类中实例化的对象代表线程,启动一个新线程需要建立一个Thread实例。 使用Thread类启动新的线程的步骤如下: 1.实例化Thread对象 2.调用start()方法启动线程 构造方法:

public Thread(String threadName); public Thread(); 例程: publicclass Thread1extends Thread{//定义一个类继承Thread privateint count=1000; publicvoid run(){//重写run方法 while(true){ System.out.print(count+" "); if(--count==0){ return; } } } publicstaticvoid main(String[] args){ Thread1 th1=new Thread1();//实例化继承了Thread的类 Thread1 th2=new Thread1(); th1.start();//调用start()方法, th2.start(); for(int i=0;i<1000;i++){ System.out.print("A "); } }

服务器高并发解决方案

服务器高并发解决方案 篇一:JAVA WEB高并发解决方案 java处理高并发高负载类网站中数据库的设计方法(java教程,java处理大量数据,java高负载数据)一:高并发高负载类网站关注点之数据库没错,首先是数据库,这是大多数应用所面临的首个SPOF。尤其是的应用,数据库的响应是首先要解决的。 一般来说MySQL是最常用的,可能最初是一个mysql 主机,当数据增加到100万以上,那么,MySQL的效能急剧下降。常用的优化措施是M-S(主-从)方式进行同步复制,将查询和操作和分别在不同的服务器上进行操作。我推荐的是M-M-Slaves方式,2个主Mysql,多个Slaves,需要注意的是,虽然有2个Master,但是同时只有1个是Active,我们可以在一定时候切换。之所以用2个M,是保证M不会又成为系统的SPOF。 Slaves可以进一步负载均衡,可以结合LVS,从而将select操作适当的平衡到不同的slaves上。 以上架构可以抗衡到一定量的负载,但是随着用户进一步增加,你的用户表数据超过1千万,这时那个M变成了SPOF。你不能任意扩充Slaves,否则复制同步的开销将直线上升,怎么办?我的方法是表分区,从业务层面上进行分区。最简单的,以用户数据为例。根据一定的切分方式,比如id,

切分到不同的数据库集群去。 全局数据库用于meta数据的查询。缺点是每次查询,会增加一次,比如你要查一个用户nightsailer,你首先要到全局数据库群找到nightsailer对应的cluster id,然后再到指定的cluster找到nightsailer的实际数据。 每个cluster可以用m-m方式,或者m-m-slaves方式。这是一个可以扩展的结构,随着负载的增加,你可以简单的增加新的mysql cluster进去。 需要注意的是: 1、禁用全部auto_increment的字段 2、id需要采用通用的算法集中分配 3、要具有比较好的方法来监控mysql主机的负载和服务的运行状态。如果你有30台以上的mysql数据库在跑就明白我的意思了。 4、不要使用持久性链接(不要用pconnect),相反,使用sqlrelay这种第三方的数据库链接池,或者干脆自己做,因为php4中mysql的链接池经常出问题。 二:高并发高负载网站的系统架构之HTML静态化 其实大家都知道,效率最高、消耗最小的就是纯静态化 /shtml/XX07/的html页面,所以我们尽可能使我们的网站上的页面采用静态页面来实现,这个最简单的方法其实

JAVA多线程试题 答案

多线程 一.选择题 1.下列说法中错误的一项是(A) A.线程就是程序 B.线程是一个程序的单个执行流 B.多线程是指一个程序的多个执行流D.多线程用于实现并发 2.下列哪个一个操作不能使线程从等待阻塞状态进入对象阻塞状态(D) A.等待阴塞状态下的线程被notify()唤 B.等待阻塞状态下的纯种被interrput()中断 C.等待时间到 D.等待阻塞状态下的线程调用wait()方法 3.下列哪个方法可以使线程从运行状态进入其他阻塞状态(A) A.sleep B.wait C.yield D.start 4.下列说法中错误的一项是(D) A.一个线程是一个Thread类的实例 B.线程从传递给纯种的Runnable实例run()方法开始执行 C.线程操作的数据来自Runnable实例 D.新建的线程调用start()方法就能立即进入运行状态 5.下列关于Thread类提供的线程控制方法的说法中,错误的一项是(D) A.在线程A中执行线程B的join()方法,则线程A等待直到B执行完成 B.线程A通过调用interrupt()方法来中断其阻塞状态 C.若线程A调用方法isAlive()返回值为true,则说明A正在执行中 D.currentThread()方法返回当前线程的引用 6.下列说法中,错误的一项是() A.对象锁在synchronized()语句执行完之后由持有它的线程返还 B.对象锁在synchronized()语句中出现异常时由持有它的线程返还 C.当持有锁的线程调用了该对象的wait()方法时,线程将释放其持有的锁 D.当持有锁的线程调用了该对象的构造方法时,线程将释放其持有的锁 7.下面的哪一个关键字通常用来对对象的加锁,从而使得对对象的访问是排他的A A.sirialize B transient C synchronized D static 二.填空题 1.在操作系统中,被称做轻型的进程是线程 2.多线程程序设计的含义是可以将一个程序任务分成几个并行的任务 3.在Java程序中,run()方法的实现有两种方式:实现Runnable接口和继承Thread类 4.多个线程并发执行时,各个线程中语句的执行顺序是确定的,但是线程之间的相对执行顺序是不确定的 6.Java中的对象锁是一种独占的排他锁 7.程序中可能出现一种情况:多个线种互相等待对方持有的锁,而在得到对方的锁之前都不会释放自己的锁,这就是死锁 8.线程的优先级是在Thread类的常数MIN_PRIORITY和MAX_PRIORITY 之间的一个值 9.处于新建状态的线程可以使用的控制方法是start()和stop()。 10.一个进程可以包含多个线程

Spring提供的三种定时任务机制及其比较

Spring提供的三种定时任务机制及其比较 定时任务的需求在众多应用系统中广泛存在,在Spring中,我们可以使用三种不同的定时机制,下面一一描述并加以比较 1. 基于Quartz的定时机制

下面详细解释这个类图中涉及的关键类及其使用场景 1.1. SchedulerFactoryBean 这是Spring中基于Quartz的定时机制入口,只要Spring容器装载了这个类,Quartz定时机制就会启动,并加载定义在这个类中的所有trigger Spring配置范例: [xhtml]view plaincopy 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 1.2. CronTriggerBean 实现了Trigger接口,基于Cron表达式的触发器 这种触发器的好处是表达式与linux下的crontab一致,能够满足非常复杂的定时需求,也容易配置

Spring配置范例: [xhtml]view plaincopy 1. 2. 3. 4. 1.3. SimpleTriggerBean 该类也实现了Trigger接口,基于配置的定时调度 这个触发器的优点在于很容易配置一个简单的定时调度策略 Spring配置范例: [xhtml]view plaincopy 1. 2. 3. 4. 5. 6.3600000 7. 8. 9.86400000 10. 11.

Java高并发,如何解决,什么方式解决

对于我们开发的网站,如果网站的访问量非常大的话,那么我们就需要考虑相关的并发访问问题了。而并发问题是绝大部分的程序员头疼的问题, 但话又说回来了,既然逃避不掉,那我们就坦然面对吧~今天就让我们一起来研究一下常见的并发和同步吧。 为了更好的理解并发和同步,我们需要先明白两个重要的概念:同步和异步 1、同步和异步的区别和联系 所谓同步,可以理解为在执行完一个函数或方法之后,一直等待系统返回值或消息,这时程序是出于阻塞的,只有接收到 返回的值或消息后才往下执行其它的命令。 异步,执行完函数或方法后,不必阻塞性地等待返回值或消息,只需要向系统委托一个异步过程,那么当系统接收到返回 值或消息时,系统会自动触发委托的异步过程,从而完成一个完整的流程。 同步在一定程度上可以看做是单线程,这个线程请求一个方法后就待这个方法给他回复,否则他不往下执行(死心眼)。 异步在一定程度上可以看做是多线程的(废话,一个线程怎么叫异步),请求一个方法后,就不管了,继续执行其他的方法。 同步就是一件事,一件事情一件事的做。 异步就是,做一件事情,不引响做其他事情。 例如:吃饭和说话,只能一件事一件事的来,因为只有一张嘴。 但吃饭和听音乐是异步的,因为,听音乐并不引响我们吃饭。 对于Java程序员而言,我们会经常听到同步关键字synchronized,假如这个同步的监视对象是类的话,那么如果当一个对象 访问类里面的同步方法的话,那么其它的对象如果想要继续访问类里面的这个同步方法的话,就会进入阻塞,只有等前一个对象 执行完该同步方法后当前对象才能够继续执行该方法。这就是同步。相反,如果方法前没有同步关键字修饰的话,那么不同的对象 可以在同一时间访问同一个方法,这就是异步。 在补充一下(脏数据和不可重复读的相关概念): 脏数据 脏读就是指当一个事务正在访问数据,并且对数据进行了修改,而这种修改还没有提交到数据库中,这时,另外一个事务也访问这个数据,然后使用了这

高并发下的接口幂等性解决方案

高并发下的接口幂等性解决方案 我们实际系统中有很多操作,是不管做多少次,都应该产生一样的效果或返回一样的结果。例如: 1.前端重复提交选中的数据,应该后台只产生对应这个数据的一个反应结果。 2.我们发起一笔付款请求,应该只扣用户账户一次钱,当遇到网络重发或系统 bug重发,也应该只扣一次钱; 3.发送消息,也应该只发一次,同样的短信发给用户,用户会哭的; 4.创建业务订单,一次业务请求只能创建一个,创建多个就会出大问题。 等等很多重要的情况,这些逻辑都需要幂等的特性来支持。 二、幂等性概念 幂等(idempotent、idempotence)是一个数学与计算机学概念,常见于抽象代数中。在编程中.一个幂等操作的特点是其任意多次执行所产生的影响均与一次执行的影响相同。幂等函数,或幂等方法,是指可以使用相同参数重复执行,并能获得相同结果的函数。这些函数不会影响系统状态,也不用担心重复执行会对系统造成改变。例如,“getUsername()和setTrue()”函数就是一个幂等函数.更复杂的操作幂等保证是利用唯一交易号(流水号)实现。我的理解:幂等就是一个操作,不论执行多少次,产生的效果和返回的结果都是一样的 三、技术方案 1. 查询操作查询一次和查询多次,在数据不变的情况下,查询结果是一样的。select是天然的幂等操作; 2. 删除操作删除操作也是幂等的,删除一次和多次删除都是把数据删除。(注意可能返回结果不一样,删除的数据不存在,返回0,删除的数据多条,返回结果多个); 3.唯一索引,防止新增脏数据比如:支付宝的资金账户,支付宝也有用户账户,每个用户只能有一个资金账户,怎么防止给用户创建资金账户多个,那么给资金账户表中的用户ID加唯一索引,所以一个用户新增成功一个资金账户记录。 要点:唯一索引或唯一组合索引来防止新增数据存在脏数据(当表存在唯一索引,并发时新增报错时,再查询一次就可以了,数据应该已经存在了,返回结果即可) 4. token机制,防止页面重复提交 业务要求: 页面的数据只能被点击提交一次。发生原因:由于重复点击或者网络重发,或者nginx重发等情况会导致数据被重复提交 解决办法:集群环境:采用token加redis(redis单线程的,处理需要排队)单JVM环境:采用token加redis或token加jvm内存。 处理流程: 1.数据提交前要向服务的申请token,token放到redis或jvm内存,token有效时间 2.提交后后台校验token,同时删除token,生成新的token返回; 3.token特点:要申请,一次有效性,可以限流; 4.注意:redis要用删除操作来判断token,删除成功代表token校验通过,如果用select+delete 来校验token,存在并发问题,不建议使用; 5. 悲观锁获取数据的时候加锁获取select * from table_xxx where id=3939 for update;注意:id 字段一定是主键或者唯一索引,不然是锁表,会死人的悲观锁使用时一般伴随事务一起使用,数据锁定时间可能会很长,根据实际情况选用。 6. 乐观锁乐观锁只是在更新数据那一刻锁表,其他时间不锁表,所以相对于悲观锁,效率更高。乐观锁的实现方式多种多样可以通过version或者其他状态条件:

15个Java多线程面试题及答案

15个Java多线程面试题及答案 1)现在有T1、T2、T3三个线程,你怎样保证T2在T1执行完后执行,T3在T2执行完后执行? 这个线程问题通常会在第一轮或电话面试阶段被问到,目的是检测你对”join”方法是否熟悉。这个多线程问题比较简单,可以用join方法实现。 2)在Java中Lock接口比synchronized块的优势是什么?你需要实现一个高效的缓存,它允许多个用户读,但只允许一个用户写,以此来保持它的完整性,你会怎样去实现它? lock接口在多线程和并发编程中最大的优势是它们为读和写分别提 供了锁,它能满足你写像ConcurrentHashMap这样的高性能数据结构和有条件的阻塞。Java线程面试的问题越来越会根据面试者的回答来提问。芯学苑老师强烈建议在你在面试之前认真读一下Locks,因为当前其大量用于构建电子交易终统的客户端缓存和交易连接空间。 3)在java中wait和sleep方法的不同?

通常会在电话面试中经常被问到的Java线程面试问题。最大的不同是在等待时wait会释放锁,而sleep一直持有锁。Wait通常被用于线程间交互,sleep通常被用于暂停执行。 4)用Java实现阻塞队列。 这是一个相对艰难的多线程面试问题,它能达到很多的目的。第一,它可以检测侯选者是否能实际的用Java线程写程序;第二,可以检测侯选者对并发场景的理解,并且你可以根据这个问很多问题。如果他用wait()和notify()方法来实现阻塞队列,你可以要求他用最新的Java 5中的并发类来再写一次。 5)用Java写代码来解决生产者——消费者问题。 与上面的问题很类似,但这个问题更经典,有些时候面试都会问下面的问题。在Java中怎么解决生产者——消费者问题,当然有很多解决方法,我已经分享了一种用阻塞队列实现的方法。有些时候他们甚至会问怎么实现哲学家进餐问题。 6)用Java编程一个会导致死锁的程序,你将怎么解决?

Java定时任务ScheduledThreadPoolExecutor

Timer计时器有管理任务延迟执行("如1000ms后执行任务")以及周期性执行("如每500ms执行一次该任务")。但是,Timer存在一些缺陷,因此你应该考虑使用ScheduledThreadPoolExecutor作为代替品,Timer对调度的支持是基于绝对时间,而不是相对时间的,由此任务对系统时钟的改变是敏感的;ScheduledThreadExecutor只支持相对时间。 Timer的另一个问题在于,如果TimerTask抛出未检查的异常,Timer将会产生无法预料的行为。Timer线程并不捕获异常,所以TimerTask抛出的未检查的异常会终止timer 线程。这种情况下,Timer也不会再重新恢复线程的执行了;它错误的认为整个Timer都被取消了。此时,已经被安排但尚未执行的TimerTask永远不会再执行了,新的任务也不能被调度了。 例子: packagecom.concurrent.basic; importjava.util.Timer; import java.util.TimerTask; public class TimerTest { private Timer timer = new Timer(); // 启动计时器 public void lanuchTimer() { timer.schedule(new TimerTask() { public void run() { throw new RuntimeException(); } }, 1000 * 3, 500); } // 向计时器添加一个任务 public void addOneTask() { timer.schedule(new TimerTask() { public void run() { System.out.println("hello world"); } }, 1000 * 1, 1000 * 5); }

.net高并发解决方案_1

竭诚为您提供优质文档/双击可除.net高并发解决方案 篇一:开源企业级web高并发解决方案 开源企业级web高并发解决方案 主要介绍利用开源的解决方案,来为企业搭建web高并发服务器架构花了一个多小时,画了张图片,希望能先帮你理解整个架构,之后我在一一介绍.linux的大型架构其实是一点点小架构拼接起来的,笔者从各个应用开始配置,最后在完全整合起来,以实现效果。 笔者所使用的环境为Rhel5.4内核版本2.6.18实现过程在虚拟机中,所用到的安装包为dVd光盘自带rpm包装过developmentlibrariesdevelopmenttools包组 笔者所使用的环境为Rhel5.4内核版本2.6.18实现过程在虚拟机中,所用到的安装包为dVd光盘自带rpm包装过developmentlibrariesdevelopmenttools包组 笔者虚拟机有限,只演示单边varnish配置 一、配置前端lVs负载均衡 笔者选用lVs的dR模型来实现集群架构,如果对dR模型不太了了解的朋友建议先去看看相关资料。

本模型实例图为: 现在director 上安装ipvsadm,笔者yum配置指向有集群源所以直接 用yum安装。yuminstallipvsadm 下面是director配置: dip配置在接口上172.16.100.10 Vip配置在接口别名上:172.16.100.1 varnish服务器配置:Rip配置在接口上:172.16.100.11;Vip配置在lo别名上 如果你要用到下面的heartbeat的ldirectord来实现 资源转换,则下面的#director配置不用配置 1.#director配置 2.ifconfigeth0172.16.100.10/16 3.ifconfigeth0:0172.16.100.1broadcast172.16.100.1ne tmask255.25 5.255.255up 4.routeadd-host172.16.100.1deveth0:0 5.echo1>/proc/sys/net/ipv4/ip_forward 1.#varnish服务器修改内核参数来禁止响应对Vip的aRp广播请求 2.echo1>/proc/sys/net/ipv4/conf/lo/arp_ignore

java多线程并发面试题【java多线程和并发基础面试题】

java多线程并发面试题【java多线程和并 发基础面试题】 多线程和并发问题是Java技术面试中面试官比较喜欢问的问题之一。下面就由小编为大家介绍一下java多线程和并发基础面试题的文章,欢迎阅读。 java多线程和并发基础面试题篇1 1. 进程和线程之间有什么不同? 一个进程是一个独立(self contained)的运行环境,它可以被看作一个程序或者一个应用。而线程是在进程中执行的一个任务。Java运行环境是一个包含了不同的类和程序的单一进程。线程可以被称为轻量级进程。线程需要较少的来创建和驻留在进程中,并且可以共享进程中的。 2. 多线程编程的好处是什么? 在多线程程序中,多个线程被并发的执行以提高程序的效率,CPU不会因为某个线程需要等待而进入空闲状态。多个线程共享堆内存(heap memory),因此创建多个线程去执行一些任务会比创建多个进程更好。举个例子,Servlets比CGI更好,是因为Servlets支持多线程而CGI不支持。 3. 用户线程和守护线程有什么区别? 当我们在Java程序中创建一个线程,它就被称为用户线程。一个守护线程是在后台执行并且不会阻止JVM终止的

线程。当没有用户线程在运行的时候,JVM关闭程序并且退出。一个守护线程创建的子线程依然是守护线程。 4. 我们如何创建一个线程? 有两种创建线程的方法:一是实现Runnable接口,然后将它传递给Thread的构造函数,创建一个Thread对象;二是直接继承Thread类。 java多线程和并发基础面试题篇2 1. 有哪些不同的线程生命周期? 当我们在Java程序中新建一个线程时,它的状态是New。当我们调用线程的start()方法时,状态被改变为Runnable。线程调度器会为Runnable线程池中的线程分配CPU时间并且讲它们的状态改变为Running。其他的线程状态还有Waiting,Blocked 和Dead。 2. 可以直接调用Thread类的run()方法么? 当然可以,但是如果我们调用了Thread的run()方法,它的行为就会和普通的方法一样,为了在新的线程中执行我们的代码,必须使用Thread.start()方法。 3. 如何让正在运行的线程暂停一段时间? 我们可以使用Thread类的Sleep()方法让线程暂停一段时间。需要注意的是,这并不会让线程终止,一旦从休眠中唤醒线程,线程的状态将会被改变为Runnable,并且根据线程调度,它将得到执行。

黑马程序员:高并发解决方案

黑马程序员:高并发解决方案 一、什么是高并发 高并发(High Concurrency)是互联网分布式系统架构设计中必须考虑的因素之一,它通常是指,通过设计保证系统能够同时并行处理很多请求。高并发相关常用的一些指标有响应时间(Response Time),吞吐量(Throughput),每秒查询率QPS(Query Per Second),并发用户数等。 响应时间:系统对请求做出响应的时间。例如系统处理一个HTTP请求需要200ms,这个200ms就是系统的响应时间。 吞吐量:单位时间内处理的请求数量。 QPS:每秒响应请求数。在互联网领域,这个指标和吞吐量区分的没有这么明显。并发用户数:同时承载正常使用系统功能的用户数量。例如一个即时通讯系统,同时在线量一定程度上代表了系统的并发用户数。 二、什么是秒杀 秒杀场景一般会在电商网站举行一些活动或者节假日在12306网站上抢票时遇到。对于电商网站中一些稀缺或者特价商品,电商网站一般会在约定时间点对其进行限量销售,因为这些商品的特殊性,会吸引大量用户前来抢购,并且会在约定的时间点同时在秒杀页面进行抢购。

此种场景就是非常有特点的高并发场景,如果不对流量进行合理管控,肆意放任大流量冲击系统,那么将导致一系列的问题出现,比如一些可用的连接资源被耗尽、分布式缓存的容量被撑爆、数据库吞吐量降低,最终必然会导致系统产生雪崩效应。 一般来说,大型互联网站通常采用的做法是通过扩容、动静分离、缓存、服务降级及限流五种常规手段来保护系统的稳定运行。 三、扩容 由于单台服务器的处理能力有限,因此当一台服务器的处理能力接近或已超出其容量上限时,采用集群技术对服务器进行扩容,可以很好地提升系统整体的并行处理能力,在集群环境中,节点的数量越多,系统的并行能力和容错性就越强。在无状态服务下,扩容可能是迄今为止效果最明显的增加并发量的技巧之一。从扩容方式角度讲,分为垂直扩容(scale up)和水平扩容(scale out)。垂直扩容就是增加单机处理能力,怼硬件,但硬件能力毕竟还是有限;水平扩容说白了就是增加机器数量,怼机器,但随着机器数量的增加,单应用并发能力并不一定与其呈现线性关系,此时就可能需要进行应用服务化拆分了。 从数据角度讲,扩容可以分为无状态扩容和有状态扩容。无状态扩容一般就是指我们的应用服务器扩容;有状态扩容一般是指数据存储扩容,要么将一份数据拆分成不同的多份,即sharding,要么就整体复制n份,即副本。sharding遇

Quartz+spring定时器实例用

Spring+Quartz定时器例子如下: 1. javabean类 在Test.QuartzJob中 1.package Test; 2. 3.public class QuartzJob { 4.public void work() 5. { 6. System.out.println("Quartz的任务调度!!!"); 7. } 8. } 1. 2. 7. 8. 9. 10. 11. 13. 14. 15. 16. 17. 18. 19.work 20. 21. 22. 23. 25. 26.

数据库高并发升级方案1

XXXXXXXXXXXX平台数据库升级方案 XXXXXXXXXXXXXXX有限公司2016年11月28日

目录 1. 概述 (4) 1.1. 背景 (4) 1.2. 目标与目的 (4) 1.3. 可行性分析 (4) 1.4. 参考依据 (5) 2. 数据库高并发方案 (5) 2.1. 数据库均衡负载(RAC) (5) 2.2. 数据库主从部署 (8) 2.3. 数据库垂直分割 (9) 2.4. 数据库水平分割 (10) 3. 二代办公平台数据库优化设计 (11) 3.1. 数据库集群 (11) 3.2. 重点业务表分区 (11) 3.3. 任务表历史数据分割 (12) 3.4. 数据库表结构优化 (12) 3.5. 数据访问优化 (12) 4. 实施方案 (13) 5. 工作量及预算评估 (14) 5.1. 工作量及预算评估 (14) 5.2. 其他费用 (15)

1.概述 1.1.背景 随着XXXXXX平台及其他子系统业务量增多,且用户已面向各地州市,用户数量增大,现有的二代办公平台及其他子系统在单一环境下的架构体系和数据库架构体系也无法高效的满足这样的场景。 当前XXXXXX平台及其子系统通过搭建多台WEB服务器和双机热备份的方式进行部署运行。虽已提高了整体效率,但对于部分的业务处理还是未解决。部分业务量并发处理多,业务关联多等因素,导致对数据库并发处理的业务量大,读写量大等也无法用双机热备份进行解决。 因此,在此背景下提高数据库访问效率,增大访问吞吐量等将成为二代办公平台及其子系统运行顺畅的关键因素。 1.2.目标与目的 目标:依托现有系统服务和设备环境,建立可扩容、高并发、高吞吐量的数据库架构体系。 目的:为缓解当前XXXXXX平台机器及其他子系统对数据库访问过大,造成的访问效率低下的问题,提升数据库访问效率和并发效率。对部分业务繁杂的表和访问进行优化设计,缓解因此造成的使用效率低下问题。 1.3.可行性分析 数据库性能分析:根据当前的数据库性能分析,当前硬件设备的提高也无法满足数据库性能的提升,因此应考虑数据库访问控制和数据访问方面进行优化。现有的数据库虽也实现双机热备份,但访问的效率未较大改善,因此应考虑各健全的数据库高并发访问方案。 数据库优化分析:当前的数据库采用的ORACLE数据库,同时,现有的均衡负载、读写分离、数据分割技术较为成熟,在对系统进行适当调整和优化的情况下,能保证系统的正常运行。

Java并发编程实践

1对象的共享 关键字synchronized不仅能实现原子性还能确保当一个线程修改了对象状态后,另一个线程就可以看到对象状态的变化(内存可见性) 1.1可见性 重排序:在缺乏足够同步的多线程程序中,代码的执行顺序不会按照程序员写好的顺序进行。这是因为Java内存模型允许编译器、CPU对操作的执行顺序进行调整。 1.1.1失效数据 在多线程程序中,get方法、set方法都需要进行同步。这是因为get方法在获取变量时可能会获得一个失效的值,这个失效的值就是之前某个线程设置的。虽然已经失效但这个值曾经是正确的。 1.1.2非原子的64位操作 Java内存模型要求,非volatile类型的64位数值变量(double和long),JVM允许将64位的读操作和写操作分解为两个32位的操作。 那么在多线程的环境中,如果要读取非volatile类型的double、隆就有可能会读取到某个值的高32位和另一个值的低32位组成的一个数值。 但目前各种平台的商用虚拟机几乎都把64位数据的读写操作作为原子操作来对待。1.1.3加锁与可见性 加锁的含义不仅仅局限于互斥行为,还包括内存可见性。为了确保所有线程都能看到共享变量的最新值,所有执行读操作或者写操作的线程都必须在同一个锁上同步。 同步代码块的锁就是方法调用所在的对象,静态synchronized方法以Class对象作为锁。 synchronized可以用于实例变量、对象引用、static方法、类名称字面常量。 1.在某个对象实例内,synchronized aMethod(){} 可以防止多个线程同时访问这个对象其他

的synchronized方法(这个对象还有其他的synchronized方法,如果其中一个线程访问了其中一个synchronized方法,那么其他线程将不能访问此对象另外的synchronized方法)。但不同的对象实例间的synchronized方法是相互独立的,也就是说其他线程照样可以访问相同类的另一个对象实例的synchronized方法。 2.synchronized static aMethod(){}对这个类所有的静态synchronized方法都会起作用,但 不会对非静态的synchronized起作用。这是因为static方法属于类方法,他属于这个Class (注意:这里的Class不是指Class的某个具体对象),那么static方法所获取到的锁就是调用这个方法的对象所属的类,而非static方法获取到的锁就是当前调用这个方法的对象了。 3.除了在方法上用synchronized关键字外,也可以在方法内部的某个区块中用synchronized 表示只对这个区块中的资源进行同步访问,例如synchronized(this){/**区块**/}的作用域就是当前对象。 1.1.3.1非static方法 运行结果是:chunk对象与chunk1对象锁互不干扰。 chunk1 9chunk

高并发网站系统架构解决方案

高并发网站系统架构解决方案 一个小型的网站,比如个人网站,可以使用最简单的html静态页面就实现了,配合一些图片达到美化效果,所有的页面均存放在一个目录下,这样的网站对系统架构、性能的要求都很简单,随着互联网业务的不断丰富,网站相关的技术经过这些年的发展,已经细分到很细的方方面面,尤其对于大型网站来说,所采用的技术更是涉及面非常广,从硬件到软件、编程语言、数据库、WebServer、防火墙等各个领域都有了很高的要求,已经不是原来简单的html静态网站所能比拟的。 大型网站,比如门户网站。在面对大量用户访问、高并发请求方面,基本的解决方案集中在这样几个环节:使用高性能的服务器、高性能的数据库、高效率的编程语言、还有高性能的Web容器。但是除了这几个方面,还没法根本解决大型网站面临的高负载和高并发问题。 上面提供的几个解决思路在一定程度上也意味着更大的投入,并且这样的解决思路具备瓶颈,没有很好的扩展性,下面我从低成本、高性能和高扩张性的角度来说说我的一些经验。 1、HTML静态化 其实大家都知道,效率最高、消耗最小的就是纯静态化的html页面,所以我们尽可能使我们的网站上的页面采用静态页面来实现,这个最简单的方法其实也是最有效的方法。但是对于大量内容并且频繁更新的网站,我们无法全部手动去挨个实现,于是出现了我们常见的信息发布系统CMS,像我们常访问的各个门户站点的新闻频道,甚至他们的其他频道,都是通过信息发布系统来管理和实现的,信息发布系统可以实现最简单的信息录入自动生成静态页面,还能具备频道管理、权限管理、自动抓取等功能,对于一个大型网站来说,拥有一套高效、可管理的CMS是必不可少的。 除了门户和信息发布类型的网站,对于交互性要求很高的社区类型网站来说,尽可能的静态化也是提高性能的必要手段,将社区内的帖子、文章进行实时的静态化,有更新的时候再重新静态化也是大量使用的策略,像Mop的大杂烩就是使用了这样的策略,网易社区等也是如此。 同时,html静态化也是某些缓存策略使用的手段,对于系统中频繁使用数据库查询但是内容更新很小的应用,可以考虑使用html静态化来实现,比如论坛中论坛的公用设置信息,这些信息目前的主流论坛都可以进行后台管理并且存储再数据库中,这些信息其实大量被前台程序调用,但是更新频率很小,可以考虑将这部分内容进行后台更新的时候进行静态化,这样避免了大量的数据库访问请求。 2、图片服务器分离

Java每天定时执行任务

Java每天定时执行任务 java定时任务,每天定时执行任务。以下是这个例子的全部代码。 public class TimerManager { //时间间隔 private static final long PERIOD_DAY = 24 * 60 * 60 * 1000; public TimerManager() { Calendar calendar = Calendar.getInstance(); /*** 定制每日2:00执行方法***/ calendar.set(Calendar.HOUR_OF_DAY, 2); calendar.set(Calendar.MINUTE, 0); calendar.set(Calendar.SECOND, 0); Date date=calendar.getTime(); //第一次执行定时任务的时间 //如果第一次执行定时任务的时间小于当前的时间 //此时要在第一次执行定时任务的时间加一天,以便此任务在下个时间点执行。如果不加一天,任务会立即执行。 if (date.before(new Date())) { date = this.addDay(date, 1); } Timer timer = new Timer(); NFDFlightDataTimerT ask task = new NFDFlightDataTimerTask(); //安排指定的任务在指定的时间开始进行重复的固定延迟执行。 timer.schedule(task,date,PERIOD_DAY); } // 增加或减少天数 public Date addDay(Date date, int num) { Calendar startDT = Calendar.getInstance(); startDT.setTime(date); startDT.add(Calendar.DAY_OF_MONTH, num); return startDT.getTime(); }

Java多线程详解

JAVA多线程编程详解 一、理解多线程 多线程是这样一种机制,它允许在程序中并发执行多个指令流,每个指令流都称为一个线程,彼此间互相独立。线程又称为轻量级进程,它和进程一样拥有独立的执行控制,由操作系统负责调度,区别在于线程没有独立的存储空间,而是和所属进程中的其它线程共享 一个存储空间,这使得线程间的通信远较进程简单。 具体到java内存模型,由于Java 被设计为跨平台的语言,在内存管理上,显然也要有一个统一的模型。系统存在一个主内存(Main Memory),Java 中所有变量都储存在主存中,对于所有线程都是共享的。每条线程都有自己的工作内存(Working Memory),工作内存中保存的是主存中某些变量的拷贝,线程对所有变量的操作都是在工作内存中进行,线程之间无法相互直接访问,变量传递均需要通过主存完成。 “”“” 多个线程的执行是并发的,也就是在逻辑上同时,而不管是否是物理上的同时。如 ,那么真正的同时是不可能的。多线程和传统的单线程在程序设计果系统只有一个CPU“” 上最大的区别在于,由于各个线程的控制流彼此独立,使得各个线程之间的代码是乱序执 行的,将会带来线程调度,同步等问题。 二、在Java中实现多线程 我们不妨设想,为了创建一个新的线程,我们需要做些什么?很显然,我们必须指明 这个线程所要执行的代码,而这就是在Java中实现多线程我们所需要做的一切! 作为一个完全面向对象的语言,Java提供了类https://www.wendangku.net/doc/b2320267.html,ng.Thread 来方便多线程编程,这个类提供了大量的方法来方便我们控制自己的各个线程。 那么如何提供给Java 我们要线程执行的代码呢?让我们来看一看Thread 类。Thread 类最重要的方法是run(),它为Thread 类的方法start()所调用,提供我们的线程所要执行的代码。为了指定我们自己的代码,只需要覆盖它! 方法一:继承Thread 类,重写方法run(),我们在创建的Thread 类的子类中重写run(),加入线程所要执行的代码即可。下面是一个例子:

springquartz实现定时任务的配置方法

Spring+Quartz实现定时任务的配置方法 第一步:.导入相关的jar包 (1)spring.jar (2)quartz-1.6.0.jar (3)相关包 commons-collections-3.2.jar ; commons-logging-1.1.1.jar; log4j-1.2.16.jar 第二步:创建一个类来定义工作 定义Quartz工作的第一步是创建一个类来定义工作。要做到这一点,你需要从Spring 的QuartzJobBean中派生子类。 第三步:配置JobDetail

值得注意的是,在这里你并没有直接声明一个TopTenTask Bean,而是声明了一个JobDetailBean。这是使用Quartz时的一个特点。 JobDetailBean是Quartz的org.quartz.JobDetail的子类,它要求通过jobClass属性来设置一个Job对象。 使用Quartz的JobDetail中的另一个特别之处是TopTenTask的timeout属性是间接设置的。JobDetail的jobDataAsMap属性接受一个java.util.Map,其中包含了需要设置给jobClass的各种属性。 在这里,这个map包含了一个键值为timeout。当JobDetailBean实例化时,它会将5注入到EmailReportJob的timeout属性中。 第四步:配置Trigger 工作已经被定义好了,接下来你需要调度这个工作。 Quartz的org.quartz.Trigger类描述了何时及以怎样的频度运行一个Quartz工作。 Spring提供了两个触发器,SimpleTriggerBean和CronTriggerBean。 SimpleTriggerBean与ScheduledTimerTask类似。你可以用它来指定一个工作应该以怎样的频度运行,以及(可选地)在第一次运行工作之前应该等待多久。 例如,要调度报表工作每24小时运行一次,第一次在1小时之后开始运行,可以按照以下方式进行声明: 3600000 86400000 属性jobDetail装配了将要被调度的工作,在这个例子中是topTenTask Bean。属性repeatInterval告诉触发器以怎样的频度运行这个工作(以毫秒作为单位)。这里,我们

相关文档
相关文档 最新文档