当前位置: 首页 > 面试题库 >

预初始化工作线程池以重用连接对象(套接字)

涂玉韵
2023-03-14
问题内容

我需要在Java中建立一个工人池,其中每个工人都有自己连接的套接字;当工作线程运行时,它使用套接字,但保持打开状态以备后用。我们之所以决定采用这种方法,是因为与临时创建,连接和销毁套接字相关的开销需要太多开销,因此我们需要一种方法,通过该方法工人池可以通过其套接字连接进行预初始化,以准备在确保套接字资源不受其他线程影响的情况下继续工作(套接字不是线程安全的),因此我们需要遵循以下原则:

public class SocketTask implements Runnable {
  Socket socket;
  public SocketTask(){
    //create + connect socket here
  }

  public void run(){
    //use socket here
  }

}

在应用程序启动时,我们希望初始化工作进程,并希望以某种方式初始化套接字连接…

MyWorkerPool pool = new MyWorkerPool();
for( int i = 0; i < 100; i++)
   pool.addWorker( new WorkerThread());

当应用程序请求工作时,我们会将任务发送到工作池以立即执行…

pool.queueWork( new SocketTask(..));

更新了工作代码
基于Gray和jontejj的有用评论,我使以下代码可以工作…

套接字任务

public class SocketTask implements Runnable {
    private String workDetails;
    private static final ThreadLocal<Socket> threadLocal = 
           new ThreadLocal<Socket>(){
        @Override
        protected Socket initialValue(){
            return new Socket();
        }           
    };

    public SocketTask(String details){              
        this.workDetails = details;
    }

    public void run(){      
        Socket s = getSocket(); //gets from threadlocal
        //send data on socket based on workDetails, etc.
    }

    public static Socket getSocket(){
        return threadLocal.get();
    }
}

执行器服务

ExecutorService threadPool = 
    Executors.newFixedThreadPool(5, Executors.defaultThreadFactory());

    int tasks = 15;  
    for( int i = 1; i <= tasks; i++){
        threadPool.execute(new SocketTask("foobar-" + i));
    }

我喜欢这种方法有几个原因…

  • 套接字是可用于运行任务的本地对象(通过ThreadLocal),从而消除了并发问题。
  • 套接字仅创建一次并保持打开状态,在新任务进入队列时可以重用,从而消除了套接字对象创建/销毁的开销。

问题答案:

一种想法是将Sockets放入BlockingQueue。然后,每当需要Socket线程时take(),线程就可以从队列中移出,并在线程完成处理Socket后将put()其返回队列。

public void run() {
    Socket socket = socketQueue.take();
    try {
       // use the socket ...
    } finally {
       socketQueue.put(socket);
    }
}

这具有其他好处:

  • 您可以返回使用ExecutorService代码。
  • 您可以将套接字通信与结果处理分开。
  • 您不需要一对一的对应关系来处理线程和套接字。但是套接字通信可能完成了98%的工作,因此可能没有收益。
  • 完成并ExecutorService完成后,您可以通过使套接字出队并关闭它们来关闭套接字。

这确实增加了另一个的额外开销,BlockingQueue但是如果您正在进行Socket通信,则不会注意到它。

我们认为ThreadFactory不能满足我们的需求…

我认为,如果您使用线程局部变量,则可以使这项工作有效。您的线程工厂将创建一个线程,该线程首先打开套接字,将其存储在本地线程中,然后调用Runnablearg,该arg使用套接字完成所有工作,从ExecutorService内部队列中取出作业。一旦完成,该arg.run()方法将完成,您可以从本地线程获取套接字并关闭它。

类似于以下内容。有点混乱,但您应该明白。

ExecutorService threadPool =
    Executors.newFixedThreadPool(10,
      new ThreadFactory() {
        public Thread newThread(final Runnable r) {
            Thread thread = new Thread(new Runnable() {
                public void run() {
                    openSocketAndStoreInThreadLocal();
                    // our tasks would then get the socket from the thread-local
                    r.run();
                    getSocketFromThreadLocalAndCloseIt();
                }
            });
            return thread;
        }
      }));

因此,您的任务将实现Runnable 并如下所示:

public SocketWorker implements Runnable {
    private final ThreadLocal<Socket> threadLocal;
    public SocketWorker(ThreadLocal<Socket> threadLocal) {
       this.threadLocal = threadLocal;
    }
    public void run() {
        Socket socket = threadLocal.get();
        // use the socket ...
    }
}


 类似资料:
  • 我的项目的设置是- 用于持久化的Spring JDBC 下面是我的应用程序的日志,它捕获了与数据库的交互。 日志中有两件事是清楚的- 连接池仅在收到执行查询的第一个请求时才开始创建连接 一个包含4个连接的池需要将近30秒的时间来初始化 我的问题是- 如何配置DBCP在启动时自动初始化? 创建连接真的需要那么长时间吗? 注意:请不要建议切换到C3P0或Tomcat连接池。我知道这些解决方案。我更感兴

  • 问题内容: 我正在尝试为我的Web应用程序配置HikariCP。我没有使用任何框架,它是一个简单的简单Java Web应用程序。当我尝试通过普通的JDBC建立连接时,它成功了,并且能够执行所有数据库操作。 但是,当我尝试与连接池建立连接时,初始化后却收到了一个我不知道的异常。 下面是我正在使用的配置,我正在上下文侦听器中对其进行初始化。我在Java 1.7上运行,带有使用HikariCP Java

  • 问题内容: 我无法确定为什么在我的Hibernate应用程序中初始化c3p0连接池需要2分钟。 这是在我的Hibernate.cfg.xml中: 构建会话工厂时,连接设置在我的HibernateUtil文件中设置。 当测试中的第一个事务为openend时,池将初始化。之后,连接和查询数据库就可以正常工作,它在开始之前仅在以下行上挂起一会儿。我对输出进行了格式化,因为我认为问题可能出在这里提到的一种

  • 问题内容: 我在玩图书馆。我想从PostgreSQL数据库中检索数据。我得到的错误对我来说很奇怪。即使我手动配置CP: 我仍然看到错误。这是我的DAO: 该应用程序: 我的档案 错误: 我错过了什么? 问题答案: 要加载,应提前调用scalikejdbc-config 。 http://scalikejdbc.org/documentation/configuration.html#scalike

  • 我正在使用hikaricp(这可能也适用于任何其他数据库连接池)。我有一个DBPool类,在其中我实例化了一个HikariDataSource(使用HikariConfig对象)。对于这个DBPool,我使用lazyholder习惯用法来限制每个VM一个池实例。但是,一旦获得对池的引用,就可以检索连接对象(无需任何进一步的锁/同步/信号量检查),因为我认为连接池会处理我的连接对象限制。每次通过数据

  • 以下是MyService应用程序: 我已经指定了@AllargsConstructor。当我试图为上面的类编写单元测试时,它失败了。以下是我如何编写单元测试: 抛出的错误是: Java:类中的构造函数MyService不能应用于给定类型;必填:未找到参数:原因:实际参数列表和正式参数列表的长度不同 但当我在MyService中显式定义构造函数时,测试就会通过。这里有人能帮我吗?