mongodb java批量写入数据_利用java多线程写的一个工具向MongoDb中存储大量数据

最新推荐文章于 2023-12-18 15:07:19 发布

飞翔的袋鼠弟

最新推荐文章于 2023-12-18 15:07:19 发布

阅读量1.1k

点赞数 1

CC 4.0 BY-SA版权

文章标签： mongodb java批量写入数据

本文链接：https://blog.csdn.net/weixin_42451850/article/details/114247458

这是一个使用Java实现的多线程工具，用于从E盘的HTML文件中读取内容并批量写入MongoDB的mydb数据库mycol集合中。通过创建一个生产者线程获取文件，以及多个消费者线程并发地将文件内容存储到MongoDB。程序首先遍历指定目录下的HTML文件，然后利用Pool类进行文件管理和线程同步，确保数据的有序写入。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1 importjava.io.BufferedReader;2 importjava.io.File;3 importjava.io.FileInputStream;4 importjava.io.IOException;5 importjava.io.InputStreamReader;6 importjava.util.LinkedList;7 importjava.util.List;8 importorg.bson.Document;9 importcom.mongodb.MongoClient;10 importcom.mongodb.client.MongoCollection;11 importcom.mongodb.client.MongoDatabase;12

13 public classTest {14 public static voidmain(String[] args) {15 Pool p = newPool();16 Produce pro = new Produce("p",p);//一个生产者17 //三个消费者，用来向mogodb中存储数据

Customer cus = new Customer("c", p);18 Customer cus2 = new Customer("c2", p);19 Customer cus3 = new Customer("c3", p);20 newThread(pro).start();21 newThread(cus).start();22 newThread(cus2).start();23 newThread(cus3).start();24

25 }26 }27

28 class Produce implementsRunnable{//生产者29

30 private static final String DIR = "E:\\targets";//扫描文件路径

31 private static final String FILE_SUFFIX = "html";//扫描文件类型

32 priva