Java按行读取大文件

通常读取一个文件都是直接把这个文件转化为流的形式，但是对于一个容量为几个G的文件，这很显然是不明智的做法，当前我需要将几个G的文件读取，然后插入到数据库，使用的是一个commons的jar包，尝试了一下，真的很不错。

pom


<dependency><groupId>org.apache.commons</groupId><artifactId>commons-io</artifactId><version>1.3.2</version>
</dependency>

demo

  @Testvoid insert() throws Exception {LineIterator it = FileUtils.lineIterator(new File("E:\\1\\jingyou.json"));try {while (it.hasNext()) {String line = it.nextLine();}} catch (Exception e) {e.printStackTrace();} finally {LineIterator.closeQuietly(it);}}

Java按行读取大文件相关推荐

java 按行读取大文件文件内容_Java实现按行读取大文件
Java实现按行读取大文件 String file = "F:" + File.separator + "a.txt"; FileInputStream fis ...
Java按行分割大文件
简介工作的时候,需要将一个大的文本文件按行分割成几个小文件.本来懒得写,想网上copy一下得了,但是 google 了一遍,找了几个代码写的有点乱,尝试了之后发现效率太慢了,一个 1000000 行 ...
java高性能线程读取大文件并分段分流翻译入库
需求是一个每天读取单个文件在1个G到3G之间,数据量在400万左右,读取完成后,调用谷歌翻译成中文后,再保存到数据库实现方面采用多线程,RandomAccessFile读取,缓冲区分流,其中还用到了 ...
java按行读取txt文件内容_对txt文件中的内容进行排序
如果您的文件中每行都有单词或术语,则可能需要对其进行排序.Java Arrays.sort是执行此操作的常用功能.Collections.sort()是另一个不错的说法.这是一个示例和代码. 在文件E ...
Java高效读取大文件
1.概述本教程将演示如何用Java高效地读取大文件.这篇文章是Baeldung(http://www.baeldung.com/) 上"Java--回归基础"系列教程的一部分. ...
Java高效读取大文件（转）
Java高效读取大文件 1.概述本教程将演示如何用Java高效地读取大文件.这篇文章是Baeldung(http://www.baeldung.com/) 上"Java--回归基础&quo ...
python读取大文件的某行_Python按行读取文件的实现方法【小文件和大文件读取】...
本文实例讲述了Python按行读取文件的实现方法.分享给大家供大家参考,具体如下: 小文件: #coding=utf-8 #author: walker #date: 2013-12-30 #func ...
java并发读取相同的文件_高效读取大文件，再也不用担心 OOM 了！
最近阿粉接到一个需求,需要从文件读取数据,然后经过业务处理之后存储到数据库中.这个需求,说实话不是很难,阿粉很快完成了第一个版本. 内存读取第一个版本,阿粉采用内存读取的方式,所有的数据首先读读取到 ...
java读取1g超大图片_java读取大文件1G+ | 学步园
正常读取大文件,可能会想到用缓存如: package base; import java.io.BufferedInputStream; import java.io.BufferedReader; ...

Java按行读取大文件

pom

demo

Java按行读取大文件相关推荐

最新文章

热门文章