有个 23GB 的 TXT，想搜索里面某特定字符，有什么快速办法？

字符

txt

特定

搜索

30 replies • 2015-12-09 00:28:25 +08:00

1

pupboss

Dec 7, 2015

1

全部放到内存

2

lsmgeb89

Dec 7, 2015

1

grep 下？感觉有 UI 的编辑器 hold 不住哈

3

lshero

Dec 7, 2015

1

如果是一行一行的日志的话切割成多份一份一份的找

4

tracyone

Dec 7, 2015 via Android

1

grep ack ag perl …

5

hahasong

Dec 7, 2015

1

用 java 一行一行的读，写个循环

6

kokutou

Dec 7, 2015

1

winhex ...

7

c0mmand

OP

Dec 7, 2015

@pupboss 没这么大内存的机器
@lsmgeb89 正准备这么做，找到这行数据后，有没有办法把这行数据的前后几百行一共拷贝出来呢？
@lshero 办法可行，有点麻烦。
@tracyone Linux 小白，参数具体意义？
@hahasong 不会 Java 。

8

Slienc7

Dec 7, 2015

1

随便什么语言 ReadLine

9

tracyone

Dec 7, 2015 via Android

1

@wuxiao2522 前三个是命令行程序，后面一个是脚本语言，都是用于文本查找的，特点和快慢有所不同，自己搜索下关键字和正则表达式

10

bk201

Dec 7, 2015

1

readline 只适合有换行符的吧，而且换行符的哪一行还得小。
按字节读取或者分割。

11

c0mmand

OP

Dec 7, 2015

@kokutou 感谢，已经 winhex 搞定。
@tracyone 谢谢，已经解决了。

12

kxjhlele

Dec 7, 2015

sep 也可以把，

13

skydiver

Dec 7, 2015

前后两百行： grep -C 200 <strtofind> <filename>

14

dzxx36gyy

Dec 7, 2015 via Android

曾经我也纠结过怎么打开 23g 的某社工库 txt ……

15

abelyao

Dec 7, 2015 via iPhone

@dzxx36gyy 哪个库啊？

16

ryd994

Dec 7, 2015 via Android

read(n)不就好了么？
多少 G 都行啊

17

dzxx36gyy

Dec 7, 2015 via Android

@abelyao soyun

18

lululau

Dec 7, 2015

如果你能估计要检索出的结果在文件中的偏移量，或者文件是有序的，可以用二分查找之类的：

# 显示一个文件中从第 50G 个字节开始的长度为 1K 字节的内容
offset=$((50*1024*1024*1024-1))
length=1024
dd if=file_name bs=1 skip="$offset" count="$length" | grep regex

如果不是这个情况，那就搞不懂这个问题到底是啥意思了