> Стоит Ubuntu 10, 4Gb памяти. Есть squid access.log 2.6Gb.
> cat access.log | awk '{if($1 < 1304452799) {print}}' > access.log_new
> Проблема в том, что оперативная память забивается и я получаю логичный результат
> "Out of memory!"

Ума не приложу, чем бы это он логичный. Построчная обработка - куда памяти-то деваться?

Как варианты телодвижений:

1. выкинуть cat
awk '$1 < 1304452799' <access.log > access.log_new

2. попробовать _разные реализации awk - mawk, gawk, ?

3. приделать fflush() (только gawk?)
awk '$1<1304452799{print}NRP000==0{fflush()}' ...

(раз уж вовремя не сделали rotate логов) я бы попробовал "разрезать" его на несколько файлов поменьше, с помощью split(1), а затем уже обрабатывать их.

> Проблема в том, что оперативная память забивается и я получаю логичный результат
> "Out of memory!"
> Что делать? Помогите пожалуйста.

память это вряд ли.
ведь еще swap есть? или нет?

а скорее всего где то 32-битное число переполняется.
ведь система i386?
или amd64?

посмотрите что у awk с поддержкой 64-bit и файлов больше 2G
перекомпилируйте/найдите другой awk

> Привет всем.
> Стоит Ubuntu 10, 4Gb памяти. Есть squid access.log 2.6Gb.
> Нужно переместить из этого файла все строки до определенного числа в другой
> файл.
> cat access.log | awk '{if($1 < 1304452799) {print}}' > access.log_new
> Проблема в том, что оперативная память забивается и я получаю логичный результат
> "Out of memory!"
> Что делать? Помогите пожалуйста.

SIZEOF_FILE=$(du -b /var/log/squid/access.log 2>&1 | awk '{print $1}')
LINES=$(echo "(2^32-1)/80" | bc);  

for (( i=1; i < $(($SIZEOF_FILE / $LINES )); i++ ))  
      do  
         tail -n $(($LINES*$i)) /var/log/squid/access.log;
done

как-то так

[cut]