Непонятные глюки с перенаправлением вывода 0

А может, там и нет ничего, в фифе-то?

cat | grep — масло маслянное, достаточно просто

grep -E «*(connection|kernel|compil|upload|download)» /tmp/distccd-logclean

Попробуй не переписывать /var/log/messages, а добавлять к нему:

grep -E «*(connection|kernel|compil|upload|download)» /tmp/distccd-logclean >> /var/log/messages

Good Luck,

UT

Аднака,

man tail

/-f

Ибо файл изменяется после открытия, но ни cat, ни less, ни grep на это не рассчитаны.

Так что

tail -f /var/log/your_file.log | grep 'bla-bla-bla' > /path/to/output_file.txt

Не-а. Не работает ни тот ни другой вариант.

2 Genie: тут не файл а FIFO, так шо какая нах разница? Но попробовал и через tail — не работает. Причем такая интересная вещь:

cat /tmp/distccd-logclean > /var/log/messages

выводит как и нада все из пайпа в лог.

А grep -E «*(connection|kernel|compil|upload|download)» /tmp/distccd-logclean > (или >>) /var/log/messages не работает. Блин.

хммм..

а что даст

fuser -auv /var/log/messages

?

Genie
хммм..

а что даст

fuser -auv /var/log/messages

?

когда в логи ничего не форвардицца:

longobard root # fuser -auv /var/log/messages
                     USER        PID ACCESS COMMAND
/var/log/messages

Когда форвардицца через grep -E «*(connection|kernel|compil|upload|download)» /tmp/distccd-logclean > /var/log/messages

longobard root # fuser -auv /var/log/messages
                     USER        PID ACCESS COMMAND
/var/log/messages    root      12222 f....  grep

О! Обнаружил инетересную вещь: через некоторое (хз какое, тока что с пяьнки пришел) время, в mesages появляется все шо должно там быть. Это навевает меня на мысль про то что cat и grep по разномы выводят, что grep буфферизирует поток и видимо сбрасывает буфер не сразу. Ща на еще одну пьянку сбегаю и попробую вкурить шо там за дело. Мона как-нить сделать шоб при буфферизированом выводе буфер сразу сбрасывался не прибегая к изменению сырцов grep?

Причем в messages скидываются из буфера не все залогированное разом, а по букве :) Например окончание содержимого может быть таки:

Jul  9 22:29:46 longobard pure-ftpd: (?@10.1.11.202) [INFO] New connection from 10.1.11.202
Jul  9 22:29:46 longobard pure-ftpd: (?@10.1.4.133) [INFO] New connection from 10.1.4.133
Jul  9 22:30:03 longobard purlongobard root #

Попробовал вместо grep попользовать sed — тот же самый результат :( Раз в N промежуток времени (довольно большой) в messages сваливается выхлоп :(

Пробовал вместо messages выхлоп направлять в другой FIFO канал из которого читаю. Та же лажа :(

Единственное, что приходит в голову, sync раз в какое-то время?

Good Luck,

UT

Uncle Theodore
Единственное, что приходит в голову, sync раз в какое-то время?

Good Luck,

UT

КАК? Мне тут наш местный гуру из локалки сказал что

tail -f file1 | grep xxx > file2 из local.start

Это тож не работает. Он пояснил почему:

из-за той же буферизации. Без буферизации куча времени бы тратилась на I/O. Если хочешь похакать — см. /usr/src/linux/include/linux/limits.h, PIPE_BUF

Хачить ядро желания нету. Блин, мож мона как-нить по другому? Задача такая:

Итак есть лог. Я его хочу отфильтровать от лишнего мусора и отфильтроаный контент запихнутть в другой файл. При этом я хочу делать это не по крону а постоянно, т.е. чтоб как тока в первый файл поступит сообщение, оно (уже отфильтрованное) сразу же появилось во втором файле. Как енто сделать?

Попробуй запустить другой процесс, типа

while [ 1 == 1 ]; do

sync

sleep 1

done

Я не очень понимаю, причем тут атомарный размер записи в пайпу, в ядре он аж 4K, но раз гуру сказал дело в буферах, попробуй их спускать раз в секунду…

Good Luck,

UT

Uncle Theodore
Попробуй запустить другой процесс, типа

while [ 1 == 1 ]; do

sync

sleep 1

done

Я не очень понимаю, причем тут атомарный размер записи в пайпу, в ядре он аж 4K, но раз гуру сказал дело в буферах, попробуй их спускать раз в секунду…

Good Luck,

UT

sync не помогает. Т.е. я делаю

grep -E "*(connection|kernel|compil|upload|download)" /tmp/distccd-logclean > /var/log/messages

А на другой консоли делаю некие действия, которые должны заноситсяв логи, лазаю по фтп, а потом делаю sync. В /var/log/messages нету никуя.

Попробуйте пожалуйста кто-нить сделать на своем компе следующее:

mknod /tmp/test p
test-word=pure-ftpd
#test-word присваиваем то слово, которое часто встреается в логах. Например хотим #отфильтровать шоб в логах были тока предложения с pure-ftpd. Тогда делаем test-word=pure-ftpd
#Далее в sysklogd.conf (если другой демон - то в его конф) прописать шоб все логи сливались в #/tmp/test
#рестартим лог-демон (в моем случае sysklogd
grep -E "*($test-word)" /tmp/distccd-logclean > /var/log/messages
#теперь делаем действия, которые должны быть логированы. Например лазим по фтп - тогда #пурефтпд скажет в лог че-нить
#теперь идем на другую консольку
sync
cat /var/log/messages

Че у вас получится в результате последней команды? Я уже грешу на ядро (коливас ck5 у меня).

Поигрался с приоритетом задачи. Не помогло. И SCHED_NORM,SCHED_BATCH, SCHED_ISO попробовал, даже SCHED_RR!!!! Нифига :(

UP! Ну что, никаких идей чтоли? помогите же!

tail -F -s 1 /path/to/log | grep «bla-bla-bla» > /path/to/another.log

?

Genie
tail -F -s 1 /path/to/log | grep «bla-bla-bla» > /path/to/another.log

?

Не работает. tail -F -s 1 /path/to/log не работает. Попробуй сам.

Извините если что не так, я тоже спьяну.

А grep вообще идет, проверяли? Дело в том, что (afaik) syslog переоткрывает свой файл на каждую запись. А когда он его закрывает, grep gets eof and dutifullly exits. По моему так.

vnp
Извините если что не так, я тоже спьяну.

А grep вообще идет, проверяли? Дело в том, что (afaik) syslog переоткрывает свой файл на каждую запись. А когда он его закрывает, grep gets eof and dutifullly exits. По моему так.

grep идет, проверял ессно. Все работает без перенаправления. А как тока направляю куда-нить — все, куй там был.

короче, use logger

Genie
короче, use logger

Не, так неинтересно. Тогда все месааги в логе буду от процесса logger. Нунах.

Ёпть!!!

man logger

/-t

[root@host:~]# logger -t TestLog "Trying to log this message."
[root@host:~]# grep TestLog /var/log/messages
Jul 12 15:01:26 host TestLog: Trying to log this message.
[root@host:~]#

Genie
Ёпть!!!

man logger

/-t

[root@host:~]# logger -t TestLog "Trying to log this message."
[root@host:~]# grep TestLog /var/log/messages
Jul 12 15:01:26 host TestLog: Trying to log this message.
[root@host:~]#

НУ? А мне нада шоб подписано было не TestLog и не Logger а как это изначально было в логе, например pure-ftpd или distccd

…….

logger -t pure-ftpd «Message»

Genie
…….

logger -t pure-ftpd «Message»

А если там не пуре-фтпд? :)))))