TIB5651Tr yazılımı (Static-Dynamic-Elle girilen kayıt dışı IP Raporlama)

[aakdeniz]

Aydın Bey,
2.1 64bit versiyonu için perl i hangi linkten kurmalıyız acaba?

[Bulo]

Merhaba

Öncelikle Aydın beyin gösterdiği ilgiye ve 2.1 de perl hakkında ki bilgilendirmesine de teşekkür etmek isterim. Yazılım Sistemde perl kurulu ise hiç bir sorun çıkarmadan default olarak çalışacak durumdadır. paketler içerisinde perl yok ise mail için kurulan pakette perl5 otomatik olarak zaten yükleniyor. Dolayısı ile sh dosyalarında perl satırını perl5 olarak değiştirip perli çalıştırabilirsiniz. Lahana1 arkadaşıma daha önce belirttiğim gibi yazılım squid quardın access dosyasına bağlı çalışmakta bu dosyanızın boyutu çok uzunsa sonç doğru olabilir. çünkü yazılım günlük orjinal access dosyasını ve convert edilmiş dosyasını ve  kullanıcıların internet loglarını ayıran dosyalara sahiptir. Basit hesapla 20mb olan access dosyası +20 convert dosyası +20 kullanıcı logları olarak değerlendirmelidir. kalanı diğer dosya hacimleridir. Ancak 20 bilgisayarın için 530MB bana da çok gibi geliyor. PFsense Squid ve Quard ayarlarını bir kontrol edip sağlıklı olduğundan emin olmanızdan sonra dilerseniz bir şekilde aldığınız dosyayı bana göndermeniz halinde inceleyip size geri dönerim.

PFSense 64 bit kurulu ise paketlerle ilgili verilen linklerden 64 bit olan paketleri indirip kurunuz. Açıklama dosyasındaki linkler 32 bit'e göredir.

Selam ve sevgilerimle
Bülent ÖZKAN

[lahana1]

@Bulo:

Merhaba

Öncelikle Aydın beyin gösterdiği ilgiye ve 2.1 de perl hakkında ki bilgilendirmesine de teşekkür etmek isterim. Yazılım Sistemde perl kurulu ise hiç bir sorun çıkarmadan default olarak çalışacak durumdadır. paketler içerisinde perl yok ise mail için kurulan pakette perl5 otomatik olarak zaten yükleniyor. Dolayısı ile sh dosyalarında perl satırını perl5 olarak değiştirip perli çalıştırabilirsiniz. Lahana1 arkadaşıma daha önce belirttiğim gibi yazılım squid quardın access dosyasına bağlı çalışmakta bu dosyanızın boyutu çok uzunsa sonç doğru olabilir. çünkü yazılım günlük orjinal access dosyasını ve convert edilmiş dosyasını ve  kullanıcıların internet loglarını ayıran dosyalara sahiptir. Basit hesapla 20mb olan access dosyası +20 convert dosyası +20 kullanıcı logları olarak değerlendirmelidir. kalanı diğer dosya hacimleridir. Ancak 20 bilgisayarın için 530MB bana da çok gibi geliyor. PFsense Squid ve Quard ayarlarını bir kontrol edip sağlıklı olduğundan emin olmanızdan sonra dilerseniz bir şekilde aldığınız dosyayı bana göndermeniz halinde inceleyip size geri dönerim.

PFSense 64 bit kurulu ise paketlerle ilgili verilen linklerden 64 bit olan paketleri indirip kurunuz. Açıklama dosyasındaki linkler 32 bit'e göredir.

Selam ve sevgilerimle
Bülent ÖZKAN

Bülent Bey loglar günlük olarak gelmiyor her seferinde en baştan geliyor pfsense kurulu makina 5-6 aydır çalışıyor ve gelen logları ilk günden son güne kadar geliyor böyle olunca da dosya her seferinde biraz daha büyüyor. admin için olmayanın büyüklüğü 120 mb civarı açınca 1,5 gb oluyor.

http://j1305.hizliresim.com/19/v/nhz3m.jpg

[Bulo]

Sevgili Lahana1
Anladığım kadarıyla günlük logların önceki günlük logların üzerine ilave edilmiş olararak artan bir düzende gelmekte. Doğrumu anladım. Eğer doğru ise Squid + Squid Quard kurulumlarını gözden geçirmen gerekecek. Neden mi Bu yazılımlar /var/Squid dizininde ilgili log klasöründe access isimli bir log dosyası oluşturur ve bu dosyasını hergün saat 00:00 da sıfırlar. Sanırım sende bu sıfırla olayı hiç olmuyor dolayısı ile access dosyası kurduğun gündeki gibi duruyor ve üzerine sürekli ileve ediyor. TIB 5651 bu access dosyasını kullanarak analizlerini yapar ki o nedenledirki yazılım bu sıfırlama hadisesi olmadan access dosyasını kopyalar (saat 23:45 olayı bundandır)
Cron üzerinde Squid access sıfırlaması ile ilgili komut zamanlaması vardır buradanda inceleyebilirsin bu dosyada çalışmıyor olabilir.

Selam ve Sevgilerimle
Bülen ÖZKAN

[lahana1]

@Bulo:

Sevgili Lahana1
Anladığım kadarıyla günlük logların önceki günlük logların üzerine ilave edilmiş olararak artan bir düzende gelmekte. Doğrumu anladım. Eğer doğru ise Squid + Squid Quard kurulumlarını gözden geçirmen gerekecek. Neden mi Bu yazılımlar /var/Squid dizininde ilgili log klasöründe access isimli bir log dosyası oluşturur ve bu dosyasını hergün saat 00:00 da sıfırlar. Sanırım sende bu sıfırla olayı hiç olmuyor dolayısı ile access dosyası kurduğun gündeki gibi duruyor ve üzerine sürekli ileve ediyor. TIB 5651 bu access dosyasını kullanarak analizlerini yapar ki o nedenledirki yazılım bu sıfırlama hadisesi olmadan access dosyasını kopyalar (saat 23:45 olayı bundandır)
Cron üzerinde Squid access sıfırlaması ile ilgili komut zamanlaması vardır buradanda inceleyebilirsin bu dosyada çalışmıyor olabilir.

Selam ve Sevgilerimle
Bülen ÖZKAN

Bülent bey doğru anlamışsınız sürekli eklenerek geliyor loglar yeniden kurulumda pek yapmak istemiyorum aslında. aylar resimdeki gibi nerede yanlışım var bulamadım. Bütün logları nasıl temizleyebilirim yardım edebilirmisiniz.

http://p1305.hizliresim.com/19/w/nk35t.jpg

http://p1305.hizliresim.com/19/w/nk363.jpg

http://o1305.hizliresim.com/19/w/nk369.jpg

[technical]

Log rotate ile ilgili alanlar hem squid hemde squidguard da tanımlanmamış.

bu alanları Bulo arkadaşımızdan gelen öneriye göre doldurursanız sorununuzu aşarsınız.

[xxpl]

merhaba hocam öncelikle yayınlamış olduğunuz bu güzel paylaşımlardan dolayı emeği geçen arkadaşlarıma teşekkür ederim

captive portal ve free radius kurulu logları windowsa başarılı bir şekilde aktarıyorum bir sonraki gün logları aktarırken önceki günlere ait loglarıda tekrardan aktarıyor…

aktarıdığı logları pfsensede aktardıktan sonra otomotik nasıl silmesini sağlayabilirim...

ilginiz için şimdiden teşekkür ederim...

[lahana1]

@xxpl:

merhaba hocam öncelikle yayınlamış olduğunuz bu güzel paylaşımlardan dolayı emeği geçen arkadaşlarıma teşekkür ederim

captive portal ve free radius kurulu logları windowsa başarılı bir şekilde aktarıyorum bir sonraki gün logları aktarırken önceki günlere ait loglarıda tekrardan aktarıyor…

aktarıdığı logları pfsensede aktardıktan sonra otomotik nasıl silmesini sağlayabilirim...

ilginiz için şimdiden teşekkür ederim...

aynı sorun bende de var.

[davit]

Merhaba arkadaslar öncelikle tşk ederim ben konuda anlatılanların bir önceki versinunu kullanıyordum ve buna geciş yaptım. herhangi bir sorun yok gibi gözüküyor.

/sbin/TIB5651ARPrun.sh  ilk olarak 5 dakikada bir bu çalışlıyor ve bilgileri atiyor ama /sbin/TIB5651ANLrun.sh bunu manuel olarak caliştir dedigimde
MESAJ : Gunluk Loglari Kopyala
MESAJ : Gunluk Loglari Kopyala [ OK ]
MESAJ : System Config Olustur
MESAJ : System Config Olustur [ OK ]
MESAJ : Access Time-Userlog Olustur (Bekleyiniz) burda kaliyor bunu nedeni acaba ne olabilir.  /sbin/dhcplistcronsmb.sh bu eski versiyon komutta logları dusgun veriyor simdiden tşk ederim alakanıza.

[davit]

MESAJ : Gunluk Loglari Kopyala
Base:Access copy hatasi. : No such file or directory at PFSenseTIB5651.pl line 73.
a Tib5651_Admin
a Tib5651_Admin/BaseDailyLog
a Tib5651_Admin/UserLog
a Tib5651_Admin/TemporaryFiles
creating lame upcase table
creating lame lowcase table
Domain=[KONSOLOS] OS=[Windows Server 2003 3790 Service Pack 2] Server=[Windows Server 2003 5.2]
simdide bu hatayı alıyorum arkadaslar bunu sebebi ne olu acaba..

[Bulo]

Selam Arkadaşlar

Geciktiğim için özür dilerim
Öncelikle şunu tekrar belirteyim yazılımın temel aldığı log dosyası Squid tarafından üretilen access.log dosyasıdır. Bu dosya  var/squid/logs/access.log dizinide bulunmaktadır. Cron resimde olduğu gibi kırmızı renkli çerçeve içerisinde olan 0 saat ve 0 dakikada hergün ve her ay olarak kodlu olan komut dizisi squid tarafından oluşturulan cash dosyaları ile squit -k rotate
yazılımı ilede access.log dosyasını sıfırlamaktadır. Bu komut yapısı squid (ve squid quard) kurulduğunda otomatik olarak oluşturulmakta bununla ilgili olarak yapılması gereken herhangi başka bir ayar yok. Eğer Cron üzerinde bu yapı yok ise problem burada başlıyor. Ozaman Squid ve Squid Quard kurulumlarının nasıl olması gerektiği ile ilgili forumdaki bilgilere bakmalısınız (Cache-lan log kutucuklarının işaretlenmesi vs gibi ayarları yapmalısınız) Yazılım hem 32 bit hemde 64 bit üzerinde normal çalışmakta. 64bit farkı açıklamada verilen paketlerin 64 bit olanlarının internet üzerinden indirilip kurulması ile sağlanmalı tek fark bu. Yine Cron üzerindeki mavi kutucukta olan komut dizisi her 5 dakikada bir sisteme dahil olan kullanıcıları
raporlayan yazılımı çalıştırır, sarı renkteki çerçevede olan komut ise saat 23:45 de günlük raporun alınması yazılımını çalıştırır. Eğer Access kopyalama hatası alıyorsanız var/squid/logs/access.log dizininde access.log dosyasının olmayışıdır.
Dawit nick isimli arkadaşımızın Mesaj Time-User log oluştur mesajının manasına
Bu işleme başlandığında ilgili access.log dosyası her satırı tek tek okunarak time-stamp yani zaman damga bilgisi okunabilir hale getirilerek ayrı bir dosya içerisine keydedilir ve aynı zamanda userlog dizini içerisine o satır bilgisi hangi ip numarasına ait ise ilgili ip dosyasına kaydedilir. bu işlemler bitince access dosyasındaki ip lerin bir listesi çıkarılarak mükerrer olanlar atılır. Dolayısı ile bu işlem ana access.log dosyasının uzunluğu ile doğru orantılı olarak kısa veya biraz uzun sürede bitebilir. (Bilgisayar Donanım Sistemininde payı olduğunu unutmayalım)
Base:Access copy hatasi. : No such file or directory at PFSenseTIB5651.pl line 73. ise /var/squid/logs/ dizininde access.log dosyasının olmadığını söylemekte.

Selam ve Sevgilerimle
Bülent ÖZKAN

Not : Yazılım captive portal ortamında henüz denenmedi dosyısı ile sorun yaratırmı bilmiyorum ilerleyen süreçte captive portal ile ilgili bir çalışma yapacağım ama nezaman olduğunu kesin olarak söylemem mümkün değil şimdiden özür dilerim.

[davit]

öncelikle verdigin cvb icin cok tşk ederim. ewt aynen dediginiz gibi acces log dosyasindan kaynakli imiş. ve suan icin bir sorunum bulunmamaktadir. yapmış oldugunuz bu uygulama icin cok tşk ederim..(:

[technical]

mail gönderme sisteminde sorun var gibi

Invalid response for STARTTLS: 503 Bad sequence of commands
at /var/TIB5651Tr/PFSenseMAIL.pl line 71

her seferinde bu kodu aldım

dosyaları tamamen silip tekrar yükledim

cfg dosyasını el ile düzenledim ama halen aynı hata geliyor.

Gözüme çarpan diğer hata ise

Failed to load upcase.dat, will use lame ASCII-only case sensitivity rules
Failed to load lowcase.dat, will use lame ASCII-only case sensitivity rules

bunların anlamı nedir acaba  ?

Güncelleme : gmail yapılandırması ile çalışıyor kendi firmamızın SMTP sunucusu ile yapılandırınca çalışmıyor.
bu sorunu nasıl aşarız ? @ Bülent bey sorun TLS den mi kaynaklanıyor acaba ?

2. Güncelleme TLS den kaynaklanıyor her mail sunucusu TLS ile çalışmıyor haliyle buda sorun teşkil ediyor @ Bülent bey sorunu çözmemiz lazım.

[Ekrem]

23:45 değilde 22:10 da rapor almasını istiyorum cron dan ekledim dün almadı…İlla 23:45 olmasımı lazım??

[lahana1]

@Ekrem:

23:45 değilde 22:10 da rapor almasını istiyorum cron dan ekledim dün almadı…İlla 23:45 olmasımı lazım??

hayır istediğin bir saat olur

[Ekrem]

Su şekilde verdim bakalım bugün alacakmı manuel olarak konsoldan komut verdiğimde veriyor..

[lahana1]

ben de access.log dosyası hiç bir şekilde sıfırlanmıyor. crona 0 0 * * * root /bin/rm /var/squid/cache/swap.state; /usr/local/sbin/squid -k rotate komutunuda ekledim ama gün sonunda sıfırlanmıyor gelen loglar diğer günle birleşerek geliyor sorun squid3 ile ilgili olabilirmi.

[technical]

@lahana1:

ben de access.log dosyası hiç bir şekilde sıfırlanmıyor. crona 0 0 * * * root /bin/rm /var/squid/cache/swap.state; /usr/local/sbin/squid -k rotate komutunuda ekledim ama gün sonunda sıfırlanmıyor gelen loglar diğer günle birleşerek geliyor sorun squid3 ile ilgili olabilirmi.

komut şu şekilde bide böyle deneyin

/bin/rm /var/squid/cache/swap.state; /usr/local/sbin/squid -k rotate -f /usr/local/etc/squid/squid.conf

olmazsa

/bin/rm /var/squid/cache/swap.state.clean; /usr/local/sbin/squid -k rotate -f /usr/local/etc/squid/squid.conf

bunu da deneyin.

düzenleme : malesef squid3 de bug var gibi access.log dosyası swap.state veya swap.state.clean komutu ile düzelmiyor alternatifi araştırıyorum.

bakalım marchelloc ye mesaj atacam ne diyecek.

[Bulo]

Merhaba

Sevgili Technical
Kendimde bir mail server olmadığından bunu deneme ve gözleme şansım olmadı. Ben bir firmadan mail paketi kullanarak işlemlerimi yaptığım için
o firma erişimleri  gmail-hotmail gibi bilindik mailleri kullanarak gönderim yaptım. Bu konu ile ilgili bir çalışma yapayım takıldığım yer olursa sizinle haberleşirim.

Selam ve sevgilerimle
Bülent ÖZKAN

Acces dosyasının neden sıfırlanmadığı hakkında da uğraşacağım bu konuda sıkıntılı olan bir iki arkadaşımız var. Umarım o sorunuda çözeriz.
Ayrıca arkadaşlarımıza verdiğiniz destek içinde teşekkürler.

[Ekrem]

otomatik olarak almıyor günlük raporları…ne yaptım sa çalışmadı..manuel olarak alıyorum ama otomatik almıyor.