Dotaz: mereni trafficu podle IP na iGW s MASQ a vicero sitovkama

[Zdeněk Štěpánek]

Zdravim

Mam firewall+maskaradu+router v jednom pocitaci a potreboval bych merit kolik ktera IP z vnitrni site sosa za urcite obdobi z internetu (de facto mi staci za mesic).

Chtel bych neco jednodussiho, nechci zadne SNMP protokoly, Cacti, MRTG, Hotsanic a co ja vim jeste.

Zkousel jsem:
http://ipaccounting.standus.com/scr.php
Funguje az na jedan podstatny detail, meri IPcka jen z lokalnich subnetu (bere IP z arp tabulky). Takze pro sit s 10ti routery ponekud nepouzitelne.

http://palo.blacksuns.net/dobs/
Zkompiloval jsem s chybama. Kdyz uz se to vyjimecne spustilo tak to za chvili chciplo a nic nenamerilo.

IPFM + scr-ipfm
Tim jsem meril na externi sitovce (inet). Kdyz jsem to filtroval na 10.0.0.0 tak to nenamerilo vubec nic (pochopitelne). Bez filtrovani mi to ukazalo na jake webove adresy lidi v siti chodi a kolik dat tam proteklo. Uzitecne, ale ja to nepotrebuju. Navic se ten program choval nejak divne, neustale plnil log ze zapina a vypina promiscuitni mod, navic i na sitovkach ktere nemel v konfiguraku. A nechtel se nechat ukoncit, ani "killall ipfm" na nej nestacil.

Momentalne kompiluju ntop, ale nevim jestli to bude ono.

Premyslim nahlas:
Pocitadla zalozeny na chainech v iptables musi mit seznam IP adres, jinak by spocitaly celkovy prutok. IP adresy vezme bud z arp tabulky nebo mu je muzu predhodit v seznamu. Ten seznam mam !!! v MySQL.

Pocitadla zalozeny na promiscuitnim modu jsou trochu zlobivy. A musej bejt kompilovany.

Snazil jsem se o zkompilovani jadra 2.6.10 s IMQ patchem, to proslo, ale uz se mi nezkompiloval s ESFQ patchem kterej vyzaduji (to bych asi dokazal i sam opravit, nebo najit novejsi patch). Dale mi pod 2.6.10 nesel HostAP, takze ted bezim na puvodnim 2.6.7. Jestli mi to IMQ pomuze tak ho tam dam. Ale vsiml jsem si ze to ma navaznost na iptables kterou nechci a nelze se toho zbavit. Myslel jsme ze to povesim jen pred wlan0 (internet) a tudiz na tom imq0 bude vsechen traffic do/z internetu. NAT budu delat az na wlan0, takze na imq0 budou jeste 10.0.0.0 a bude co merit.

Poradite mi nejak prosim?
Diky
Zdenek

Odpovědi

[Zdeněk Štěpánek]

Zdravim

No tak zatim se zda ze ntop sice neni presne to co bych potreboval. Zobrazuje tuny informaci ktere nepotrebuji, ja chci prehlednou tabulku kde bude na jedne strane IP adresy (DNS jmena) a na druhe strane kolik kdo vysosal z netu a podle toho serazeny. Kazdej mesic reset. Vic nechci. Asi by to vyresil ten XML export, kterej se mi ale nezkompiloval kvuli chybejicim knihovnam.

Na externim rozhrani to ale opet zadne vnitrni IP nenameri. Muzu merit na vnitrnich, ale zase nevim jestli to jde nakonfigurovat aby meril JEN internetovy provoz. Ma to sice primitivni konfiguraci (to jest v podstate zadnou) a jede to hned, ale na muj vkus to ma moc tabulek a grafu.

Zdenek

[xor]

Mam stejnej problem. Jako nejlepsi se zatim zda byt hotsanic resp. modul networks. Sice mam vyhrady vuci pouzivani iptables k pocitani prenesenych dat, ale lepsi nez nic a funguje to celkem dobre. Standardne to pocita provoz na vsechny interfacy, takze v souboru ../hotsanic/modules/networks/init je potreba doplnit interface.

ntop jsem chvili pouzival, ale je to zbytecny overkill a navic sem tenkrat nenasel 100% stabilni verzi.

[......]

Já si udělal pravidla přes iptables a počítám jen internetový provoz. Z toho to co hodinu dostávám vlastním skriptem a zobrazuju pomocí php na webu. Není to nic extra, ale je to dostačující. Jen je to složitější na údržbu a musím si dořešit aby mi to nemazalo výsledky po restartu firewallu.

[Tom K]

Muzete zkusit neco, co jsem si napsal pro sve potreby sam. Funguje to celkem spolehlive a dela to prave tu tabulku (pripadne dotazy, komentare, pripominky, patche mne na mail)

TrafficWatch

[Zdeněk Štěpánek]

Zdravim

Chce to po me knihovnu confuse, nic takovyho jsem nikde nenasel. co to je?

Zdenek

[jm]

$ esearch confuse
[ Results for search key : confuse ]
[ Applications found : 1 ]

*  dev-libs/confuse
      Latest version available: 2.5
      Latest version installed: [ Not Installed ]
      Size of downloaded files: 490 kB
      Homepage:    http://www.nongnu.org/confuse/
      Description: libConfuse is a configuration file parser library,
      License:     LGPL-2

[zdenek-hbr]

docela dobre pro dalsi zpracovani vypada ipt_account. musi se ale opatchovat jadro a iptables.

[8an]

Já jsem našel docela jednoduchý program na měření BandwidthD. Je docela jednoduchý, moc se toho nastavovat nemusí (tedy ani nedá nastavit) - nevím jestli je to v tvém případě výhoda nebo nevýhoda.

IMQ vyžaduje iptables (přes iptables se na něj přesměrovávají pakety). Na 2.6 s ním zkušenosti nemám, na router bych pořád dával spíš 2.4. Zjistil jsem, že po aplikaci IMQ patche se musel HostAP překompilovat, asi se změnily nějaké struktury.

[zlosyn]

http://www.aeminium.org/cable_counter/

Nema to (skoro) zadne rozhrani, ale veskery provoz (objem a ip adresy) to loguje do souboru a jen otazkou ten soubor rozumne zpracovat nejakym skriptem. Vyhodou je, ze to nepotrebuje zadne patche do jadra a podobne obskurnosti.

[Radek Hladik]

Ja pouzivam vlastni script, ktery funguje tak, ze v IPTABLES je chain accounting, vsechny pocitadla z nej se prectou a ulozi do databaze. A z databaze pak delam v PHP statisktiky...

Delam to tak, ze vezmu pocitadlo a ulozim si jeho hodnotu. Pri pristim spusteni vezmu pocitadlo a pokud je hodnota vyssi, tak rozdil prihodim do mysql tabulky. To delam kazdych 5 minut a ukladam to do tabulky s klicem rok,mesic,den,hodina,pravidlo (pokud tam uz neco s takovym klicem je, tak to prachobycejne prictu). Neni to sice uplne genialni, neresi to pretoceni pocitadel, restarty fw a tak, takze nekdy mi muzou nejaka data utect, ale myslim, ze to bohate staci. Navic mam pomerne dobrou databazi, kdo kdy kolik tahal a pripadne z toho muzu delat dalsi statistiky.... Jo a jeste si jako zvlastni "pravidlo" stahuju TX a RX bytes ze sitovky, jen tak pro kontrolu :)

Cele jsem to napsal za cca 1-2 hodiny, pak jeste za par dni dalsi hodinu na doladeni a dovychytani musek... Myslim, ze je to jednodussi nez hledat nejaky soft... V pripade zajmu, klidne poslu zdrojaky (pod podminkou nekritizovani, jsou opravdu osklivy :) )

Radek

[jm]

Co to vystavit nekam na web?

[Radek Hladik]

Ne, ty zdrojaky opravdu nejsou v podobe vhodne ke zverejneni :) Na vyzadani zaslu mailem, ale celonarodni ostudu, to ne :)

Radek

[jm]

Takhle vymeknout, styd se! :o)

[Zdeněk Štěpánek]

Zdravim

Dikxy za nabidku, vystav to na web. Ovsem jestli je to takovy jako pises tak to asi bude chtit jeste pouzit dodo (dodelej doma) a jestli se v tom nevyznam tak...

Zdenek

[Radek Hladik]

Dobre, tak jste me ukecali :)

http://bearbone.twobears.cz/radacct/radacct.0.1.dodo.tgz

Sepsal jsem k tomu nejake jednoduche README (spis seznam poznamek) a prihodil jsem strucnej popis, kterej jsem si pri vytvareni delal...

Ja pouzivam pocitani podle FWMARKu, ale v principu staci upravit skritpt radacct.sh....

P.S. Je to opravdu jednoduchy, zadny zazraky od toho necekejte, ale mne to na pocitani staci :)

Radek

[Zdeněk Štěpánek]

Zdravim

Kouakl jsme na ty programy a zadny z nich me nejak moc nenadchnul, zatim to vypoada ze vezmu ipaccounting od standuse a nejak to poupravim aby bral IP nez arpu ale z externiho souboru, potazmo z databaze. Jak na tom budu s vysledkem budu informovat, pokud na to nezapomenu.

Merit to bude na FORWARDu a bude to mit konfiguracni parametry a jednim z nich bude treba odchozi sitovka, tu staci nastavit na wlan0 a hned to mere jen to co jde do inetu.

Zdenek