QOS

22.3.2006 17:11 | Přečteno: 1938× | Linux

Potřeboval jsem kvalitní, jednoduchý a spolehlivý (funkční) QoS, tak jsem si něco sepsal, co myslíte je to správně?

QoS je integrovaný do firewallu, je až na jeho konci, jednotlivá rozhraní se zadávají jednoduše, na začátek skriptu pro firewall napíšu například:

# Lokalni LAN rozhrani
LAN0_IFACE="eth0"
LAN0_QOS="yes"
LAN0_RATE="80000"
LAN0_TYPE="FD"

# Lokalni Wifi rozhrani
WIFI0_IFACE="wlan0"
WIFI0_QOS="yes"
WIFI0_RATE="3000"
WIFI0_TYPE="HD"
#
WIFI1_IFACE="wlan1"
WIFI1_QOS="yes"
WIFI1_RATE="3000"
WIFI1_TYPE="HD"

# Lokalni Atheros rozhrani
ATH0_IFACE="ath0"
ATH0_QOS="yes"
ATH0_RATE="5000"
ATH0_TYPE="HD"
#
ATH1_IFACE="ath1"
ATH1_QOS="yes"
ATH1_RATE="30000"
ATH1_TYPE="HD"

A tady je samotná část, která řeší nastavení a spuštění QoSu:

qos_start)
    echo "Starting QoS..."
    # Zjistime rozhrani, na kterych chceme mit spusteny QoS
    I="0"
    QOS_COUNT="0"
    QOS_DEVS=""
    QOS_RATES=""
    QOS_IMQS=""
    QOS_TYPES=""
    while [ "$I" -lt 10 ]; do
        for IFACE in LAN ATH WIFI; do
            DEV=${IFACE}${I}_IFACE
            DEV=${!DEV}
            QOS=${IFACE}${I}_QOS
            QOS=${!QOS}
            RATE=${IFACE}${I}_RATE
            RATE=${!RATE}
            TYPE=${IFACE}${I}_TYPE
            TYPE=${!TYPE}
            if [ "$QOS" == "yes" ] && [ "$DEV" != "" ] && [ "$RATE" != "" ] && [ "$TYPE" != "" ]; then
                QOS_COUNT="`expr $QOS_COUNT + 1`"
                if [ "$QOS_DEVS" == "" ]; then
                    QOS_DEVS="$DEV"
                else
                    QOS_DEVS="$QOS_DEVS $DEV"
                fi
                if [ "$QOS_RATES" == "" ]; then
                    QOS_RATES="$RATE"
                else
                    QOS_RATES="$QOS_RATES $RATE"
                fi
                if [ "$QOS_TYPES" == "" ]; then
                    QOS_TYPES="$TYPE"
                else
                    QOS_TYPES="$QOS_TYPES $TYPE"
                fi
            fi
        done
        I="`expr $I + 1`"
    done
    
if [ "$QOS_COUNT" -gt "0" ]; then    
    # Zavedeni modulu pro imq
    modprobe imq numdevs=$QOS_COUNT &>/dev/null
    if [ "$?" == "0" ]; then
        # Nahozeni prislusnych imq zarizeni
        I="0"
        while [ "$I" -lt "$QOS_COUNT" ]; do
            $IP link set imq$I up
            if [ "$QOS_IMQS" == "" ]; then
                QOS_IMQS="imq$I"
            else
                QOS_IMQS="$QOS_IMQS imq$I"
            fi
            I="`expr $I + 1`"
        done
    else
        QOS_IMQS=""
    fi
    
    # Na ziskane interfaci nasadime QoS
    I="1"
    for DEV in $QOS_DEVS; do
        RATE="`echo \"$QOS_RATES\" | cut -d \" \" -f $I`"
        TYPE="`echo \"$QOS_TYPES\" | cut -d \" \" -f $I`"
        IMQ="`expr $I - 1`"
        if [ "$QOS_IMQS" != "" ]; then
            echo "    $DEV rate ${RATE}kbit with imq$IMQ type $TYPE"
            DEV_IMQ="imq$IMQ"
            if [ "$TYPE" == "HD" ]; then
                $IPTABLES -t mangle -A POSTROUTING -o $DEV -j IMQ --todev $IMQ
                $IPTABLES -t mangle -A PREROUTING -i $DEV -j IMQ --todev $IMQ
                DEV=""
            else
                $IPTABLES -t mangle -A PREROUTING -i $DEV -j IMQ --todev $IMQ
            fi
        else
            echo "    $DEV rate ${RATE}kbit without imq"
            DEV_IMQ=""
        fi

        for DEV in $DEV $DEV_IMQ; do
            #echo $DEV
            # Vytvorime root qdisc
            $TC qdisc add dev $DEV root handle 1:0 prio bands 3 priomap 2 2 2 2 2 2 0 0 2 2 2 2 2 2 2 2
            
            # Ve trech zakladnich prio tridach vytvorime esfq pro nelimitovany traffic a htb pro limitovany
            $TC qdisc add dev $DEV parent 1:1 handle 11:0 sfq perturb 10
            $TC qdisc add dev $DEV parent 1:2 handle 12:0 sfq perturb 10
            $TC qdisc add dev $DEV parent 1:3 handle 13:0 htb
            
            # Zakladni htb tride dame plnou rychlost, dalsi budou mit rychlost sdilenou HTTP,mail, DC++,
            $TC class add dev $DEV parent 13:0 classid 13:1 htb rate ${RATE}kbit
            $TC class add dev $DEV parent 13:1 classid 13:111 htb rate $[5*${RATE}/10]kbit ceil ${RATE}kbit
            $TC class add dev $DEV parent 13:1 classid 13:112 htb rate $[3*${RATE}/10]kbit ceil ${RATE}kbit
            $TC class add dev $DEV parent 13:1 classid 13:113 htb rate $[2*${RATE}/10]kbit ceil ${RATE}kbit
            
            # V kazde htb tride jeste pouziji esfq
            $TC qdisc add dev $DEV parent 13:111 handle 111:0 sfq perturb 10
            $TC qdisc add dev $DEV parent 13:112 handle 112:0 sfq perturb 10
            $TC qdisc add dev $DEV parent 13:113 handle 113:0 sfq perturb 10
            
            # Omarkovane pakety z iptables presmeruji do danych trid
            $TC filter add dev $DEV parent 1:0 protocol ip handle 1 fw flowid 1:1
            $TC filter add dev $DEV parent 1:0 protocol ip handle 2 fw flowid 1:2
            $TC filter add dev $DEV parent 13:0 protocol ip handle 3 fw flowid 13:111
            $TC filter add dev $DEV parent 13:0 protocol ip handle 4 fw flowid 13:112
            $TC filter add dev $DEV parent 13:0 protocol ip handle 5 fw flowid 13:113
        done
        I="`expr $I + 1`"
    done
    
    # Markovani v iptables
    mark_layer7 () {
        for protocol in $2; do
            $IPTABLES -t mangle -I PREROUTING -m layer7 --l7proto $protocol -j MARK --set-mark $1
        done
    }
    
    # ICMP - vzdy
    $IPTABLES -t mangle -I PREROUTING -p icmp -j MARK --set-mark 1
    # OSPF - vzdy
    $IPTABLES -t mangle -I PREROUTING -p ospf -j MARK --set-mark 1
    # UDP - vzdy
    $IPTABLES -t mangle -I PREROUTING -p UDP -j MARK --set-mark 2
    # HTML - jiny nekorektni zpusob markovani http, ale mnohem mene narocny
    #$IPTABLES -t mangle -A POSTROUTING -p TCP --dport 80 -j MARK --set-mark 3
    #$IPTABLES -t mangle -A POSTROUTING -p TCP --sport 80 -j MARK --set-mark 3
    # Oznacime pakety pomoci layer7 filtru - puvodni rozdeleni, detekce nekterych protokolu znatelne zvysila odezvy
    mark_layer7 1 "bgp dhcp dns irc jabber ntp qq snmp whois yahoo"
    mark_layer7 2 "battlefield1942 counterstrike-source dayofdefeat-source doom3 halflife2-deathmatch quake-halflife quake1 worldofwarcraft"
    mark_layer7 3 "ssh http citrix rdp rlogin skypeout telnet tsp vnc ciscovpn sip skypetoskype"
    mark_layer7 4 "ftp cvs biff h323 imap live365 nntp pop3 rtsp shoutcast smtp ssl tftp"
    mark_layer7 5 "100bao applejuice ares bittorrent directconnect edonkey gnutella hotline mute msn-filetransfer napster poco smb soulseek xunlei http-itunes"
    # pokud chci jeste neoznacene pakety priradit do nejake tridy, tak to napisu pod, jinak se presmeruji do tridy 3
    
    echo "done"
else
    echo "there is no QoS interface!"
fi
    ;;

qos_stop)
    echo -n "Stopping QoS..."
    # Smazeme vsechny root qdisc
    I="1"
    while true; do
        if [ "`$TC qdisc | cut -d \" \" -f3 | grep 1: | sed -n ${I}p`" == "1:" ]; then
            $TC qdisc del dev "`tc qdisc | grep 1: | cut -d \" \" -f5 | sed -n ${I}p`" root &>/dev/null
            $TC qdisc del dev "`tc qdisc | grep 1: | cut -d \" \" -f5 | sed -n ${I}p`" ingress &>/dev/null
        else
            break
        fi
        i="`expr 1 + $I`"
    done
    #
    # Deaktivuji vsechna imq zarizeni
    I="1"
    while true; do
        if [ "`$IP link show | grep imq | cut -d \" \" -f 2 | cut -d: -f1 | sed -n ${I}p`" != "" ]; then
            $IP link set "`$IP link show | grep imq | cut -d \" \" -f 2 | cut -d: -f1 | sed -n ${I}p`" down
        else
            break
        fi
        I="`expr $I + 1`"
    done
    rmmod -f imq &>/dev/null
    echo "done."
    ;;

No a nakonec jedna zvláštní věc co se mi s ním dnes stala, jakmile jsem restartoval počítač, tak mi nešlo dopingnout se na jeho zařízení, bůh ví jestli to je chyba tohoto QoSu, ale pokud si myslíte že ano, pak napište co by mělo být jinak, ještě budu hledat kde byl opravdu problém.        

Komentáře

[Mikos]

Heh, tomuhle říkáš "jednoduchý"? Asi mám o jednoduchosti trošku jinou představu Mně stačí na shapování zcela triviální několikařádkový skript (používám HTB; IMQ je IMHO neuvěřitelný overkill na jednoduché shapování). Ale přiznávám se, že sem ten skript v tom blogpostu moc neluštil, jen jsem na něj zběžně koukl, tak možná to dělá víc věcí co bych jen s HTB nedokázal, nevím... reagoval jsem jen na to slovo "jednoduchý" v úvodu

[Thunder.m]

No jednoduché to je, jen je složitější to udělat tak aby stačilo na začátku zadat jen daná rozhraní, jejich rychlosti a režim, bez toho by to bylo cca na 10 řádek. IMQ je tam proto, že potřebuju regulovat jak příchozí tak odchozí provoz na jednotlivých rozhraních (málokterý router má jen 2 rozhraní) a také proto abych byl schopen používat režim full duplex a half duplex (FD a HD), bez toho je shapování jaksi nanic.

[hwsoft]

zdar, tobe ten marklayer7 funguje? Delal jsem pokusy a nejak to haprovalo :(, ted mazu domu vecer na to v klidu kouknu a zkusim.

[Thunder.m]

Vše v tomhle QoSu se mi jeví jako že chodí :) Zkoušel jsem různé protokoly, různé rychlosti a různé režimy, vždy to dělalo přesně to co jsem od toho čekal, ale i tak je možné že tam nějaká chybička je :)

[Thunder.m]

Tak, už jsem na tu zvláštní věc kápnul, zkoušel jsem to jen v Czela Debianu 2.5.1 RC3 verzi, prostě pokud se hned po startu zavede modul IMQ, tak jakoby nefunguje, jakmile ho však zavedu, smažu a znovu zavedu, tak funguje uplně normálně a postartu je vše normální. No IMQ je zatím po ovladačích grafických karet (hlavně těch opensource) nejhůře se chovající modul (kernel panic po příkazu dhclient bez parametru, atd...)