abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

dnes 10:33 | Komunita

V pondělí měl na YouTube online premiéru otevřený krátký 2D film Hero vytvořený v 3D softwaru Blender. Cílem stejnojmenného projektu Hero je vylepšit nástroj Grease Pencil (tužka) v Blenderu 2.8.

Ladislav Hagara | Komentářů: 2
včera 23:22 | Nová verze

Byla vydána verze 4.0 kolekce svobodného softwaru umožňujícího nahrávání, konverzi a streamovaní digitálního zvuku a obrazu FFmpeg (Wikipedie). Přehled novinek v Changelogu (GitHub).

Ladislav Hagara | Komentářů: 0
včera 17:22 | Komunita

Včera vydanou hru Rise of the Tomb Raider pro Linux lze do pondělí 23. dubna koupit na Steamu s 67% slevou. Místo 49,99 € za 16,49 €.

Ladislav Hagara | Komentářů: 0
včera 16:11 | Komunita

Na Humble Bundle lze získat počítačovou hru Satellite Reign (Wikipedie, YouTube) běžící také v Linuxu zdarma. Speciální akce končí v sobotu v 19:00.

Ladislav Hagara | Komentářů: 1
včera 15:44 | Zajímavý software

Společnost Apple koupila před třemi lety společnost FoundationDB vyvíjející stejnojmenný NoSQL databázový systém FoundationDB (Wikipedie). Včera byl tento systém uvolněn jako open source pod licencí Apache 2.0. Zdrojové kódy jsou k dispozici na GitHubu.

Ladislav Hagara | Komentářů: 0
včera 15:00 | Nová verze

Po dva a půl roce od vydání verze 5.7 oznámila společnost Oracle vydání nové major verze 8.0 (8.0.11) databázového systému MySQL (Wikipedie). Přehled novinek v poznámkách k vydání. Zdrojové kódy komunitní verze MySQL jsou k dispozici na GitHubu.

Ladislav Hagara | Komentářů: 2
19.4. 14:44 | Pozvánky

Spolek OpenAlt zve příznivce otevřených technologií a otevřeného přístupu na 151. brněnský sraz, který proběhne v pátek 20. 4. od 18:00 hodin v restauraci Benjamin na Drobného 46.

Ladislav Hagara | Komentářů: 0
19.4. 13:33 | Nová verze

Byla vydána verze 18.04.0 KDE Aplikací (KDE Applications). Přehled novinek v kompletním seznamu změn a na stránce s dalšími informacemi.

Ladislav Hagara | Komentářů: 0
19.4. 13:11 | Nová verze

Bylo oznámeno vydání nové stabilní verze 1.26 a beta verze 1.27 open source textového editoru Atom (Wikipedie). Přehled novinek i s náhledy v příspěvku na blogu. Podrobnosti v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
19.4. 12:55 | Komunita

Dle plánu byla dnes vydána hra Rise of the Tomb Raider (Wikipedie) pro Linux. Koupit ji lze za 49,99 €.

Ladislav Hagara | Komentářů: 3
Používáte na serverech port knocking?
 (3%)
 (7%)
 (46%)
 (26%)
 (17%)
Celkem 336 hlasů
 Komentářů: 29, poslední 5.4. 12:25
    Rozcestník

    Dotaz: epoll, odebrání deskriptoru

    6.5.2015 19:24 Jirka
    epoll, odebrání deskriptoru
    Přečteno: 196×
    Ve své aplikaci používám epoll, počet monitorovaných file deskriptorů je v řádu stovek. epoll_wait() předávám buffer 100 epoll_event strukturami. Můj problém je, jak vyřešit odebrání deskriptoru. Ke každému mám přiřazeny "user data", jedná se o ukazatel na strukturu, která obsahuje pointer na funkci a další data spojená s daným typem deskriptoru. Přes epoll_ctl odeberu deskriptor, ale nelíbí se mi, že musím projít celé pole (resp. "jen" do výše zaplnění, což je obvykle ~80%), kontrolovat "user data", a pokud najdu ten správný, tak nastavit user data na NULL a pak takový ignoruji. Jde toto vyřešit nějak lépe?

    Odpovědi

    6.5.2015 21:30 Sten
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Moc nechápu, co děláte. epoll_wait vyplní poskytnuté pole epoll_eventů událostmi na registrovaných deskriptorech. Pokud přes epoll_ctl odeberete nějaký deskriptor, nebude epoll_wait události k tomu deskriptoru vracet, takže ve vráceném poli epoll_data_t asociovaný s tím deskriptorem nebude.
    6.5.2015 21:48 Jirka
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Já mám na mysli situaci, kdy mi epoll_wait naplní mé pole a zavolání callbacku - řekněme - prvního deskriptoru má za následek odebrání deskriptoru, který už byl taky "připraven" a vrácen do toho pole. Z epollu samozřejmě odeberu přes epoll_ctl, ale ještě mě to nutí projít celé to pole lineárně a hledat, jestli tam už není v připraveném stavu.
    6.5.2015 22:08 Sten
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    man epoll:
    If you use an event cache or store all the file descriptors returned from epoll_wait(2), then make sure to provide a way to mark its closure dynamically (i.e., caused by a previous event's processing). Suppose you receive 100 events from epoll_wait(2), and in event #47 a condition causes event #13 to be closed. If you remove the structure and close(2) the file descriptor for event #13, then your event cache might still say there are events waiting for that file descriptor causing confusion.

    One solution for this is to call, during the processing of event 47, epoll_ctl(EPOLL_CTL_DEL) to delete file descriptor 13 and close(2), then mark its associated data structure as removed and link it to a cleanup list. If you find another event for file descriptor 13 in your batch processing, you will discover the file descriptor had been previously removed and there will be no confusion.
    8.5.2015 12:29 Jirka
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Takže si mám vybrat mezi lineárním procházením všech nacachovaných položek při každém odebrání, nebo mezi malloc(), extra dereferencí a případným free() malých wrapper struktur při každém přidávání a volání.
    pavlix avatar 9.5.2015 18:03 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Vždyť tam píšou, že stačí tu strukturu namísto uvolnění označit jako zrušenou a teprve po projití všech události ji uvolnit.
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    pavlix avatar 9.5.2015 18:03 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Píšeš to dost nesrozumitelně. Trochu mi to připomíná podobné problémy, které jsem s epoll řešil, tedy mám dojem, že konkrétně race condition mezi zrušením objektu a jeho vrácením v epoll. Můj problém byl hlavně v tom, že jsem měl nad epoll abstrakci a tudíž kód, který odhlašoval zdroj událostí neměl přístup k tomu seznamu. Mám dojem, že jsem použil nějaké nehezké dočasné řešení a měl bych se k tomu ještě vrátit a vyřešit to podle těch instrukcí v manuálové stránce.
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    pavlix avatar 9.5.2015 18:09 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Když nad tím tak přemýšlím, tak ta abstrakce vede k tomu, že ty objekty nemají datovou položku pro označení za smazané a tudíž by v mém případě opravdu došlo na speciální objekt, který by tuto položku obsahoval a k tomu obsahoval i odkaz na ten objekt, kterého se to má týkad. To je mírně neefektivní, ale zásadní problém bych v tom neviděl.
    Já už tu vlastně ani nejsem. Abclinuxu umřelo.
    9.5.2015 19:55 Jirka
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Mé původní řešení je něco takového:
    #include <errno.h>
    #include <inttypes.h>
    #include <stdlib.h>
    #include <sys/epoll.h>
    #include <unistd.h>
    
    typedef struct JRPollable JRPollable;
    typedef void (*JRPollableReady)(JRPollable*, uint32_t);
    typedef struct JREpoll JREpoll;
    
    struct JRPollable
    {
    	JRPollableReady jrCallback;
    	int jrFD;
    	uint32_t jrEvents;
    };
    
    struct JREpoll
    {
    	int jrEpollFD;
    	int jrEventsAvail;
    	struct epoll_event jrEvents[100];
    	
    };
    
    int JREpoll_init(JREpoll *jrEpoll)
    {
    	jrEpoll->jrEpollFD = epoll_create1(EPOLL_CLOEXEC);
    	if (jrEpoll->jrEpollFD == -1)
    		return errno;
    	jrEpoll->jrEventsAvail = 0;
    	return 0;
    }
    
    int JREpoll_add(JREpoll *jrEpoll, JRPollable *jrPollable)
    {
    	struct epoll_event ee = { .events = jrPollable->jrEvents,
    							  .data = { .ptr = jrPollable } };
    
    	if (epoll_ctl(jrEpoll->jrEpollFD, EPOLL_CTL_ADD, jrPollable->jrFD, &ee) != 0)
    		return errno;
    	return 0;
    }
    
    int JREpoll_remove(JREpoll *jrEpoll, JRPollable *jrPollable)
    {
    	struct epoll_event kernelBugDummyEv_lt2_6_9;
    	if (epoll_ctl(jrEpoll->jrEpollFD, EPOLL_CTL_DEL, jrPollable->jrFD,
    				  &kernelBugDummyEv_lt2_6_9) != 0)
    		return errno;
    	
    
    	int avail = jrEpoll->jrEventsAvail;
    	struct epoll_event *events = jrEpoll->jrEvents;
    	
    	for (int i = 0; i < avail; ++i)
    	{
    		if (events[i].data.ptr == jrPollable) {
    			events[i] = events[avail-1];
    			--jrEpoll->jrEventsAvail;
    			break;
    		}
    	}
    
    	return 0;
    }
    
    int JREpoll_destroy(JREpoll *jrEpoll)
    {
    	if (close(jrEpoll->jrEpollFD) != 0)
    		return errno;
    	return 0;
    }
    
    int JREpoll_wait(JREpoll *jrEpoll)
    {
    	int ret = epoll_wait(jrEpoll->jrEpollFD, jrEpoll->jrEvents,
    						 sizeof(jrEpoll->jrEvents) / sizeof(struct epoll_event),
    						 -1);
    	if (ret < 0) {
    		int errnoSave = errno;
    		if (errnoSave != EINTR)
    			return errnoSave;
    		ret = 0;
    	}
    	jrEpoll->jrEventsAvail = ret;
    	return 0;
    }
    
    void JREpoll_dispatch(JREpoll *jrEpoll)
    {
    	struct epoll_event *events = jrEpoll->jrEvents;
    	
    	for (int avail = jrEpoll->jrEventsAvail;
    		 avail > 0;
    		 avail = jrEpoll->jrEventsAvail)
    	{
    		jrEpoll->jrEventsAvail = --avail;
    		
    		struct epoll_event ev = events[avail];
    		JRPollable *pollable = ev.data.ptr;
    		pollable->jrCallback(pollable, ev.events);
    	}
    }
    
    Ta struktura JRPollable může být pak součástí většího objektu, který v příslušném callbacku dostanu po "hrátkách" s offsetof(), nebo přetypováním, pokud je struktura jako první prvek. Schválně jsem to navrhl tímto stylem, abych se vyhnul extra alokacím. Strukturu JRPollable tedy vlastní samotný objekt, nikoliv ten epoll wrapper. Abych dosáhl tedy rychlejšího remove, tak se zdá, že se extra alokacím wrapperům nevyhnu, budu muset udržovat list odebraných položek a ty uvolňovat na konci cyklu, až projdu všechny položky.
    9.5.2015 20:04 Jirka
    Rozbalit Rozbalit vše Re: epoll, odebrání deskriptoru
    Jinak ten dispatch je psán tak, jak je, proto, že to musí být schopno rekurze.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.