abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 17:44 | Nová verze

Společnost PINE64 stojící za telefonem PinePhone, notebooky Pinebook a Pinebook Pro, IP kamerou PineCube, hodinkami PineTime, páječkou (pájecím perem) Pinecil, zdroji PinePower nebo RISC-V vývojovou deskou PineCone publikovala na svém blogu květnový souhrn novinek (YouTube). Zmínit lze například prototyp klávesnice k PinePhonu, vybraný název PineDio pro PINE64 LoRA ekosystém nebo Fedora Linux na Pinebooku Pro.

Ladislav Hagara | Komentářů: 0
dnes 16:33 | Zajímavý software

V prosinci loňského roku byl představen Rizin, fork frameworku pro reverzní inženýrství a analýzu binárních souborů radare2 (r2). Vývojáři Rizinu si vzali s sebou Cutter, do té doby grafickou nadstavbu nad radare2 (r2). Vývojáři radare2 (r2) tedy přejmenovali svou nadstavbu na r2cutter. Dnes je to už ale iaito. Vývojáři se vrátili ke jménu projektu (iaito), ze kterého vznikl Cutter.

Ladislav Hagara | Komentářů: 0
dnes 09:00 | Nová verze

Byla vydána nová verze 12.0.0 open source webového aplikačního frameworku Angular (Wikipedie). Přehled novinek v příspěvku na blogu.

Ladislav Hagara | Komentářů: 2
včera 14:00 | Nová verze

Po osmi letech vývoje byla vydána verze 3 programovacího jazyka Scala (Wikipedie). Přehled novinek v aktualizované dokumentaci.

Ladislav Hagara | Komentářů: 0
včera 11:00 | Komunita

O víkendu 15. a 16. května probíhá AlpineConf 2021, tj. online konference vývojářů a uživatelů Alpine Linuxu.

Ladislav Hagara | Komentářů: 0
včera 08:00 | IT novinky

Byl spuštěn, zatím jenom v USA, předprodej v únoru představeného modulárního notebooku Framework. Cena sestaveného notebooku (Framework Laptop) začíná na 999 dolarech. Cena stavebnice (DIY Edition) bez Windows 10 a také bez paměti, disku a Wi-Fi začíná na 749 dolarech.

Ladislav Hagara | Komentářů: 17
13.5. 18:11 | IT novinky

Společnost System76 prodávající počítače s předinstalovaným Pop!_OS nebo Ubuntu spustila předprodej své open source klávesnice Launch. Její cena je 285 dolarů.

Ladislav Hagara | Komentářů: 25
13.5. 18:00 | Nová verze

Vývojáři PostgreSQL oznámili vydání verzí 13.3, 12.7, 11.12, 10.17 a 9.6.22. Opraveno je více než 45 chyb. Řešeny jsou také 3 bezpečnostní chyby (CVE-2021-32027, CVE-2021-32028 a CVE-2021-32029). Upstream podpora verze 9.6 končí 11. listopadu letošního roku.

Ladislav Hagara | Komentářů: 0
13.5. 09:00 | Zajímavý software

Vývojáři Sequoia PGP, tj. implementace OpenPGP v programovacím jazyce Rust, na svém blogu představili certifikační autoritu pro OpenPGP OpenPGP CA. Nejnovější verzi 0.10.1 lze instalovat z crates.io. Zdrojové kódy jsou k dispozici na GitLabu.

Ladislav Hagara | Komentářů: 0
13.5. 08:00 | Nová verze

Byly vydány nové major verze webového frameworku Flask (Wikipedie) napsaného v Pythonu a souvisejících knihoven. Podrobnosti v příspěvku Flask 2.0, Werkzeug 2.0, Jinja 3.0, Click 8.0, ItsDangerous 2.0 a MarkupSafe 2.0 na blogu Pallets Projects.

Ladislav Hagara | Komentářů: 0
Transakční aktualizace
 (18%)
 (4%)
 (6%)
 (3%)
 (9%)
 (60%)
Celkem 176 hlasů
 Komentářů: 0
Rozcestník

Dotaz: Rozeslání většího počtu mailů

12.4. 07:28 jan.rok | skóre: 20
Rozeslání většího počtu mailů
Přečteno: 745×
Dobrý den,

máme aplikaci, která umí vygenerovat logy pro jednotlivé uživatele a rozeslat jim je mailem (jde o logy z měřidel). V aplikaci je zadán SMTP server a ověřovací údaje, port.

Funguje to bez potíží, pokud vyberu několik málo uživatelů najednou. Ale v okamžiku, kdy vyberu všechny (cca 1800 mailů), dojde k tomu, že aplikace maily vygeneruje, pošle ven na port 25, což způsobí zablokování odesílání ze strany providera. Ten si hlídá SMTP provoz a omezuje odesílání na tuším max. 5 mailů/s - chrání se tím proti tomu, aby se nedostal na blacklisty.

Nechci jeho omezení obcházet, spíš by mě zajímalo, jak frontu mailů z té hloupé aplikace nějak pozdržet, rozkouskovat a odesílat postupně. I kdyby to mělo trvat celý den. Na aplikaci vliv nemám, autor je asi už nedohledatelný.

Napadlo mě nainstalovat vlastní mailserver a nějak ho nakonfigurovat tak, aby posílal třeba 1 mail/s.

Je ještě nějaké jiné řešení?

Děkuji. JR.

Řešení dotazu:


Odpovědi

12.4. 08:11 X
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Pokud se jedna o uzivatelskou postu je to interni mail, ktery nikam neodchazi a je omezeny jen nastavenim tveho vlastniho postovniho serveru. Nebo ma snad kazdy uzivatel soukromy mail na soukrome domene?
12.4. 09:47 jan.rok | skóre: 20
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Uživatelé asi nebylo správné označení - spíše klienti. A ano, mají maily různě mimo naši doménu.
12.4. 09:49 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Posílá-li to sendmailem, resp. sendmail-kompatibilním rozhraním (např. ssmtp), což tyto „hloupé“ aplikace zpravidla dělají, nebude problém sendmail nahradit skriptem, který zapíše zprávu do souboru a budou se potom postupně rozesílat.

Opravdu není možné tu aplikaci upravit, popř. řešit rozesílání jinak – třeba skriptem se sendmailem?
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
12.4. 09:52 jan.rok | skóre: 20
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Upravit to bohužel nejde. Je to stará věc. Uvažujeme o novém systému, ale zatím je to jen v plánu. Aplikace umí ještě vygenerovat okno s novou zprávou přes výchozí poštovní program, ale to je při tomto počtu nepoužitelné.
12.4. 09:53 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
… přes výchozí poštovní program, …
Máte na mysli sendmail, nebo GUI aplikaci?
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
12.4. 10:12 jan.rok | skóre: 20
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
GUI aplikaci
Řešení 1× (jan.rok (tazatel))
12.4. 10:34 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Otvírá spojení souběžně, nebo po odeslání zprávy otrvře další?

Pokud platí druhá možnost, šel by vytvořit tento server:
ncat -klp2525 -c 'sleep 5; ncat provider-hostname.cz 25'
2525 je port, kde tento server poslouchá, 25provider-hostname.cz je adresa providera. ncat je zpravidla buď ve stejnojmenném balíku, nebo v balíku nmap.

Server výše po otevření spojení počká pět sekund a až potom začne komunikovat s protistranou. Nebylo otestováno.
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
12.4. 10:38 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
A se SSL/TLS by to mělo fungovat také.

Pokud by si klient stěžoval na to, že server těch pět sekund neodpovídá, možná by šlo přesunout čekání na konec spojení a zapnout --no-shutdown, popř. něco sofistikovanějšího – pustit ze serveru jeden řádek, počkat 5 sekund a potom plně otyevřít spojení.

ncat má také volbu -d, která nastavuje čas mezi odeslanými řádky.
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
12.4. 10:50 jan.rok | skóre: 20
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Paráda, řídit to otevíráním/zavíráním portu, by mě tedy nenapadlo.

To by mohlo fungovat. Díky.
12.4. 12:36 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Nejde o otevírání a zavírání, ale o přidanou latenci na začátku spojení, tj. před odesláním prvního bajtu1. ncat spouští obsluhu klientů paralelně (klasický nc/netcat, tedy alespoň ta implementace, kterou používám, začne obsluhovat další klienty až po uzavření spojení, ale neumí spustit skript2), takže to nebude fungovat, pokud tento server bude používat více klientů – čas mezi spojeními bude pro každého klienta těch 5 s. Volba -m ncatu umožnuje omezit počet klientů, ale to funguje tak, že jim odmítne spojení, což asi nechceme. Pokud by je to nechalo jen čekat, bylo by to asi lepší řešení.

1 Po tom sleepu je rychlost spojení ± normální.

2 Musím se podívat na to, co jsem si to vlastně nainstaloval. Implementace netcatu z busyboxu to umí, takže by šlo použít místo ncat jen nc, je-li to ten z busyboxu.
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
Josef Kufner avatar 12.4. 13:04 Josef Kufner | skóre: 70
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Mnohem lepší řešení by bylo spustit si lokálně vlastní SMTP server, který by aplikace používala k odeslání pošty a ten SMTP server by používal jako relay ten současný SMTP server u poskytovatele, ale aplikoval by omezování provozu. Tedy aplikace by nasypala 1500 mailů do fronty lokálnímu serveru a ten by to pomalu předával k poskytovateli. Tím, že se použije relay je konfigurace vlastního serveru velice snadná a bezproblémová.

Viz http://www.postfix.org/qmgr.8.html a default_destination_rate_delay.
Hello world ! Segmentation fault (core dumped)
12.4. 14:12 jiwopene | skóre: 28 | blog: Od každého trochu…
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
To tazatel navrhoval a ptá se na jiné řešení. Se řešením plnohodnotným SMTP serverem souhlasím.
.sig virus 3.2_cz: Prosím, okopírujte tento text do vaší patičky.
12.4. 14:39 jan.rok | skóre: 20
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Ano, i tazatel se nakonec rozhodl řešit to vlastním SMTP serverem.

Přesto všem děkuji za názory.
9.5. 18:36 Filip Jirsák | skóre: 67 | blog: Fa & Bi
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Tohle je originální způsob, jak o ty e-maily přijít…

Použijte normální poštovní server a v něm nakonfigurujte limit na množství odesílaných zpráv. Třeba v Postfixu je to smtp_transport_rate_delay.Poštovní server zprávy přijme, uloží je do fronty (kde zůstanou i když se server ukončí, restartuje se počítač nebo se e-mail nepodaří napoprvé odeslat) a pak je bude postupně z té fronty odesílat.

Josef Kufner avatar 12.4. 11:24 Josef Kufner | skóre: 70
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Existují služby na rozesílání hromadných e-mailů. Pokud by ti nestačilo prosté zdržování, tak jich můžeš využít. Oni to pak už za tebe pořeší.

Další možnost je pořídit si malou VPS, která ti bude dělat SMTP server. Vyžaduje to nějaké znalosti k nastavení, základ je sice primitivní, ale je tam dost blbostí okolo (minimálně SPF a DKIM).

Klidně takových VPS můžeš mít i více, aby se omezilo riziko blacklistů. Také můžeš používat několik různých poskytovatelů. Jen je potřeba si pohlídat SPF záznamy, aby tam byly všechny odchozí servery vyjmenované.
Hello world ! Segmentation fault (core dumped)
12.4. 15:51 Andrej | skóre: 49 | blog: Republic of Mordor | Zürich
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Funguje to bez potíží, pokud vyberu několik málo uživatelů najednou. Ale v okamžiku, kdy vyberu všechny (cca 1800 mailů), dojde k tomu, že aplikace maily vygeneruje, pošle ven na port 25, což způsobí zablokování odesílání ze strany providera. Ten si hlídá SMTP provoz a omezuje odesílání na tuším max. 5 mailů/s - chrání se tím proti tomu, aby se nedostal na blacklisty.

Pak je potřeba se s poskytovatelem náležitě domluvit, protože pouze a jedině tam je příčina problému, kterou je třeba odstranit, nikoliv obcházet. Samozřejmě je klíčové zavést DKIM, ADSP a všechno kolem toho — tak, aby měl mail server (přinejmenším!) v testech na internet.nl 100% skóre. S takovým základním rozumným nastavením pak není důvod dostat se na nějaký blacklist a poskytovatel by si měl přestat hrát na Severní Koreu.

Jestli poskytovatel tvrdí, že by se mohl dostat (celý poskytovatel) na blacklist, pak všeho všudy kecá a vymlouvá se. Na blacklist se dostane tak maximálně /48 rozsah jednoho konkrétního uživatele (případně jedna „veřejná“ IPv4 adresa, pokud ještě někdo takový zastaralý nesmysl používá). Poskytovatele jako celku a jeho ostatních zákazníků se to bude týkat pramálo.

ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
11.5. 09:38 mmcze
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Ehm, ne.. Jsou i blacklisty, ktere jsou schopne listovat celou /22
včera 02:40 Andrej | skóre: 49 | blog: Republic of Mordor | Zürich
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů

Ehm, ne.

Protože koncoví uživatelé mají /48 a poskytovatelé mají obvykle /32, neexistuje žádný rozumný blacklist, který by listoval /22. To by mohl omylem zakázat opravdu podstatnou část internetu, kdyby se takhle trefil do nějakého většího hostingu.

Pokud by snad existoval blacklist, který by zakazoval rovnou celé /22, tedy pouze 6 bitů nad obvyklým obrovským /16 prefixem typu 2a02::/, každý rozumný provozovatel mail serveru by takový blacklist jistě ignoroval. Pokud ne, je to jeho problém; takovými peer servery nemá smysl se dál zabývat.

ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
vencour avatar včera 17:34 vencour | skóre: 56 | blog: Tady je Vencourovo | Praha+západní Čechy
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Pokud jste něco neviděl, neznamená to, že to neexistuje.
Mimochodem někdo se baví o poště, někoho napadne i něco jiného, třeba více monopolního, kde se řeší "security" (ať je to co je to) nebo v principu "qos" (poskytování zdrojů).
Dále: někdo se baví o IPv4,někdo o IPv6. A co, že?
Ty nejhlubší objevy nečekají nutně za příští hvězdou. Jsou uvnitř nás utkány do vláken, která nás spojují, nás všechny.
dnes 11:49 trekker.dk | skóre: 71
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Tohle neřešte. "Andrej" žije v iluzi, že koncoví uživatelé mají jako běžnou věc nějaké IPv6 a /48 rozsah k tomu. S realitou se zdvořile obcházejí.
Quando omni flunkus moritati
dnes 13:04 mmcze
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Bavím se o ipv4.

Shodou okolností pro jeden "větší hosting" dělám.. A to, jak ty vidíš svět, zákazníky co to nějakým způsobem ovlivní, vůbec nezajímá, ty jeden "je to jeho problém". :-)
vencour avatar 8.5. 15:57 vencour | skóre: 56 | blog: Tady je Vencourovo | Praha+západní Čechy
Rozbalit Rozbalit vše Re: Rozeslání většího počtu mailů
Dík za diskusi.
Na linuxu mi to už uš šlape. Musel jsem dát "-C" pro CRLF. Windowsy ještě ladím.
Ty nejhlubší objevy nečekají nutně za příští hvězdou. Jsou uvnitř nás utkány do vláken, která nás spojují, nás všechny.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.