- UANOG - uanog.one

Re: NIC interrupts / IRQs / Cores
by Volodymyr Litovka 09 May '25

09 May '25

On 5/6/25 12:46, Andrey Blochintsev wrote: > Ось є документація - https://docs.kernel.org/networking/scaling.html - > в якій є розділ RSS IRQ Configuration, де кажуть шо або irqbalance, > або manual adjust відповідно до > https://docs.kernel.org/core-api/irq/irq-affinity.html >> >> Ок, для тесту я пішов в manul adjust й зробив відповідні smp_affinity >> (застопав irqbalance, звісно) - тут апаратні черги NIC чіпляються до >> різних IRQ, відповідно маска встановлена так, щоб розкидати це IRQ по >> 8 корам: >> >> 53 :: 00000000,00000000,0000ff00 :: 8-15 >> 54 :: 00000000,00000000,00ff0000 :: 16-23 >> 55 :: 00000000,00000000,ff000000 :: 24-31 >> 56 :: 00000000,000000ff,00000000 :: 32-39 >> 57 :: 00000000,0000ff00,00000000 :: 40-47 >> 58 :: 00000000,00ff0000,00000000 :: 48-55 >> 59 :: 00000000,ff000000,00000000 :: 56-63 >> 60 :: 000000ff,00000000,00000000 :: 64-71 >> >> але дивлюсь на значення лічильників в /proc/interrupts й бачу що пох >> - шо з irqbalance, шо з маска в smp_affinity - приростає по кожному >> IRQ тільки на одній корі. Трафіку в цілому до біса (200к+ pps) - >> гадаю розкидає є шо. >> >> > > > А что в > /proc/irq/{5[3-9],60}/{effective_affinity,effective_affinity,effective_affinity_list} > ? Гм.... такі не спрацювало - # for n in $(grep eno1 /proc/interrupts |awk '{print $1}' | tr -d ":"); do echo "$n :: $(cat /proc/irq/$n/smp_affinity) :: $(cat /proc/irq/$n/smp_affinity_list)"; done [ ... ] 93 :: 00000000,00000000,000000ff :: 0-7 # cat /proc/irq/93/{effective_affinity,effective_affinity,effective_affinity_list} 00000000,00000000,00000080 00000000,00000000,00000080 7 доки я буду курити ту доку, є ідеї - чому? дякую > https://www.kernel.org/doc/html/v6.13/core-api/genericirq.html > > |effective_affinity| > > The effective IRQ affinity on SMP as some irq chips do not allow > multi CPU destinations. A subset of *affinity*. > -- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

5 14

NIC interrupts / IRQs / Cores
by Volodymyr Litovka 06 May '25

06 May '25

Привіт, питаннячко маю Ось є документація - https://docs.kernel.org/networking/scaling.html - в якій є розділ RSS IRQ Configuration, де кажуть шо або irqbalance, або manual adjust відповідно до https://docs.kernel.org/core-api/irq/irq-affinity.html Ок, для тесту я пішов в manul adjust й зробив відповідні smp_affinity (застопав irqbalance, звісно) - тут апаратні черги NIC чіпляються до різних IRQ, відповідно маска встановлена так, щоб розкидати це IRQ по 8 корам: 53 :: 00000000,00000000,0000ff00 :: 8-15 54 :: 00000000,00000000,00ff0000 :: 16-23 55 :: 00000000,00000000,ff000000 :: 24-31 56 :: 00000000,000000ff,00000000 :: 32-39 57 :: 00000000,0000ff00,00000000 :: 40-47 58 :: 00000000,00ff0000,00000000 :: 48-55 59 :: 00000000,ff000000,00000000 :: 56-63 60 :: 000000ff,00000000,00000000 :: 64-71 але дивлюсь на значення лічильників в /proc/interrupts й бачу що пох - шо з irqbalance, шо з маска в smp_affinity - приростає по кожному IRQ тільки на одній корі. Трафіку в цілому до біса (200к+ pps) - гадаю розкидає є шо. # grep eno1 /proc/interrupts |awk '$1 ~ /^[0-9]+/ {printf("%s :: ", $1); for(i=2;i<NF-2;i++) { if ($i > 0) { printf("%d (%s) ",i-2, $i) } } printf("%s\n", $NF) }' 53: :: 8 (130512942) eno1np0-TxRx-0 54: :: 16 (131798602) eno1np0-TxRx-1 55: :: 30 (131497677) eno1np0-TxRx-2 56: :: 32 (132016063) eno1np0-TxRx-3 57: :: 40 (131285579) eno1np0-TxRx-4 58: :: 49 (130688802) eno1np0-TxRx-5 59: :: 57 (130551356) eno1np0-TxRx-6 60: :: 65 (131662981) eno1np0-TxRx-7 # grep eno1 /proc/interrupts |awk '$1 ~ /^[0-9]+/ {printf("%s :: ", $1); for(i=2;i<NF-2;i++) { if ($i > 0) { printf("%d (%s) ",i-2, $i) } } printf("%s\n", $NF) }' 53: :: 8 (130583745) eno1np0-TxRx-0 54: :: 16 (131869546) eno1np0-TxRx-1 55: :: 30 (131569504) eno1np0-TxRx-2 56: :: 32 (132088328) eno1np0-TxRx-3 57: :: 40 (131355619) eno1np0-TxRx-4 58: :: 49 (130759795) eno1np0-TxRx-5 59: :: 57 (130622113) eno1np0-TxRx-6 60: :: 65 (131735316) eno1np0-TxRx-7 Власне, питання - це лічильники в /proc/interrupts брешуть чи я щось не долаштував? Дяка. -- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

2 2

m-sata micron m500/m510/m550/m600
by Igor Grabin 05 May '25

05 May '25

Ранок добрим не буває, ні у кого в полі зору не валяється такої штуки? я знаю, що вона є на ebay, і вона вже їде з ebay, але це пройде ще мінімум тиждень. P.S. у кого нексуси 9k - ви теж дуже хочете цю хрінь. просто, можливо, поки про це не знаєте ;-) -- Igor "CacoDem0n" Grabin

3 5

haproxy capping
by Volodymyr Litovka 14 Apr '25

14 Apr '25

Привіт, з причин повільного збільшення навантаження, мені треба редірект в haproxy acl region1 src -f /etc/haproxy/region1.txt redirect prefix https://another.url code 302 if region1 застосовувати до кожного 20-го реквесту, потім до кожного 10-го, потім до кожного 5-го - доки питання performance не будуть порішані :) Є ідеї, як зробити такий capping? Дякую. -- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

1 1

haproxy backend pool
by Volodymyr Litovka 12 Apr '25

12 Apr '25

Привіт, а можна робити таку фігню? у мене є внутрішній раутінг X.X.X.5 proto bird metric 32 nexthop via 172.16.32.51 dev br-ex weight 1 nexthop via 172.16.33.51 dev br-ex weight 1 nexthop via 172.16.34.51 dev br-ex weight 1 Y.Y.Y:1715::5 proto bird metric 32 pref medium nexthop via fd53:1715:c001:f00d::32:51 dev br-ex weight 1 nexthop via fd53:1715:c001:f00d::33:51 dev br-ex weight 1 nexthop via fd53:1715:c001:f00d::34:51 dev br-ex weight 1 й haproxy налаштовано так - backend be mode http [ ... ] balance roundrobin server iv4 X.X.X.5:443 check ssl verify none server iv6 [Y.Y.Y:1715::5]:443 check ssl verify none задумка була що (а) хапроксі буде розкидати бекенд між двома адресами, а (б) раутінг вже розкидає це по шести endpoint'ах (по факту - три сервери, але ipv4+ipv6) якщо це принципово - то фронт теж слухає на двох families, але цікаво щоб ipv4/fe таки розлітався на both ipv4/ipv6 backends як вважаєте, воно має працювати як задумано чи ні? :) дякую -- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

2 1

Старлинк, Микротик, Распбери, Видео кодеки - кто занимался ?
by Alexander V Soroka 04 Apr '25

04 Apr '25

Здравствуйте ! Старлинк, Микротик, Распбери, Видео кодеки - кто занимался ? на меня тут один человек вышел, дронами большими занимается. Там у них что-то не вяжется в Сеть, намутили скорее всего... Там передача видео через Старлинк, потом на второй Старлинк, а потом Микротик зачем-то(?) я не очень понял что они хотят получить, давно я в таком не ковырялся. Кто-то горит желанием помочь им разобраться ? У них проект коммерческий, так что заплатят, в рамках разумного, за решение вопроса. Откликнитесь кто может и хочет помочь, я дам контакт человека в ФБ. -- Best regards, Alexander V Soroka http://www.svr.ua/ AS106-RIPE mailto:alex@euro.net.ua

4 6

E1550 firmware
by Max Tulyev 03 Apr '25

03 Apr '25

Hi All, кто может рассказать как правильно апгрейдить firmware в любимых всеми USB свистках Huawei E1550? Гугль на эту тему завален кучей нерабочего мусора с троянами, увы.

2 1

Re: Старлинк, Микротик, Распбери, Видео кодеки - кто занимался ?
by Alexander V Soroka 03 Apr '25

03 Apr '25

Привет ! Там народ пишет что побороли затримку зі старлінком. тепер хочемо відійти від мікротіка і кодека, щоб програмною маршрутизаціює лан-портів займався разбері. так само щоб і разбері приймав hdmi на вході і стискав стрім замість фізичного кодека. і доречі не факт що лишиться hdmi. наразі шукаємо правильне рішення по камері. ... Я не уверен что им хватит Распбери, и я совсем не уверен что у них есть Программисты, которые в состоянии писать Код так, чтобы оно на мультиядерном Распбери правильно работало, быстро и с конвеерами ядер правильно... Thursday, April 3, 2025, 1:07:57 PM, VASYL MELNYK basil(a)vpm.net.ua you wrote: VM> Якщо наданої інфи ім не буде достатньо і в них нічого не вийде, то нехай VM> напишуть мені - я допоможу, з них ручки-ніжки - резет-вкл-викл, два ноута VM> по краям з вайфаєм і мережею з мобільного телефона чи іншим способом, і VM> кабелем у мікротік, щоб я міг зайти на ноут і запустити вінбокс VM> чт, 3 квіт. 2025 р. о 12:01 <vf(a)furist.kiev.ua> пише: >> Так, там чесний IPv6. >> GRE тунелі працюють. >> Тут інструкція: >> https://www.facebook.com/groups/starlinkforukraine/posts/630050879027989/ >> >> >> >> *From:* VASYL MELNYK <basil(a)vpm.net.ua> >> *Sent:* Thursday, April 3, 2025 10:39 AM >> *To:* vf(a)furist.kiev.ua >> *Cc:* Alexander V Soroka <alex(a)euro.net.ua>; uanog(a)uanog.one >> *Subject:* Re: [uanog] Re: Старлинк, Микротик, Распбери, Видео кодеки - >> кто занимался ? >> >> >> >> >> >> >> >> чт, 3 квіт. 2025 р. о 10:51 <vf(a)furist.kiev.ua> пише: >> >> Привіт. >> >> Старлінк видає IPv6. Тому можна між двома старлінками побудувати P2P IPv6 GRE >> тунель без проміжної термінації на VPN сервері. >> >> >> >> про ipv6 навіть не подумав, якщо там реальний айпі то дійсно з цим можна >> працювати >> -- Best regards, Alexander V Soroka http://www.svr.ua/ AS106-RIPE mailto:alex@euro.net.ua

2 2

астерисководы есть? простой вопрос
by Gregory Edigarov 18 Mar '25

18 Mar '25

Добрый день, я с необычной просьбой :-) нужен минимально рабочий конфиг: 2 PJSIP экстеншена, предположим 5001 и 5002 и чтобы они могли друг другу позвонить. больше ничего не требуется. наконфигурил: pjsip.conf: [global] type=global user_agent=Asterisk PBX [transport-udp] type=transport protocol=udp bind=0.0.0.0:5060 [5001] type=endpoint context=internal disallow=all allow=ulaw auth=5001-auth aors=5001-aor [5001-auth] type=auth auth_type=userpass password=S001pa$s username=5001 [5001-aor] type=aor max_contacts=1 contact=sip:5001@dynamic ; Will resolve dynamically from the register [5002] type=endpoint context=internal disallow=all allow=ulaw auth=5002-auth aors=5002-aor [5002-auth] type=auth auth_type=userpass password=S002pa$s username=5002 [5002-aor] type=aor max_contacts=1 contact=sip:5002@dynamic ; Will resolve dynamically from the register cat /etc/asterisk/extensions.ael context default { 1234 => Playback(tt-monkeys); 8000 => { NoOp(one); NoOp(two); NoOp(three); }; 5001 => Dial(PJSIP/5001,20); 5002 => Dial(PJSIP/5002,20); }; пытаюсь подключиться sip клиентом - получаю <--- Received SIP request (912 bytes) from UDP:aaa.bbb.ccc.ddd:40071 ---> REGISTER sip:ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com;transport=udp SIP/2.0 Via: SIP/2.0/UDP 192.168.248.44:40071;branch=z9hG4bK189376b0aa61a903;rport Contact: <sip:5001-0xee2182f3710@192.168.248.44:40071>;expires=3616 Max-Forwards: 70 Authorization: Digest username="5001", realm="asterisk", nonce="1741963508/7a474b6251959abd72902aeb35d4585f", uri= "sip:ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com;transport=udp", response="6347d1955e6a68023ed587308bc4af5 c", opaque="18d00e2d7b038942", cnonce="6c7e877e116fe120", qop=auth, nc=00000001, algorithm=MD5 To: <sip:5001@ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com> From: <sip:5001@ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com>;tag=26d01aaa47ae801d Call-ID: 33018627267c8948 CSeq: 17331 REGISTER User-Agent: baresip v3.19.0 (amd64/OpenBSD) Allow: INVITE,ACK,BYE,CANCEL,OPTIONS,NOTIFY,INFO,MESSAGE,UPDATE,REFER Content-Length: 0 <--- Transmitting SIP response (405 bytes) to UDP:aaa.bbb.ccc.ddd:40071 ---> SIP/2.0 404 Not Found Via: SIP/2.0/UDP 192.168.248.44:40071;rport=40071;received=aaa.bbb.ccc.ddd;branch=z9hG4bK189376b0aa61a903 Call-ID: 33018627267c8948 From: <sip:5001@ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com>;tag=26d01aaa47ae801d To: <sip:5001@ec2-aaa-bbb-ccc-ddd.eu-west-2.compute.amazonaws.com>;tag=z9hG4bK189376b0aa61a903 CSeq: 17331 REGISTER Server: Asterisk PBX Content-Length: 0 [Mar 14 14:45:08] WARNING[38842]: res_pjsip_registrar.c:1166 find_registrar_aor: AOR '' not found for endpoint '50 01' (aaa.bbb.ccc.ddd:40071) что я делаю не так?

2 2

Bird2: weight/metric for blackhole vs BGP
by Volodymyr Litovka 25 Feb '25

25 Feb '25

Привіт, шота я не можу роздуплити, чи можна в bird встановити weight/metric для blackhole route або підняти метріку для BGP. ідея полягає в наступному: - я маю анонсувати певну мережу в апстрім по BGP *безумовно*, але без наявності відповідного static route воно не буде анонсуватися, тому роблю blackhole: protocol static { ipv4; route x.x.x.0/24 blackhole; } - in turn, я цю мережу отримую (або не отримую) по BGP з підключенної наступної системи - тобто * коли я отримую анонси з підключенної системи - трафік форвардиться вниз * коли я НЕ отримую анонси з підключенної системи - трафік блекхолиться Проблема в тому, що statement 'route x.x.x.0/24 blackhole' перебиває BGP анонси й має пріорітет незалежно від наявності чи відсутності анонсів знизу. Питання - як змінити метріку або blackhole маршруту, або отриманого по BGP префікса, щоб BGP завжди був вищого пріорітету? Дякую. -- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

1 2