Orz日記 by Akio Morita

_ [雑記]CERN到着...

始発にしか思えない 7:45発のバレンシア-ミュンヘンのフライトが30分遅延し て、乗り継ぎ便が2時間後の便に振り替えになる... スペイン航空やってくれるぜ Orz

_ [雑記]CERNの見学

Frank Zimmermannと相場さんと一緒に昼食を取った後、CERNの中を 案内してもらった。フランス側にある中央制御室(LHCの制御もここで 行われる予定)では現在入射器(Linac/PSブースター)とSPSの運転が 行われていた。すごく広くてびっくり!液晶パネルはアームマウントで 横に3枚セットで使っていた。OSはWindowsXPとUNIX+X Serverらしい画面が あった。LHCの運転ツールの一部は既にプロトタイプが存在し、 PSやSPSの運転で試験が始まっているそうである。

古いソフトの話は聞かなかったが、新規に開発してるツール類はJAVAで 組んであるそうで、LHCの上位アプリもJAVAで組むらしい。

スケジュールとしては、今年末に入射点から最初のアーク部の コンポーネントの冷却を始めて、ハードウェアコミッショニングを 行う。アークを抜けた直後にビームダンプを仮置きして、アーク部に 実際にビームを通して超伝導磁石のクエンチ耐性試験などが予定されてる。 ビームの衝突試験は来年末に入射エネルギーで行う予定。 (KEKBからコミッショニングに参加するとなるとこの辺りか?)

相場さんの話だと、CERN-Japanフェローで枠組が出来てる状態で 話がまとまるのに3ヵ月ぐらいかかったそうで、プロジェクトアソシエイト として参加する場合、協定を結ぶ等、上の人々が動く必要もあるので 手続きをするとなると相当余裕を見て置く必要があるらしい。 (KEKBから人を送るって話はあるけど、この辺はどうなってるのかな?)

_ [雑記]Opteron

Quad Core版のバルクが流れ始めたらしぃ...

_ [雑記]Radeon HD6800シリーズ

公式発表＆流通開始の模様

またしばらくは、AMDの天下が続くのかな

_ [雑記]ASRockの新しい母板

Xeon E3-1200v5用のMicroATXの奴が、PCIex8 x2, PCIex4 x1, PCIEx1 x1な構成でStorage Serverに良さげ

x8に、SAS HBAと 10G/40GbE NIC・FDR HCAを装着できる上に標準で 1GbEが2ポートある

_ [FreeBSD]net/aquantia-atlantic-kmod with multi core

aq driverは、iflibフレームワークで動いているので、デフォルトのTX/RX queueの数は接続バス上のプロセッサのコア数になっている

Ryzen 3700X(8C)からRyzen 5950X(16C)への換装で、 queueが 8個から 16個に増えたら通信障害が多発

症状は、TCPはすごく遅い(多分再送多発っぽぃ)とか、外向きのpingは問題ない(ように見える)が、外部からのping着信に答えないなど

どうも、TX/RX queueが増えてもハードウェア的にハンドル出来ていない模様…

本来は、aq driver側でNICがサポート可能な最大 queue数を iflibフレームワークに伝えるべきなのだろう

当座のワークアラウンドは、iflibフレームワークのtuning knobで TX/RX queueを動作実績のある数まで絞る(例えば、8 queue)

dev.aq.0.iflib.override_nrxqs=8
dev.aq.0.iflib.override_ntxqs=8

sysctl(1)でも書き込める変数なのだが、iflib(4)に書かれている通り、参照されるのはドライバ初期時なので、/boot/loader.confに記述するか aq driverをロードする前にkenv(8)で設定するのが正解(ロード前は、sysctlノードはまだ生えていないぞ！)

netioによるTCP接続ベンチマークで、X550-T2とかだと普通に10Gbpsまで伸びるGen3 x4バス接続で、3～4Gbpsまでしか出ないのが難なのだが、現時点でWoL出来る10G PCIe NIC Cardってこれしか見つけていない Orz

2.5Gだと、I225とかRealtek 8125辺りはオンボード実装でWoLサポートしているので、WoLできるPCIe Cardがあるかも知れんが、速度的にはAQC107ほんの少し速い罠 (NBASE-T対応10Gスイッチなので、素直に性能が出る5GBASE-TなWoL PCIe NIC出てきたら考えるかも)

いや、一応複数ストリームなら 9Gbps越えしてくるから、rsync複数立てとかだと性能が出るのだが、Tbyte級のファイルをNFS越に流し込むとかのケースで性能が頭打ちに (X550とかだともう少し素直に性能が伸びる)

状況的には、aq driver - userland間のコンテキストスイッチコストや転送遅延もしくは、RX/TX queue 1本辺りの処理帯域でリミットがかかっているのだろうが…

RX/TX queueを 1個にして試したけど、single TX/RX queueでも複数ストリームなら 9Gbps越えてくるので、aq driver - userland間の転送帯域で限界が来てるぽぃ