戯言雑記

 懲りずにAliexpressでSFP+を購入している 今回は ONTi 10G FSP+ DUAL MM LC DDM 　と　 LC UPC to LC UPC ケーブル SFP+が2コで3190円　光ファイバーが10mで1160円　独身の日の購入なので結構なバーゲンか これCRS305-1G-4S+INと、QSW-M2106-4Sで認識、通信してくれている。ラッキーだ。 これで10GbE構成、かなり安価に行けるか。 以前、これもAliexpressで10Gb PCI-E NIC Network Card 82599EN Chipset for Intel X520-DA1を5000円ほどで購入している。X710のカードになると結構高いけど。X520だと、かなり安いね。

 https://www.marvell.com/support/downloads.html でAQN-107の3.1.8が11/29/23に公開されていた。ファイル名はMarvell AQtion_Win10-11_3.1.8.zip これ展開すると Release Note_Win 3.1.7.txt  テキストファイル 20221109_Marvell_AQtion_Installer_3.1.7/　フォルダー 20221028_Marvell_AQtion_x64_Win_v3.1.7/　フォルダー が展開される？？？？、3.1.8のはずなのに3.1.7？？？ infファイルでインストールしても3.1.7十だけ表記されるので、ファイルの日付も2022/11/10くらいなので、バージョンアップされていないね。

 全然何もしていないが、 ちろっとAliexpressを見ていたら以下のようなレビューがあった 消えるとあれなので以下に引用（自動翻訳まま） 説明どおりに機能します。ホストデバイスは2.5G速度をサポートする必要があります。Mikrotik CRS3xxデバイスでは、自動ネゴシエーションをオフにしてRouterOS 7.3以降を使用する必要があり、強制的に2.5gbpsになります。その後はうまくいきます。ありがとう! 原文は Works as described. Host device must support 2.5G speed. On Mikrotik CRS3xx devices, you need to be using RouterOS 7.3 or newer with auto negotiation off, forced to 2.5gbps. Works well after that. Thanks!  現在うちの  CRS305-1G-4S+IN はバージョン6系を使っている。ここは1回7系にアップグレードして試してみるか。それでいままでのSFP+がつかえたらごめんなさい。 特に何もしていないですが。

 Realtekのドライバーを最新版に入れ替えた。 Realtek PCIe FE / GBE / 2.5G / 5G Ethernet Family Controller Software　の Win11 Auto Installation Program (NetAdapterCx)　の Ver.　1124.015 , 1125.015 , 1126.015, 1166.015 , 1168.015 2023/11/28 をインストールした、結果・・・・・・・ジャンボフレームは通らなかった。

Mikrotik S+RJ10を購入して2.5GbEでリンクアップしたが、問題が生じた。 問題は内部のhttpサーバーとRealtekのGbEのNICと通信できない現象が起こった。他のチップで確認していないのだが、現状Realtek→FX2G-08EM→Mikrotik S+RJ10→httpサーバーのアクセスだとジャンボフレームを設定するるとつながらない 外部のwebサーバーはつながるが、内部がつながらない？？？？？。 取りあえずジャンボフレームoffでOK Realtekのジャンボフレーム設定値4088 Byteと9014 Byteがあるが、どちらもダメ、向こうのみ通信可能？？？？ Realtekのドライバーの問題か(現在はHPが配付しているドライバーをインストール2022/06/16の日付の10.60.615.2022と言うバージョンが入っている。 取りあえずRealtekからダウンロードしてインストールしてみますかね。

 さて今まで2つの安物SFP+を購入した 1つ目は間違ってTP-Linkの物を買ってしまった。バカだなー 2つ目はfor MikroTikがあるのにfor Customizedを買ってしまう、使えそうだが使えなかった。 3つ目はちゃんとFor Mikrotikを買ったが・・・・・つながらなかった。 3000円くらい3000くらい、2000円くらいで8000円も使っている・・・・高い勉強料だ。 amazonとかで純正のMikroTik S+RJ10が12000円くらいと考えると悲しい。 いちおう知見としてはwebから、「interface」→そのインターフェイス、開かれたページの中頃に「Auto Negotiation」の設定があるこれ初期値はONで以下のようになっている これをオフにして、衝動設定で2.5GbEを有効にしろと指示を受けたが、 残念ながら選択肢が無い。 ここで「おまえのスイッチわからんがサポートされてないんじゃない」(意訳）ってサポートに見放される。 でもMikroTik S+RJ10だと2.5Gbpsでリンクアップするけどなーーーーー。って言ったら。 「何言っているかわからん」(意訳）って帰ってきた。おいおい。 さてさてどうした物かなー

 できるだけやすく進めたいと思うので。 Go-Fibereasy を探求してみる。 安物買いの銭失いになら無いといいな。 現実になりそう、一週間くらいで届いたが。  動かなかった。Aliexpressで動かないって送ったけど、返信無かった。 注文よく確認したら「For Customized」を買ってしまっていた。申し訳ない。

 2.5GBe接続したくって、AliExpressでTP-LINKのTL-SM410U-2.5Gを買った。 ほんとは別のを見ていたのだが、間違って上記のSPF+を買ってしまった。・・・・失敗した。本当は Go-Fibereasy の物を買おうとしていたら間違ってしまった。こっちはMikorotik用を選べたのだった・・・・。 さて、TL-SM410U-2.5GをMikroTik CRS305-1G-4S+INにさすと。web画面のインターフェイスでの画面で 4段目の　sfp-sfpplus2にさしているのでが、正常動作の物RSになっているののRしか表示されない。詳細をのぞくと TP-LINKとは認識しているが、そこまでのようだ。さて、この先どうするか。 できるだけやすく進めたいと思うので。 Go-Fibereasy を探求してみる。 安物買いの銭失いになら無いといいな。

 Esxiよりディスク性能いい感じ。 Esxiからもってきたディスク、qcow2に変換されたときに、全領域確保するようだ。のでシュリンク qemu-img convert -O qcow2 vm-x-disk-1.qcow2 vm-x-disk-1.qcow2.new でシュリンクできる  後で　mvコマンドでファイル名を切り替えればOK @disksystem　ProxmoxVE 設定とベンチマーク結果まとめ（ディスク編） https://qiita.com/disksystem/items/b18412a69fdbf2fac0fc から キャッシュは　HDDはWrite back、SSDはWrite back(unsafe) SSDはSSD エミュレーションはON IO ThreadはON SCSIコントローラーはVirtIO SCSI Single Barrier無効化は効果があるがリスク対効果を考えて設定 SCSIコントローラーは　VirtIO SCSI single NICはVirtIO(準仮想化）でMTUを9000 NICは認識されないのでubuntuの場合 /etc/netplan/ の中の有効なファイルを編集 ens192などを ens18 などに変更

  XG-C100F　Diriver　2.2.3　でてたのでアップデート 特に変化無く、インストールできた。

 前回パス したのですが、今回はアプデートすることにした。 6.46.8　→　6.48.3（2021-May-25 06:09） 大きな変更点は !) wireless - fixed all affecting 'FragAttacks' vulnerabilities (CVE-2020-24587, CVE-2020-24588, CVE-2020-26144, CVE-2020-26146, CVE-2020-26147); FragAttacks（フラグアタック）対策らしい、無線LANルーターではないので関係ないのかもしれないが、気持ち悪いのでアップデート（6月からほったらかしなんですけどね） ファームウェアのアップデートは自己責任で

 MikroTik CRS305-1G-4S+INのファームをアップデートlong termをインストール。現在Ver.6.46.8で6.47.9をインストールする、変更点は What's new in 6.47.9 (2021-Feb-05 15:22): Changes since 6.47.8: bgp - fixed VPNV4 RD byte order; branding - fixed LCD logo loading from new style branding package; crs312 - fixed missing SwOS firmware on revision 2 devices; crs3xx - correctly filter packets by L2MTU size; crs3xx - improved system stability when receiving large frames for CRS317, CRS309, CRS312, CRS326-24S+2Q+ and CRS354 devices (introduced in v6.47.5); defconf - fixed default configuration loading on RBcAP-2nD and RBwAP-2nD; hotspot - fixed "idle-timeout" usage with RADIUS authentication; hotspot - fixed special character parsing in "target" variable (CVE-2021-3014); package - do not include multiple The Dude packages in HDD installer; snmp - fixed "send-trap" functionality; webfig - fixed new interface addition; winbox - fixed enable/disable button presence for "Bridge/Hosts" menu; winbox...

 2.5インチSSDが手元に余りがちなので、使い道を考える。 NASに取り付けて、信頼性のいらないデータの一時保存場所にすれば10GbEを生かせるのではないかと考えた。 そこでAS4004Tの背部USB3.0に東芝の古いSSDをつなげてみた。 ローカルで接続したときのCrystalDiskMark7.0の結果が以下書き込み読み込み250MB/s程度のSSDです。 さてこれを、AS4004Tの背面USB3.0に接続して共有かけて、測定 ？ローカル接続より早い、シーケンスの書き込みは遅くなっているが、読み込みは早くなっている。キャッシュが効いている？ランダムも上がっているね。すごいね。 さて、これをNASのRAID5と比較すると 微妙だな、読み込みはRAIDの方は速いね。ランダムはさすがに遅いが、シーケンシャルは元のSSDがあまり速くないためか。RAIDに負けているな。 ちなみに転送速度がどんな感じか見るとUSB-SSDが以下の通り RAID5が シーケンシャルの読み込みの山は最大値は変わらないが、明らかにRAID5の方が平均値が高いですね。書き込みはどちらも同じくらいか、微妙に利点が見えにくいな。 ちなみに4Gbyte程度のファイルを5個圧縮した約20GBの7-zipをそれぞれのディレクトリに置いて、リモートのPCから7-zipで解凍する実験をした。書庫の場所も、展開先も同じ Sドライブに接続して、Sドライブにある圧縮ファイルをSドライブに展開する。 バッチファイルで実行、 powershell -Command "Measure-Command {batコマンド}" で実行時間を計測 RAID5の場合 273.0913381秒 USB-SSDの場合 232.1472598秒 約15％の短縮。 解凍時のネットワークトラフィックは USB-SSDが以下の通り RAID5が USB-SSDの方が安定して読み込み書き込みできている。もっと速いSSDを使うともっと明確に速くなりそうな気がする。 あと、展開している時に静かでいい。

 ASUS XG-C100FのチップメッカーのMarvellのページのDriverのページの表記がおかしい？ https://www.marvell.com/support/downloads.html# なのだが、PART NUMBERでAQC107を選択するとDATEが01/11/21、前回2020.12.19の時に12.19公開で、本日も21.1.11(表記：01/11/21)公開になっている。windowsのバージョンはバージョンは前回と同じ2.1.21です。ちなみにファームウェアも前回と同じ1.5.0.3.109 何じゃろね。

  激安10GbE計画(15)ASUS XG-C100F　Diriver の方法でドライバーはアップデート可能 のぞいたタイミング(2020.12.19)でファームウェアが出ていたようなのでアップデートしてみた（ アップデートが必要かどうかは自己責任で判断してください ） Windowsからファームウェアにバージョンを確認するすべはないようです。 管理者喧伝でコマンドプロンプトを開き、atlflashupdate.exeを実行する。 Aquantia AQtion Firmware Update Tool [Version 1.5.0] *** Important notice *** Update utility is only supported for certain systems. Please refer README file for supported systems. Proceed with update? (y/n): y __________________________________________________________________________________________________________ No  Name                                    Firmware  Update status       Device         MAC address __________________________________________________________________________________________________________ 1   ASUS XG-C100F 10G SFP+ Network Adapter  3.1.58    Available: 3.1.109  00B...

 現在MikroTik CRS305-1G-4S+INのファームウェアLong-term releaseので使っている、Release 6.45.9　2020-05-07がインストールされている。今見たらRelease 6.46.8　2020-11-02が出ていた。 mikrotikの リリースノート 見ているとstableはひと月より短い間隔でアップデート。Long-termで三ヶ月毎くらいでアップデートされている。 ふたつバージョン上がっているしアップでとしておくか。 webのquick setでupdateをチェックしてdownload&installをクリック。勝手にリーブとまで行われる。体感的には5分くらいでアップデート完了 現在6.46.8設定見ていると2.5GbEもつながるみたいだ。RJ45があればつかえるのかな。もう一ポート現状余っているのよね。どうしよう。

激安10GbE計画(5)ASUS XG-C100F で導入したXG-C100F搭載チップはAquantia AQC107 driverは AquantiaがMarvellに2019.5に買収された のでMarvellのページにある．とりあえず，いまは https://www.marvell.com/support/downloads.html 「PART NUMBER」をAQC107を選択する． Windows用のドライバーをダウンロード，解凍するとWindowsのバージョン毎のフォルダーができるのでWindows10であればwin10をフォルダーに入り，*.infを右クリック→インストールでインストールできる．

MikroTik CRS305-1G-4S+IN にログインして　Terminalに以降 コマンドプロンプト（[admin@MikroTik] >  ）が表示されているので > system health print cpu-temperature: 37C  > system health print oid cpu-temperature: .1.3.6.1.4.1.14988.1.1.3.11.0 と表示される，他の機種だともっと沢山の情報が表示されるらしい．詳細はこちら [mikrotik][SNMP] Cloud Core Router(CCR1016-12G) の温度およびVoltageなどのOIDを取得する方法。 munin　plaginの作り方 ここを参考に https://qiita.com/tukiyo3/items/668896c7b3412a01fbf1 snmp__processesをベースに作り替える cd /usr/share/munin/plugins cp -a snmp__processes snmp__processes_mikrotik_tmp  snmp__processes_mikrotik_tmp　を編集する 75行目付近 print "require 1.3.6.1.2.1.25.1.6.0 [0-9]\n"; を  print "require 1.3.6.1.4.1.14988.1.1.3.11.0 [0-9]\n"; に書き換え ，84行目付近にタイトルや軸を設定，とりあえずタイトルと，縦軸だけ書き換え．値が10倍されているけど39℃だと390と表記される.修正めんどくさいのでとりあえずそのまま graph_title Temperature (degree) graph_vlabel Temperature (*0.1 degree) 97行目，さっきのoidを書き込む  print "processes.value ", $session->get_single('1.3.6.1.4.1.14988.1.1.3.11.0'), "...

ファイルシステムによる性能の違いがあることが分かった． RealSSD C300 128GBを使っている， 過去の記事等 を見ると　読み込み330MB/s，書き込み150MB/s程度のSSDを使って検証．ESXiにVMFSで30GBの領域を2つ確保Ubuntu 18.04にマウント，一つをext4で，一つをXFSでフォーマット，それぞれに7GB程度のファイルをFASTCOPYで移動するときの挙動 ext4では読み込みが2.3~2.5Gbps≒290MB/sなのでほぼ性能を出し切っている．ところが書き込みになると，最初のキャッシュが利いている領域は4Gbps超が一瞬でて，その後600Mbps≒75MB/s程度程度に低下する． 一方XFSでは読み込みと，書き込みの初期の挙動はext4と同じ挙動だが，安定状態の書き込み速度が1.2Gbps程度とほぼ150MB/sとほぼ性能を使い切っていることがわかる． ESXiでubuntuでsambaサーバー構築する際はXFSか．ext4って連続書き込み遅いのかESXiとの相性か． CrystalDiskMark7.0の数字を見ていると小さいサイズだと逆転していて，exit4の方が速い．大きいサイズでは変わらないことになっている．

適当にESXiにubuntu18.04をインストールsambaをインストール転送速度を測ってみた． 接続しているHADは東芝のMD05ACA600 6TBのHDDとcrucialのRealSSD C300の128MBをSATA　6Gbps接続でつないでいる．結果は SSD：ネット接続300MB/ｓ！　RealSSD C300の当時のベンチが300MB/s位だったのでおお，性能でている．とおもった．ところが HDD：？？？？？？ほとんどおんなじじゃん．どういうこと？ 8GiBでも試す． SSD:ちょっと転送速度落ちたね． HDD転送速度たちたね． 実際の転送速度はSSD： HDD：  ！！！！！！！！！！！！！！！！！！！！ そうだったやつが帰ってきた．「 大容量ファイルのコピーが遅い仮想マシン2 」VMFSの問題だった．SSDでおこらんって書いたけど，今回はおこっている！なぜだーーーーーー． さらに，別OSで試してみた．XigmaNAS　UFSでフォーマット． SSD：ちょっとグラフ荒れているけど（キャプチャーしたときで，他のときは安定していた．），8GiBでやった場合,よみかきで200MB/sネットワークも2Gbps程度出ている． HDDも2Gbps程度出ている．が逆にいうとSSDもHDDも2Gbpsで頭打ち？？？？？ OSによって挙動が違うのか