X
トップページ⇒Linux
984コメント303KB
ファイルシステム総合スレ その19
0001login:Penguin
垢版 |
2020/06/13(土) 14:45:47.76ID:Qx8FdC0t
● 前スレ
ファイルシステム総合スレ その18
https://mao.5ch.net/test/read.cgi/linux/1514472651/l50

● 関連スレ
ジャーナリングファイルシステム
https://mevius.5ch.net/test/read.cgi/unix/979408065/l50

OpenSolaris/Illumos (OpenIndiana, etc.) 6
https://mevius.5ch.net/test/read.cgi/unix/1337411922/l50

FS関連スレ
https://medaka.5ch.net/test/read.cgi/os/1137387538/l50
過去スレ, 関連リンクは >>2-10 あたりで.
0101login:Penguin
垢版 |
2020/12/02(水) 12:30:43.20ID:UyolvWPz
OpenZFSはGigazineにも記事になってたけど、おまいらの誰かが書いたの？
0102login:Penguin
垢版 |
2020/12/02(水) 12:38:32.74ID:EbfJ4YWH
Btrfsがカーネル5.4以降は安定化したって本当ですか？
0103login:Penguin
垢版 |
2020/12/02(水) 17:53:39.97ID:S4Metex0
>>102
ふーん（　´_ゝ`）
0104login:Penguin
垢版 |
2020/12/04(金) 14:57:00.02ID:5E9mJMP1
XFSとZFSはあるのに（しかもそこそこ有名）
なんでYFSはないの？
0107login:Penguin
垢版 |
2020/12/05(土) 08:21:38.50ID:I27uOiuv
Btrfsが安定したみたいだから皆で移動しようぜ(俺はしないけど)
0108login:Penguin
垢版 |
2020/12/05(土) 14:42:57.62ID:0qEeFgg2
昔はDVDコピーして保管してたからファイルシステムもそれにあったものをと思ってたけど、法律で禁止されたら、大人しく従うので、扱うファイルサイズが劇的に減ってバックアップの時間やファイルが壊れない事とか気にしなくなちゃった。
RAIDも組まなくなったし。
昔が異常だったのかも。
0109login:Penguin
垢版 |
2020/12/07(月) 08:36:32.58ID:IBxCgvLS
>>107
待てよ、お前にだけ良い格好なんてさせないぜ！

>>99
やったぜ
0110login:Penguin
垢版 |
2020/12/16(水) 14:01:01.29ID:6XXxpXQI
>>107
よし、行こうぜ
(行かないけど)
0111login:Penguin
垢版 |
2020/12/19(土) 10:28:24.27ID:1M3ThgxR
b　僕は
t　とっても
r　ロンリー
f　ふーん
s　シスター
0112login:Penguin
垢版 |
2020/12/19(土) 11:44:29.71ID:qcUaZawe
Btrfs:
Boobs 'n' Titties, Real Fuckin' Sex
0113login:Penguin
垢版 |
2020/12/21(月) 15:39:25.67ID:vMbmecIY
Windows 10 バージョン20H2にて、チェックディスクを行なったさいにファイルシステムが破損する不具合を独誌Planet 3DNow!が報告している。

同誌によれば、管理者権限で実行したコマンドプロンプトから「chkdsk C: /f」コマンドを実行すると、
再起動後に「NTFS FILE SYSTEM」エラーとともにブルースクリーンが発生し、正常に起動できなくなる場合があるという。
12月度の月例パッチにあたる「Build 19042.685」を適用した環境で発現が確認されている。
また、この不具合は仮想環境でも発生することから、特定のハードウェアに起因しないとしている。

不具合が発生した場合は、自動または手動によるシステムの修復が必要。すでにフィードバックHubを通じてMicrosoftに報告が行なわれているという。

Windows 10のチェックディスクでファイルシステムが破損する不具合
https://pc.watch.impress.co.jp/docs/news/1296477.html
https://pc.watch.impress.co.jp/img/pcw/docs/1296/477/01_l.jpg


＼(^o^)／ｵﾜﾀ
0114login:Penguin
垢版 |
2020/12/23(水) 22:25:19.48ID:puKvYVTf
さすがMicrosoft！
俺たちへの嫌がらせを平然とやってのけるッ
0115login:Penguin
垢版 |
2021/01/06(水) 19:04:54.63ID:E6HmvEhu
MSはなんでReFSやめてしまったんやろな
btrfsも先行き不透明感あるし難しいのかね
0116login:Penguin
垢版 |
2021/01/06(水) 19:15:25.87ID:WNjEJ6KT
refsって止めちまったのかい？
ブート出来ない時点で使わんがね。
0117login:Penguin
垢版 |
2021/01/10(日) 14:34:37.92ID:m4QtNq0y
え、ReFSやめたの？
OSを超えて共通で使えるファイルシステムとなると結局Windows系になるのにExFATは機能不足だし
NTFSは機能山盛りでWindows以外で書き込むのは怖いしで
ちょうどいい中間になってくれたらと思ってたのに
0118login:Penguin
垢版 |
2021/01/13(水) 03:35:46.45ID:DVhKFdcr
bcacheは個人で使うにも安定性はイマイチだよ
数日ほど連続稼働させてると内部でエラーを起こして強制的にキャッシュドライブが外される

ライトバック設定の場合はシステムが即フリーズする
ライトスルーとライトアラウンドならキャッシュが無い状態で稼働し続けるものの、
キャッシュドライブをカーネルがロックしたままなので再起動するまで元通りにできない
0119login:Penguin
垢版 |
2021/01/14(木) 18:41:08.33ID:et/AaPUC
時々壊れるのを気にしなければBtrfsが最強だな。
0120login:Penguin
垢版 |
2021/01/14(木) 18:59:49.00ID:r6N0ZmOC
せやな
Linux板住人諸氏は当然バックアップを取っていることでしょうから問題なし
0121login:Penguin
垢版 |
2021/01/14(木) 19:29:12.05ID:8kW9H0o7
うむ
Fedora には足を向けて寝られない
0122login:Penguin
垢版 |
2021/01/15(金) 08:53:08.53ID:JdPf2J/L
>>119
そこってかなり大事な要素だと思うんだが…
0123login:Penguin
垢版 |
2021/01/15(金) 11:04:30.91ID:pFJP7GFV
ゆうほど壊れる？
0124login:Penguin
垢版 |
2021/01/15(金) 19:06:27.45ID:F1XOiULN
俺の場合は、USBメモリをFATで使ってて誤って抜いてFATを壊したのは何回かあるが、
他、ハードディスクやSSDでNTFS、XFS、ext4、HFS+を使ってて壊れたことは記憶にない。
しかしBtrfsは壊れたことがある。
これを実用に耐えないくらい壊れると見なすか、バックアップを取ってれば良い話と見なすか、Btrfsは運が悪かっただけで、
上記2行目で挙げた他のファイルシステムに劣らないくらい堅牢だと見なすかはわからん。

ZFSは使ったことがない。AppleのAPFSや、MicrosoftのReFSは使ったことあるけど経験が少ないのでなんとも。

あとBtrfsはデータとメタデータのチェックサムを使って破損を検出する（ZFSも同様）ので、破損をしっかり検出しているだけであって、
他のファイルシステムは破損に気づいてないだけだという主張もあるね。XFSやext4はデータのチェックサムを使わないね。
ま、Btrfsもこのスレで否定的レスがつかないくらい進歩してくれますように祈っていますよ。
0126login:Penguin
垢版 |
2021/01/15(金) 20:06:19.09ID:wSNn+C+R
アイコンは16年の歴史があるからな!!!




アイコン16歳(´・ω・｀)
0127login:Penguin
垢版 |
2021/01/15(金) 20:08:04.13ID:vAyutpx0
>>124
起動ディスクをUSB メモリをzfsでソフトウェアraid1にするといいぞー
安心感が違う。
0129login:Penguin
垢版 |
2021/01/16(土) 07:45:35.62ID:edFVkFUY
zip内のでもクラッシュするてヤバくね
ドザなんてビギナーだらけだし
対策放置してる間は格好の的
0130login:Penguin
垢版 |
2021/01/16(土) 10:26:48.99ID:Vzy6ynJv
下手をするとウェブブラウザで踏んだリンクがfile://C:/とかでもダメだったりしてな
試してみる勇気はない
0131login:Penguin
垢版 |
2021/01/17(日) 06:39:37.83ID:F/wGP8VN
>>125
嫌な奴への復讐に使えるやないかｗ
0132login:Penguin
垢版 |
2021/01/17(日) 16:59:00.56ID:Sk6MR5jr
>>124
その終盤にある主張に半分同意
NTFSは一見ファイルが無事なようで中身が壊れるサイレント損傷が多い
フリーズすると直前の10〜20秒に更新されたファイルが高確率で壊れた
安全に更新するためにバックアップを作ってから更新するソフトでもバックアップごと壊れる
0133login:Penguin
垢版 |
2021/01/17(日) 21:43:31.55ID:X/j5Pza0
今のSSD/HDDはメディア自体がECC(誤り訂正符号)で書き込むから
データやメタデータへのチェックサムは不要だと思う
メディアのECCで足りない場合はRAID-5やRAID-6にしてスクラブで
定期的に修正すればいい

と言いたいところだが、個人だとRAID-5/6組めないからねぇ

SMART でコレクタブルエラーやアンコレクタブルエラーが頻発して
ない状態でのサイレントな損傷はメモリかマザボの不良かFSのバグか

最近知ったのだがAMDのCPUだとサーバじゃなくてもECCメモリ使える
らしいので入れてみたい
0134login:Penguin
垢版 |
2021/01/17(日) 22:07:32.83ID:YYKfpRUY
>>133
SSDとかECCモリモリですよね。(じゃないと耐えられない)

raid5や6はパリティが壊れるとサイレントクラッシュするのですよ。
(zfs のraidzは大丈夫。あとはbtrfsも含めてサイレントクラッシュする。)

Ryzen CPU(グラフィック内蔵のAPUはPROシリーズのみ)はECCに対応してるが、マザーが対応してないとムリ。ECCメモリ使えるけどECC機能が使えない感じ。
またECC対応してても、訂正した時にOS通知されるかはまた別問題。
なかなか苦労します。

DDR3メモリ以降、row hammerの危険に晒されてるのでECCはあった方がいい。もしくはDDR5(標準で32bit毎にECC)まで我慢。
0135login:Penguin
垢版 |
2021/01/17(日) 23:09:17.14ID:X/j5Pza0
>>134
> raid5や6はパリティが壊れるとサイレントクラッシュするのですよ。

意味わからん
RAID-5でストライプが２つ、RAID-6なら３つ同時に壊れない限り
クラッシュしないでしょ？

そもそもサイレントクラッシュ(I/O Error を返さない)するのはパリティ
計算して正常だった場合で、相当な確率になるはずでは？

そうじゃなきゃハードウェアRAID製品のスクラブ機能は一体何をしている？
(それとも md/lvm の RAID-5 はリード時にメディアエラーじゃない限り
パリティを読んでないってこと？)
0136login:Penguin
垢版 |
2021/01/17(日) 23:50:50.72ID:YYKfpRUY
>>135
壊れたパリティを元に、正常なデータをハードウェアraidなりソフトウェアraidが壊しちゃうのよ。
パリティが真の設計だからね。
0137login:Penguin
垢版 |
2021/01/18(月) 00:03:16.56ID:Vu8dGznQ
それもあるし、パリティは、「消失したデータ」を復元することはできても、
一体どれが誤ってるのかわからない状況だと、どれが誤りかを識別して訂正はできないと思う（何かがおかしいということが分かるに過ぎない）
サイレントクラッシュって書き込み途中での電源断で起きるということだからパリティが壊れることもデータが壊れることもあるわけで
0138login:Penguin
垢版 |
2021/01/18(月) 01:13:27.67ID:1g4OJJqS
>>137
> サイレントクラッシュって書き込み途中での電源断で起きるということだから

内容は間違ってないが、悪いけどそれは話のすり替えだ
話がそれ過ぎたし、この話題はもうやめますね
0140login:Penguin
垢版 |
2021/01/18(月) 16:43:02.31ID:dazYikCn
何でアイコンの表示とファイルシステムが結びついてんだ
0141login:Penguin
垢版 |
2021/01/19(火) 06:53:23.26ID:kYmffXAa
ZFSとかのミラーリングで片系のパリティだけ損傷した場合はどうなるの？
0143login:Penguin
垢版 |
2021/01/19(火) 10:34:09.51ID:upb7F6zS
結局NTFSってFAT32を無理矢理拡張したようなもんでしょ？
そうでなければバックグラウンドサービスで常時断片化を解消しようとする筈がない

少なくとも大事なデータをしまっておく気にはなれないよね
0144login:Penguin
垢版 |
2021/01/19(火) 10:46:26.30ID:4vT3g5Ot
「Linuxのファイルシステムは断片化しない！」と吠えてた奴がいたな
0146login:Penguin
垢版 |
2021/01/19(火) 12:27:42.15ID:Fc+0MPzG
「Linuxはウイルスに感染しない！」よりはマシだからセーフ
0147login:Penguin
垢版 |
2021/01/19(火) 12:44:15.91ID:/3d5Dr9+
アプリによってファイルの上書きが、メモリ上のものを既存ファイルに追記のケースと、別名保存完了後に既存ファイルを消してリネームのケースがあって、断片化に影響してる気がするけど、あってる？
0148login:Penguin
垢版 |
2021/01/19(火) 14:10:36.49ID:s0futnPp
合ってないと思う
本当に追記モードで書ける場合ってごく僅かだと思うし
0149login:Penguin
垢版 |
2021/01/19(火) 14:12:40.28ID:7UmUKAt0
Linux のファイルシステムが断片化しにくいというのはなぜだっけ
EXT ファイルシステムのことだよね
Windows の FAT や NTFS が断片化しやすいのは過去の互換性を重視しているタメレガシーな仕様を引きずっていると思われるが
0150login:Penguin
垢版 |
2021/01/19(火) 15:29:07.50ID:FmzE4vXX
ちょくちょくe4defragしてるけどext4も~/.cache内とか普通に断片化しまくってるし
0151login:Penguin
垢版 |
2021/01/19(火) 18:18:33.08ID:BK3Mr0Sm
>>149
配置の様子を見ることが出来ない、集計表示するツールが普及していないだけ
0153login:Penguin
垢版 |
2021/01/19(火) 20:04:02.54ID:upb7F6zS
>>151
今別パーティションのUFSなんだけど、１年ちょっと使ってこんなもん　書き換え頻回
https://i.imgur.com/3iSmcOv.png

ext4も似たようなもんなんじゃないの
数字にどんだけ信憑性があるのかだし、最近Linuxでext4使ってないから知らんけど
0154login:Penguin
垢版 |
2021/01/19(火) 20:13:22.02ID:e+sIKpUU
>>153
ffsのfragmentationは、断片化って意味じゃないぞ
0156login:Penguin
垢版 |
2021/01/19(火) 20:32:32.85ID:upb7F6zS
>>154,155
今まで完全に勘違いしてた　アハハ(　´▽｀)
そっちのフラグメントの指標だったのね

放置プレイせず指摘してくれてありがとう
0157login:Penguin
垢版 |
2021/01/21(木) 00:36:18.40ID:Cfby4q5X
そういえば
Windows95が出た時代は当然FAT16なんだけど
クラスタサイズがセクタサイズに合わせた512byteなのが普通だった
そのため断片化も激しく、当然のようにOSにビジュアルなデフラグツールが付属することになった
(それまでもDOS上のデフラグツールは出ていて売れていた)

一方、同時期のUnix系のOSは、ほとんどが4Kブロックサイズを採用していたため
512byteのDOS系と比較すると断片化が少なかったのは当然かもしれない
これはNTFSの「極小ファイルはMFTに保存」等とは違う、単純な理由での「断片化しにくい」になり
そのイメージが続いているのかもしれない
もしかしたらと思ったけどswapがファイルであったことはさすがに関係ないかな
0158login:Penguin
垢版 |
2021/01/21(木) 08:27:17.48ID:O8ejFMFO
Win95からFAT32だった筈だが…
0159login:Penguin
垢版 |
2021/01/21(木) 08:44:51.40ID:+PmEnWYW
FAT32はOSR2からでしたね
ext2は断片化しても気にするなって感じじゃなかった?
0160login:Penguin
垢版 |
2021/01/21(木) 09:13:42.80ID:4jdzXuHO
む、何か記憶違いがあったな

クラスタサイズが512なのはFDDの時代だけかな
領域サイズに応じてクラスタサイズが肥大化するため
それを避けるために導入されたのがOSR2でのFAT32だっけか
いや領域サイズの上限がファイルサイズの上限と同じ2Gで、そっちの限界回避か

98の5インチFDDの頃からノートンとかでデフラグしていたのは確実
Win3.1時代は忘れた
0161login:Penguin
垢版 |
2021/01/21(木) 09:14:46.06ID:4jdzXuHO
いや、FDDはFAT12か

もういいや
0162login:Penguin
垢版 |
2021/01/21(木) 09:38:57.39ID:Om004d0Z
結論

Windowsのファイルシステム
→断片化を解消しないとパフォーマンスが著しく低下する為デフラグツールが発展した
システムデフォルトで常時断片化を監視しているのが何よりの証拠

Unix/Linuxのファイルシステム
→Windowsほど断片化を気にする必要が無い為デフラグツールも少ない
必須ツールならもっと普及している筈である
0163login:Penguin
垢版 |
2021/01/21(木) 10:37:58.76ID:ieOcyzfJ
結論

信者はキチガイ
0164login:Penguin
垢版 |
2021/01/21(木) 19:43:45.77ID:h4ldsjZW
とりあえずルート以外をbtrfsにした
0165login:Penguin
垢版 |
2021/01/22(金) 02:07:58.45ID:4OwQpeSw
>>142
ええやんこれ
Winで思ってた以上に普通に使えてる
0166login:Penguin
垢版 |
2021/02/02(火) 06:14:30.95ID:C7wARh6S
CentOS7でxfsをブロックサイズ8192で作るとmountできないのですが、そういうもの？
スレチなら誘導していただけると嬉しいです。
0167login:Penguin
垢版 |
2021/02/04(木) 20:25:16.41ID:o/O4MlkW
>>142
win上でext*にアクセスするドライバ入れてるとリムーバブルドライブを解除できなくなったので
そのドライバを削除したことを思い出した
0170login:Penguin
垢版 |
2021/02/17(水) 13:00:57.80ID:Ls2ZfyF7
Btrfs Has Many Nice Improvements, Better Performance With Linux 5.11

General performance improvements with upwards of "tens of percent" for some workloads.

ttps://www.phoronix.com/scan.php?page=news_item&px=Btrfs-Linux-5.11-Improvements
0180運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/03(水) 09:22:57.93ID:Nxx8V343
DD コマンドで作成した領域をループバックでマウントして利用してるんだけど
専用のファイル領域に作成したものより安定性が低いようなことを噂で聞いたことがある
単なるファイルだから間違って消したりもできるわけだけど他にどんな問題があるの？

zfs やバター FS を loopback で使ってるんだけど楽だから
0181運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/03(水) 10:02:39.62ID:cTNqxe23
ファイルシステムとしてマウントするだけなら問題は無いんじゃ無いかな。
ループバック用に回避処理が入っていなければ重ねたレイヤの数だけエラー処理とか複合するんで
普段は良くてもトラブル時は面倒なことが起こるかもしれないけど、気にするほどじゃないと思う。
よほど大きなサイズでも無い限りキャッシュのダブりとかも気にするほど影響は無いだろうし。

ただ一時的では無いスワップ領域にするのはお勧めしない。
0182運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/03(水) 10:49:49.05ID:Nxx8V343
>>181
なるほどエラー解析時にレイアの重なりで複雑になるという意味ですね
キャッシュのダブりは OS 側のファイルキャッシュとファイルシステム側で作動するキャッシュがあるのですね

一時的ではない Swap 領域というのは OS が利用するスワップという意味ですか？
最近のカーネルだとループバックのスワップでも安定性に問題がなくなったと認識してます Ubuntu でもデフォルトではディスクパーティションにスワップ領域を切らなくなりました
0183運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/03(水) 12:14:56.73ID:lgKPKR6M
ハンスが再来年出所する予定らしいけどreiser4が取り込まれることはありますか？
0188運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/05(金) 18:29:03.56ID:8yj3ez/J
Linux 5.12 Lands Fix For File-System Corruption Caused By Swapfile Issue
www.phoronix.com/scan.php?page=news_item&px=Linux-5.12-Corruption-Fixed

スワップファイルへの書き込みがスワップファイルを置いているパーティションへの書き込みになるバグ
0191運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/05(金) 22:57:30.27ID:h4SDn5Ek
>>190
むしろ逆のイメージ。REGZA HDDレコーダーにXFSが採用された実績から大容量(TBクラス)ストレージ向けかと
現状ではXFSとext4でできることに大差はないから、rootにあえてXFSを採用することはないと思う
SSDに良いFSで性能など実績があるのはF2FSのイメージが強い
0192運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/06(土) 09:53:05.28ID:Zg8wx6H4
俺もついさっきrootfsをf2fsでフォーマットし直したところだよ
grubのバージョンがf2fsに対応してなかったから
systemd-boot入れ直す必要があったけど
（/bootを分けるのはUEFIな今の時代なんか嫌）
0195運用情報臨時板でワッチョイ導入議論中
垢版 |
2021/03/09(火) 03:37:55.27ID:sGJz7SaS
カーネルに取り込まれたネイティブexFATはまだ使わないほうが良いぞ

・数GBに1〜2クラスタの頻度で書き込んだデータが破損する
・タイムスタンプのロケールの処理が正しくなく、Windowsとやり取りすると数時間ずれる
・Windowsでマウントするときエラーを検出することがあった
・去年ここで書いた、メタデータを更新するとタイムスタンプが破壊されるバグは直ってる
・性能はFUSE版よりかなり良い

kernel 5.8

今はデフォルトで有効になってるからブラックリストで無効化する必要がある
0198login:Penguin
垢版 |
2021/03/11(木) 13:38:40.74ID:c/de+RjG
>>193
確かに。警告無かったことを知らなかったわ
0199login:Penguin
垢版 |
2021/04/28(水) 06:59:54.63ID:RDsHbwe/
Debian11からいよいよBtrfsに乗り換えてもいいですか？
0200login:Penguin
垢版 |
2021/04/28(水) 14:03:05.37ID:qAuPbk02
まだBtrfsで消耗してるの？
新着レスの表示
レスを投稿する

ニューススポーツなんでも実況