Вариант для распечатки		Пред. тема | След. тема
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Опубликована платформа SEF для программно управляемых Flash-накопителей, opennews (??), 12-Дек-23, (0) [смотреть все] Ничего не понятно, но очень интересно , Аноним (1), 23:41 , 12-Дек-23, (1) +4 // Все прекрасно понятно накопитель сознательно превращается в максимально тупое у, Аноним (3), 00:15 , 13-Дек-23, (3) +9 Идея в том чтобы вытащить всю ту логику что сейчас делает контроллер, вроде выра, Kuromi (ok), 00:18 , 13-Дек-23, (5) +2 // Куча флех и ссдшек помирает из-за скоропостижной кончины контроллера Отсюда вопр, Аноним (-), 00:42 , 13-Дек-23, (12) +1 // Хороший вопрос Либо на хосте либо на самом устройстве либо отдельно выделенная , Kuromi (ok), 02:33 , 13-Дек-23, (18) Да, под метадатой я имел в виду данные о износе, информацию о разделении на вирт, Анонимусс (?), 13:57 , 13-Дек-23, (51) Метаданные внезапно хранятся всё в том же флеше , Tron is Whistling (?), 09:49 , 13-Дек-23, (34) В обычных SSD - да, да и сама прошивка чаще всего - тоже Поэтому слеты таблицы , Kuromi (ok), 15:59 , 14-Дек-23, (86) А тут не будет контроллера, значит помирать контроллер не может, Аноним (56), 14:44 , 13-Дек-23, (56) Контроллер какой-то все равно будет, ты же не пишешь в ячейки напрямую, просто о, Kuromi (ok), 16:03 , 14-Дек-23, (87) Контроллер там живее всех живых, если умирает контроллер - устройство вообще при, Аноним (61), 16:30 , 13-Дек-23, (61) Скрыто модератором, Аноним (-), 16:57 , 13-Дек-23, (63) +1 Скрыто модератором, Аноним (61), 19:22 , 13-Дек-23, (71) Скрыто модератором, Аноним (-), 21:25 , 13-Дек-23, (75) Скрыто модератором, Аноним (61), 23:11 , 13-Дек-23, (80) Скрыто модератором, Аноним (-), 01:08 , 15-Дек-23, (100) Скрыто модератором, Аноним (-), 21:26 , 13-Дек-23, (76) +1 Если в SSD встроен кэш статический динамический как в у Самсунг или есть SLC, Kuromi (ok), 16:20 , 14-Дек-23, (88) редко встречается я ниразу не видел чтобы флеш память накрылась внезапно- тол, Вася (??), 20:04 , 13-Дек-23, (73) Я именно об этом и написал Ну согласен на SSD стараются не допускать, чтобы ф, Аноним (84), 13:44 , 14-Дек-23, (84) Это жеж гораздо более лёгкая нагрузка, чем типичная для системного диска , Аноним (96), 20:09 , 14-Дек-23, (96) Не знаю как современные контроллеры, а раньше контроллер убивался достаточно про, torvn77 (ok), 22:20 , 16-Дек-23, (110) Будто и у hdd он сдохнуть не может Единственный плюс в том что hdd в теории до, torvn77 (ok), 22:11 , 16-Дек-23, (109) Блин хоть бы раз увидеть такое живъем Обычно либо не определяется вообще, либо , Аноним (83), 11:57 , 14-Дек-23, (83) Было было У меня так пара карт памяти безмолвно перешли в режим read-only, прич, Kuromi (ok), 16:23 , 14-Дек-23, (89) Так там же FTL выложен Так можно косплеить хоть блочный девайс, или что там удо, Аноним (-), 11:57 , 13-Дек-23, (43) +1 Учитывая что для возни с банками твердотельника выделен контроллер отдельный мн, Бывалый смузихлёб (?), 12:50 , 13-Дек-23, (49) +1 // Вот ща бы при многоядерниках даже в телефоне проц только и экономить Если даже , Аноним (-), 17:00 , 13-Дек-23, (64) +1 Если на обслуживание 1 накопителя уйдёт 2 ядра, то на 2 накопителя уйдёт уже 4 я, Бывалый смузихлёб (?), 18:27 , 13-Дек-23, (69) –1 Ну так там и проц поди будет минимум ядер на 16 Вон там амд с интелем соревную, Аноним (-), 21:39 , 13-Дек-23, (77) +1 Там запретили асинхронный TRIM т е команды на TRIM идут вместе обычными на чте, Kuromi (ok), 17:00 , 14-Дек-23, (91) Скрыто модератором, Аноним (-), 22:45 , 17-Дек-23, (119) Скрыто модератором, Kuromi (ok), 23:05 , 17-Дек-23, (122) Скрыто модератором, Аноним (-), 00:28 , 18-Дек-23, (124) Скрыто модератором, Kuromi (ok), 00:36 , 18-Дек-23, (125) Скрыто модератором, Аноним (96), 04:12 , 18-Дек-23, (126) А вы уверены что они выкинут вообще все, включая процы контроллера Прошлый раз , Kuromi (ok), 16:28 , 14-Дек-23, (90) Ну хоть одна здравая идея Или вендоры настолько косячат, что силы молчать нет П, Аноним (74), 21:16 , 13-Дек-23, (74) всё понятно где купить , нокия (?), 23:51 , 12-Дек-23, (2) // Обращайтесь в KIOXIA, они выпускаютhttps www prnewswire com news-releases soft, Аноним (3), 00:18 , 13-Дек-23, (4) +1 Ты хотел сказать скачать и собрать Насколько я понал - то ты подключаешь кучу , Аноним (-), 00:26 , 13-Дек-23, (7) // от ворот поворот, т к контроллер там старой закалки, Аноним (35), 09:52 , 13-Дек-23, (35) +1 Нет, нужны специальные накопители с поддержкой этой фичи В существующих накопит, Аноним (3), 16:24 , 13-Дек-23, (60) Жаль А ведь технология подавала надежды Но с таким инструментарием оно способн, Шарп (ok), 00:24 , 13-Дек-23, (6) –13 // Зато каких эпичных Просто представь лицо юзера, когда вся порнуха исчезнет с ег, Аноним (-), 00:29 , 13-Дек-23, (9) +1 // Это когда своим трудом не могут заработать, поэтому учат студентов , nox. (?), 07:07 , 13-Дек-23, (25) –2 // учить студентов - тоже работа А так это же со времён СССР - Не можешь работ, 1 (??), 11:07 , 13-Дек-23, (40) В ядре Линукса код используется практически, а академический так и остаётся в ак, Аноним (52), 14:04 , 13-Дек-23, (52) Ну ты можешь на шарпе написать фирмварь накопителя и системный софт Посмотрим ч, Аноним (-), 11:58 , 13-Дек-23, (44) который отправляет zfs и прочие ненужные усложнённые фс на свалку истории, Аноним (8), 00:27 , 13-Дек-23, (8) –3 // Глядя на то как btrfs запилил поддержку Zoned - на минуточку, это почти ответка , Аноним (-), 12:01 , 13-Дек-23, (45)   // в btrfs cow само по себе прекрасно ложится на флеши - запись всегда в новую обла, Аноним (8), 14:14 , 13-Дек-23, (54)   // В случае btrfs чексуммы дают дополнительные возможности Скажем, копий может быт, Аноним (66), 17:09 , 13-Дек-23, (66)   а смысл держать 4 копии в одном месте - есть распределённые фс, а так у тебя эле, Аноним (8), 18:40 , 13-Дек-23, (70)   Ну например если есть 4 накопителя, можно метаданные для надежности как RAID1C, Аноним (-), 21:57 , 13-Дек-23, (78)   не понимаю в чём сложность что диск стал больше - воткнули новый диск, через cli, Аноним (8), 08:14 , 14-Дек-23, (82)   А данные с старого диска на новый - телепортируются А оба диска на пару как 1 с, Аноним (-), 22:55 , 17-Дек-23, (120)   во первых зачем телепортировать - устройства логические, ты LBA видишь снаружи, , Аноним (8), 23:44 , 18-Дек-23, (130)   Есть минимум 3 причины закопировать или переместить данные на другой накопитель , Аноним (-), 01:14 , 19-Дек-23, (131)   последний абзац новости намекает что всё это есть, мне лень погружаться, Аноним (8), 01:37 , 19-Дек-23, (133)   На голые флеши его класть нельзя, flash translation layer для выравнивания износ, Аноним (96), 22:08 , 14-Дек-23, (99)   дело не в cow а в том что монстрофс с cow хранят снапшоты - для пользователя каж, Аноним (8), 10:21 , 15-Дек-23, (101)   Нет, это дело ещё более опциональное, чем дублирование метаданных, а коровья сущ, Аноним (96), 11:52 , 15-Дек-23, (102)   только в лучшую сторону, например специальная фс для nand ubifs - спроектирована, Аноним (8), 12:48 , 15-Дек-23, (103)   Я с обобщениями ещё вот где напортачил Write amplification на практике могут оп, Аноним (96), 22:10 , 15-Дек-23, (105)   тоже мне бином ньютона - что мешает считать обращения к логическим блокам а не т, Аноним (8), 11:38 , 16-Дек-23, (106)   Не согласен, очень удобно когда ФС знает что и как прочиталось и может сама отко, torvn77 (ok), 22:33 , 16-Дек-23, (111)   можешь взять результат ECC у контроллера да и zfs ошибки не корректирует - тебя , Аноним (8), 11:31 , 17-Дек-23, (114)   Ты о разных версиях zraid забыл Ну и в любом случае, 1 выявление факта порчи , torvn77 (ok), 11:55 , 17-Дек-23, (115)   zfs не корректирует ошибки, она другую копию может дать но для этого надо диск в, Аноним (8), 13:43 , 17-Дек-23, (116)   Может откоректировать через исключающее ИЛИ, torvn77 (ok), 21:50 , 17-Дек-23, (117)   Она может взять избыточную копию если она есть или у раида запросить если он ест, Аноним (8), 12:40 , 18-Дек-23, (127)   Контрольная сумма нужна чтобы понять что блок имеет повреждение, а потом чтобы п, torvn77 (ok), 16:36 , 18-Дек-23, (128)   сколько можно восстановить зависит от алгоритма FEC и количества избыточной инфо, Аноним (8), 17:53 , 18-Дек-23, (129)   А RAID1 какой - очень полезен на тот случай если это не прокатило, или девайс вз, Аноним (-), 01:22 , 19-Дек-23, (132)   про код Хэмминга я имел ввиду не используют в nand - сейчас в ходу tlc qlc с огр, Аноним (8), 02:05 , 19-Дек-23, (134)   которые почему-то не в мэйнлайне , Аноним (10), 00:35 , 13-Дек-23, (10) не понял А jffs2, которая работает поверх голых mtd-устройств В чем новизна-то, Аноним (11), 00:36 , 13-Дек-23, (11) // так и останется для голых mtd устройствочевидно SEF это не голое mtd устройство, Аноним (8), 00:43 , 13-Дек-23, (13) Ты наверное не видел как JFFS2 работает на больших устройствах И сколько времен, Аноним (-), 12:02 , 13-Дек-23, (46) Это не голое mtd, это скорее его эволюционное развитие с учетом опыта SSD Хотят, Kuromi (ok), 17:03 , 14-Дек-23, (92) Локальные хранилища -- прошлый век Нужна нативная интеграция с облаками без вся, Аноним (1), 01:37 , 13-Дек-23, (17) –9 // Нужна, но для этого нужны соответствующие скорости передачи данных и энергонезав, Аноним (19), 04:03 , 13-Дек-23, (19) Вот завтра дядя на экскаваторе тяпнет кабель твоего прова и привет облакам А по, ryoken (ok), 07:53 , 13-Дек-23, (28) // Если кабель провайдера экскаватором тяпнуть, облачное хранилище никуда от этого , Аноним (19), 17:52 , 13-Дек-23, (67) Тут вот какие-то добрые дяди на 2 дня суперстар вырубили А у других соответстве, Аноним (-), 22:11 , 13-Дек-23, (79) Нужна так смонтируй ядиск по WebDAV да пользуйся, Прыгающий Ленивец (?), 09:22 , 13-Дек-23, (33) +1 // тонко в то время как яндекс всеми силами стремится всех пересадить на свойфирме, glad_valakas (?), 13:56 , 13-Дек-23, (50) +2 Это все может работать в гибридном режиме Первично конечно локальное хранилище , Аноним (36), 09:54 , 13-Дек-23, (36) нет, но со временем локальная память будет энергонезависимая RAM без дурацких ат, Аноним (8), 10:15 , 13-Дек-23, (37) Облако - это всего лишь локальное хранилище кого-то другого , Аноним (38), 10:50 , 13-Дек-23, (38) +5 // Самое лучшее определение , Аноним (36), 10:54 , 13-Дек-23, (39) +2 Ну конечно, здорово же если чужой дядя все потер и аккаунт индейца забанил с арг, Аноним (-), 12:05 , 13-Дек-23, (47) +2 Одобряю Всегда заботящийся о вас, тов майор , тов. майор (?), 14:08 , 13-Дек-23, (53) +3 // и видеонаблюдение в туалетах ведется тоже для заботы о вашей безопастности , glad_valakas (?), 19:25 , 13-Дек-23, (72) Да да да, как раз недавно на Ютубчике шитсторм был, на тему того что Гугль Драйв, Kuromi (ok), 17:07 , 14-Дек-23, (93) +1 В век взаимных санкций и торговых войн облака плохая идея , Neon (??), 00:25 , 17-Дек-23, (113) Такое было бы удобно для превращения отстойных SMR hdd дисков в обычные меньшего, Аноним (30), 09:06 , 13-Дек-23, (30) // Ну такое удобно для построения СХД, где главное - это ПО, а не 2 ПО одна железка, 1 (??), 11:10 , 13-Дек-23, (41) ЧСХ в btrfs - zoned mode support завез - только подумайте - WD , Аноним (-), 12:06 , 13-Дек-23, (48) // А это потому что WD увязли в SMR, воти приходится теперь трепыхаться Сигейт по, Kuromi (ok), 17:12 , 14-Дек-23, (94) // Эти слова подразумевают, что WD наращивает или будет наращивать ёмкость за счёт , Аноним (96), 20:50 , 14-Дек-23, (97) Точнее говоря, SMR у WD останется в самых ёмких дисках, а у Seagate в 2024 такие, Аноним (96), 20:57 , 14-Дек-23, (98) Ой, ну спасибо Раньше ОС прочла-записала и дальше свои задачи считает, а теперь, YetAnotherOnanym (ok), 14:35 , 13-Дек-23, (55) // Раньше в телефонах планшетах голую NAND-флешку ставили, ещё на той производитель, Аноним (56), 14:50 , 13-Дек-23, (58) +1 Это решение не для твоего локалхоста, а для программно определяемых систем хране, Аноним (19), 17:55 , 13-Дек-23, (68) +1 // В том виде, в каком это описано - это именно для локалхоста, который не несёт ск, YetAnotherOnanym (ok), 14:29 , 14-Дек-23, (85) Я пологаю что это не только энтерпрайз, но и общий поворот шажок в развитии Flas, Kuromi (ok), 17:15 , 14-Дек-23, (95) Неужели наконец доделают поддержку NAND-памяти в mainline linux для старых allwi, Аноним (56), 14:46 , 13-Дек-23, (57) // Да ее вроде доделали, но 1 У HW randomizer затыкающего чувствительность хлипк, Аноним (-), 23:08 , 17-Дек-23, (123) Как дампануть эту прошивку флешки, SSD , Аноним (59), 15:30 , 13-Дек-23, (59) // Пара самых очевидных способов 1 JTAG 2 BootROM Конечно же простых и очевидн, Аноним (66), 17:09 , 13-Дек-23, (65) Такое решение давно напрашивалось Получается теперь можно убрать с накопителей , Аноним (1), 00:50 , 14-Дек-23, (81) +1 // И полность несовместимо с огромным количеством устройств А ещё производительнос, Айнаниммм (?), 15:10 , 16-Дек-23, (108) Кто знает, в флешках и SD-картах есть встроенная балансировка износа , Аноним (104), 13:57 , 15-Дек-23, (104) // А вот ктулху его знает - от причуд конкретной фирмвари зависит Сорцы оной нам в, Аноним (-), 23:00 , 17-Дек-23, (121) сперва win-модемы, потом win-принтеры, теперь win-диски , Айнаниммм (?), 15:07 , 16-Дек-23, (107) // Ну в случае дисков это хорошо , torvn77 (ok), 22:43 , 16-Дек-23, (112) win-RAID пользуется успехом , benu (ok), 14:51 , 21-Мрт-24, (135) 1,2,6,8,10,11,17,30,55,57,59,81,104,107

Сообщения

[Сортировка по времени | RSS]

	45. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (-), 13-Дек-23, 12:01
	> который отправляет zfs и прочие ненужные усложнённые фс на свалку истории Глядя на то как btrfs запилил поддержку Zoned - на минуточку, это почти ответка к тому интерфейсу уже и есть :)) Если что - Zoned применяется в том числе и флешовыми девайсами как более тонкий уровень в контроллере, где ФС/ОС явно в курсе что у накопителя есть регионы, в которые можно только последовательную запись, а чтобы перезаписать - надо очистить зону. Это так то представление семантики операций Erase/Program флеша через довольно тонкий уровень ремапа, хотя черепице тоже подошло.
	Ответить | Правка | Наверх | Cообщить модератору

	54. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 13-Дек-23, 14:14
	> Это так то представление семантики операций Erase/Program флеша через довольно тонкий уровень ремапа в btrfs cow само по себе прекрасно ложится на флеши - запись всегда в новую область последовательно а вот всякие виртуальные устройства с разным приоритетом и контрольные суммы - нафиг не нужны в фс, SEF всё сделает
	Ответить | Правка | Наверх | Cообщить модератору

	66. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (66), 13-Дек-23, 17:09
	> в btrfs cow само по себе прекрасно ложится на флеши - запись > всегда в новую область последовательно а вот всякие виртуальные устройства с > разным приоритетом и контрольные суммы - нафиг не нужны в фс, > SEF всё сделает В случае btrfs чексуммы дают дополнительные возможности. Скажем, копий может быть и 2 (или даже 3 или 4!) - и при факапе чексуммы можно еще и закопировать блок с другого устройства. Сделав SelfHeal. А как вы чексуммами вон там что-то такое организуете? Вы же не можете на том уровне уповать что девайсов в системе гарантированно 2 или более? Это только вон там ФС знает, можно так было в конкретной системе - или нет. И прочие RAID и ко - в ФС все же лучше делаются: можно динамически отращивать или уменьшать емкость, прям на ходу, добавлением или выниманием девайса. Иногда таки удобно.
	Ответить | Правка | Наверх | Cообщить модератору

	70. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 13-Дек-23, 18:40
	> В случае btrfs чексуммы дают дополнительные возможности. Скажем, копий может быть и 2 (или даже 3 или 4!) - и при факапе чексуммы можно еще и закопировать блок с другого устройства. а смысл держать 4 копии в одном месте - есть распределённые фс, а так у тебя электричество кончится и ни одной не прочитаешь > можно динамически отращивать или уменьшать емкость, прям на ходу, добавлением или выниманием девайса. с SEF скорей всего так тоже можно иначе в чём смыл его "гипермасштабируемости"
	Ответить | Правка | Наверх | Cообщить модератору

	78. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (-), 13-Дек-23, 21:57
	> а смысл держать 4 копии в одном месте - есть распределённые фс, > а так у тебя электричество кончится и ни одной не прочитаешь Ну например если есть >=4 накопителя, можно метаданные для надежности как RAID1C4 а данные что попроще, из соображений что разлет метаданных делает все сильно сложнее. А делать вот именно распределенные структуры - это весьма нишевое и специальное знание. Особенно в не слишком дурном виде. И это все же другой уровень сложности и компетенции. Я в чем-то согласен что вон то несколько нишевой случай, но если его сделали, значит это было кому-то нужно. > с SEF скорей всего так тоже можно иначе в чём смыл его > "гипермасштабируемости" Он что, будет знать что я пристыковал еще энные девайсы хочу вон ту или вот эту ФС туда расширить? Не очень понимаю как такое знание должно транслироваться на ТОТ уровень. Как это в ФС выглядит - это как раз понятно. "device add -> +N места". Менеджмент систем как он должен был быть с самого начала.
	Ответить | Правка | Наверх | Cообщить модератору

	82. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 14-Дек-23, 08:14
	>  Не очень понимаю как такое знание должно транслироваться на ТОТ уровень. Как это в ФС выглядит - это как раз понятно. "device add -> +N места". не понимаю в чём сложность что диск стал больше - воткнули новый диск, через cli-утилиту сказали sef-у вон от того диска приплюсуй вон к тому, тому, тому логическим, resize налету даже ext4 поддерживает
	Ответить | Правка | Наверх | Cообщить модератору

	120. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (-), 17-Дек-23, 22:55
	>>  Не очень понимаю как такое знание должно транслироваться на ТОТ уровень. >> Как это в ФС выглядит - это как раз понятно. "device add -> +N места". > не понимаю в чём сложность что диск стал больше - воткнули новый > диск, через cli-утилиту сказали sef-у вон от того диска приплюсуй вон > к тому, тому, тому логическим, resize налету даже ext4 поддерживает А данные с старого диска на новый - телепортируются? А оба диска на пару как 1 стораж? У вон тех то - "btrfs device add <what>" -> +N места в ФС. Можно и device remove, удвинет используемые данные (а не всю площадь) и можно вынуть девайс. При том - это еще и с RAID работает. Если есть девайсы на 2, 3 и 5 терабайт, это вполне сделает RAID1 cуммарным размером около 5 терабайтов. А вы так смогете? :) ...та штука врядли в курсе таких чудес инженерии и менеджмента. BigPic - не ее уровень.
	Ответить | Правка | Наверх | Cообщить модератору

	130. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 18-Дек-23, 23:44
	> А данные с старого диска на новый - телепортируются? А оба диска на пару как 1 стораж? во первых зачем телепортировать - устройства логические, ты LBA видишь снаружи, полдиска логического с одного массива нанды вторая половина с другого да и p2p dma на pcie есть
	Ответить | Правка | Наверх | Cообщить модератору

	131. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (-), 19-Дек-23, 01:14
	>> А данные с старого диска на новый - телепортируются? А оба диска на пару как 1 стораж? > во первых зачем телепортировать - Есть минимум 3 причины закопировать или переместить данные на другой накопитель: 1) Если старый девайс хочется вынуть из системы, т.е. "замена". 2) Load balancing. 3) Redundancy. > устройства логические, ты LBA видишь снаружи, полдиска логического с одного > массива нанды вторая половина с другого да и p2p dma на pcie есть И - чего? Это никак не адресует load balancing, миграцию данных, избыточность, изъятие накопителя с данными из системы, замену девайса на другой. Вполне обычные хотелки системного менеджмента. А заодно можно и - вот - продвинутости. Не сошелся чексум при чтении? SELF HEAL! Берется блок с другой копии. Пишется в проблемный стораж заново. Если это изредка - ну и отлично, избыточность восстановлена. Если часто - окей, сигнал что глюкастик пора менять. Так что это врядли замена вон тому. Фичесет сильно разный и уровни абстракции не те. Но вот какой zoned mode файлух и cow может на это неплохо пристроиться, видимо.
	Ответить | Правка | Наверх | Cообщить модератору

	133. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 19-Дек-23, 01:37
	> И - чего? Это никак не адресует load balancing, миграцию данных, избыточность, изъятие накопителя с данными из системы, замену девайса на другой. последний абзац новости намекает что всё это есть, мне лень погружаться
	Ответить | Правка | Наверх | Cообщить модератору

	99. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (96), 14-Дек-23, 22:08
	> в btrfs cow само по себе прекрасно ложится на флеши На голые флеши его класть нельзя, flash translation layer для выравнивания износа всё ещё нужен, поэтому толк от последовательной записи (в смысле дружбы с флешами)... только в более лёгкой адаптации под ZNS? Насколько оно вообще хорошо ложится, показывает величина write amplification и у CoW ФС она больше, чем у других (может, из-за обычных для них наворотов типа дублирования метаданных). Для хорошего укладывания надо разделить потоки записи, тут или ZNS поможет, или, теоретически, не-CoW ФС, где у контроллера SSD остаётся подсказка, где данные горячие, а где холодные, чтобы их не смешивать в одном блоке.
	Ответить | Правка | К родителю #54 | Наверх | Cообщить модератору

	101. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 15-Дек-23, 10:21
	> Насколько оно вообще хорошо ложится, показывает величина write amplification и у CoW ФС она больше, чем у других (может, из-за обычных для них наворотов типа дублирования метаданных). дело не в cow а в том что монстрофс с cow хранят снапшоты - для пользователя кажется что диск наполовину занят а для контроллера диск забит под завязку, он в фоне перекидывает занятые блоки на новое место для выравнивания износа, это эквивалентно как если фс не поддерживает TRIM
	Ответить | Правка | Наверх | Cообщить модератору

	102. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (96), 15-Дек-23, 11:52
	> дело не в cow а в том что монстрофс с cow хранят снапшоты Нет, это дело ещё более опциональное, чем дублирование метаданных, а коровья сущность всё-таки на write amplification влияет.
	Ответить | Правка | Наверх | Cообщить модератору

	103. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 15-Дек-23, 12:48
	> а коровья сущность всё-таки на write amplification влияет только в лучшую сторону, например специальная фс для nand ubifs - спроектирована по заказу Nokia, дураки наверно проектировали с cow :)
	Ответить | Правка | Наверх | Cообщить модератору

	105. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (96), 15-Дек-23, 22:10
	Я с обобщениями ещё вот где напортачил. Write amplification на практике могут определять как 1. объём записи непосредственно во флеш-память, поделённый на объём записи с хоста на SSD (чаще). 2. оверхед файловой системы, без погружения ниже логических адресов (реже). И это будут два совсем разных результата (и потенциальный третий, если кто-то объединяет обе величины). > только в лучшую сторону, например специальная фс для nand ubifs - спроектирована > по заказу Nokia, дураки наверно проектировали с cow :) F2FS - более подходящий пример, она в тех же условиях, что и btrfs (не работает с сырым флешем). Про разницу в оверхеде между ними (во втором смысле) пишут так: "In contrast, btrfs has a complex implementation of the copy-on-write technique (mostly due to a push to provide more features such as snapshots and stronger data integrity) that leads to extremely high space and write amplification" [1] Ещё там, оказывается, есть приёмы для разделения горячих и холодных данных, контроллер их как-то понимает. "six major log areas to maximize the effect of hot and cold data separation" [2] [1] https://arxiv.org/pdf/1707.08514.pdf#page=3 [2] https://www.usenix.org/system/files/conference/fast15/fast15...
	Ответить | Правка | Наверх | Cообщить модератору

	106. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 16-Дек-23, 11:38
	> Ещё там, оказывается, есть приёмы для разделения горячих и холодных данных, контроллер их как-то понимает. тоже мне бином ньютона - что мешает считать обращения к логическим блокам а не только к физическим, горячие логические блоки размещают в SLC как вариант - у них ресурс на порядки больше
	Ответить | Правка | Наверх | Cообщить модератору

	111. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от torvn77 (ok), 16-Дек-23, 22:33
	> и контрольные суммы - нафиг не нужны в фс, > SEF всё сделает Не согласен, очень удобно когда ФС знает что и как прочиталось и может сама откорректировать ошибку.
	Ответить | Правка | К родителю #54 | Наверх | Cообщить модератору

	114. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 17-Дек-23, 11:31
	> очень удобно когда ФС знает что и как прочиталось и может сама откорректировать ошибку можешь взять результат ECC у контроллера да и zfs ошибки не корректирует - тебя кто-то обманул
	Ответить | Правка | Наверх | Cообщить модератору

	115. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от torvn77 (ok), 17-Дек-23, 11:55
	>> очень удобно когда ФС знает что и как прочиталось и может сама откорректировать ошибку > можешь взять результат ECC у контроллера да и zfs ошибки не корректирует > - тебя кто-то обманул Ты о разных версиях zraid забыл.   Ну и в любом случае, 1. выявление факта порчи хорошо само по себе.   2. подсчёт хешсуммы надёжнее проверки чётности
	Ответить | Правка | Наверх | Cообщить модератору

	116. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 17-Дек-23, 13:43
	zfs не корректирует ошибки, она другую копию может дать но для этого надо диск в два раза больше и похорошему надо на разных дисках хранить и на разных компьютерах
	Ответить | Правка | Наверх | Cообщить модератору

	117. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от torvn77 (ok), 17-Дек-23, 21:50
	> zfs не корректирует ошибки, она другую копию может дать но для этого > надо диск в два раза больше и похорошему надо на разных > дисках хранить и на разных компьютерах Может откоректировать через исключающее ИЛИ
	Ответить | Правка | Наверх | Cообщить модератору

	127. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 18-Дек-23, 12:40
	Она может взять избыточную копию если она есть или у раида запросить если он есть пересобрать копию c учётом чойтности, контольная сумма для определения ошибки а не для корреции.
	Ответить | Правка | Наверх | Cообщить модератору

	128. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от torvn77 (ok), 18-Дек-23, 16:36
	> Она может взять избыточную копию если она есть или у раида запросить > если он есть пересобрать копию c учётом чойтности, контольная сумма для > определения ошибки а не для корреции. Контрольная сумма нужна чтобы понять что блок имеет повреждение, а потом чтобы понять что он восстановился правильно, а не так чтоб чётность восстановилась.   (в отличии от хешсум проверка чётности вообще может пропустить ошибку если повредились два бита)
	Ответить | Правка | Наверх | Cообщить модератору

	129. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 18-Дек-23, 17:53
	> в отличии от хешсум проверка чётности вообще может пропустить ошибку если повредились два бита сколько можно восстановить зависит от алгоритма FEC и количества избыточной информации, сомневаюсь что кто-то код Хэминга сейчас использует - RS, BCH, LDPC и др. В nand есть отдельные области для хранения избыточной информации, какие алгоритмы используются зависит от производителя контроллеров, в sef есть и раиды свои и копии избыточные не только zfs умеет хранить да и контрольные суммы тоже.
	Ответить | Правка | Наверх | Cообщить модератору

	132. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (-), 19-Дек-23, 01:22
	> сколько можно восстановить зависит от алгоритма FEC и количества избыточной информации, > сомневаюсь что кто-то код Хэминга сейчас использует - RS, BCH, LDPC и др. А RAID1 какой - очень полезен на тот случай если это не прокатило, или девайс взял да и сдох совсем. В случае чексумм возможен продвинутый уровень - понять какая из копий при этом еще и правильная, и из нее починить вторую. Во всяком случае на btrfs оно вот так работает - и для флешатины почему-то сейчас очень модно выгружать наружу битые блоки не репортя IO error. И толку вам с их BCH или чего там - если оно вот так в результате? > В nand есть отдельные области для хранения избыточной информации, > какие алгоритмы используются зависит от производителя контроллеров, в sef есть и > раиды свои и копии избыточные не только zfs умеет хранить да > и контрольные суммы тоже. Врядли SEF сможет в управление девайсами того уровня... и да, снапшоты и проч - тоже полезные фичи, особенно на системном диске. Можно при факапе вместо реинстала системы полдня откатить все как было за 2 минуты и попробовать еще раз. Почти как на виртуалке - только на bare metal. Вон то не адресует этот аспект. А лепить это из этажерок типа LVM - оно получается хреновое, сложное, горбато работает и - менеджмент ужасен.
	Ответить | Правка | Наверх | Cообщить модератору

	134. "Опубликована платформа SEF для программно управляемых Flash-..."	+/–
	Сообщение от Аноним (8), 19-Дек-23, 02:05
	> А RAID1 какой - очень полезен на тот случай если это не прокатило, или девайс взял да и сдох совсем. про код Хэмминга я имел ввиду не используют в nand - сейчас в ходу tlc qlc с огромным количество ошибок, в slc он может ещё был актуален >  Можно при факапе вместо реинстала системы полдня откатить все как было за 2 минуты и попробовать еще раз. что за мифические факапы - диск помрёт и никакие снапшоты не помогут. Я своё рабочее окружение могу в любой точке мира создать с нуля, главное чтобы инет был.
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема