Проблема записи больших файлов на USB флеш накопитель.

unixnik · Сообщение **unixnik** » 15 сен 2015, 23:54

Решил я тут скинуть фильм на USB флешку, размер файла 1,5GiB, при копировании обычными графическими средствами (перетаскиванием файла из окна в окно) запись проходит довольно шустро и по достижении ~600-700MiB скорость начинает быстро падать и падает в ноль, дальше ничего не происходит. При копировании через терминал по средствам простой команды "cp /исходный_файл /флешка" копирование так же шустро доходит до ~600-700MiB и дальше копирование продолжается, но очень и очень медленно, на копирование ушло минут ~25. Флешка отформатирована в fat32 и имеет объём 16Gb.

Может кто сталкивался? Как решить данную проблему?

Галахов Роман

unixnik писал(а):Решил я тут скинуть фильм на USB флешку, размер файла 1,5GiB, при копировании обычными графическими средствами (перетаскиванием файла из окна в окно) запись проходит довольно шустро и по достижении ~600-700MiB скорость начинает быстро падать и падает в ноль, дальше ничего не происходит. При копировании через терминал по средствам простой команды "cp /исходный_файл /флешка" копирование так же шустро доходит до ~600-700MiB и дальше копирование продолжается, но очень и очень медленно, на копирование ушло минут ~25. Флешка отформатирована в fat32 и имеет объём 16Gb.

Может кто сталкивался? Как решить данную проблему?

На флешке, что еще есть?. Скорее всего это ограничение Fat32 (если файл больше размера кластера, хоть на байт, он займет уже 2 кластера (или следующий, если файл занимает несколько, кластер - и 2-й файл туда уже не запишешь) -вроде видишь, что осталось много места - а в реальности ровно столько - сколько осталось не занятых кластеров. На Fat такая "потеря" места вечная беда.

*d0s · Сообщение *d0s » 16 сен 2015, 09:04

Лучше отформатировать в ntfs. Не получится скопировать/переместить файлы ≥4Gb.
http://wiki.rosalab.ru/ru/index.php/%D0 ... 0%B2_Linux

Сообщение **keleg** » 16 сен 2015, 09:45

помнится, у Fat32 ограничение в 4 гига, не в гиг. А форматировать флэшку лучше в exFAT - правда, это только из командной строки доступно, mkfs.exfat имяустройства. ntfs журналируемая, она быстрее ест ресурс флэшки.

*d0s · Сообщение *d0s » 16 сен 2015, 10:27

keleg писал(а):помнится, у Fat32 ограничение в 4 гига, не в гиг.

Ладно, GB.

keleg писал(а):А форматировать флэшку лучше в exFAT - правда, это только из командной строки доступно, mkfs.exfat имяустройства. ntfs журналируемая, она быстрее ест ресурс флэшки.

А разве все устройства могут работать с накопителями, отформатированные exFAT?

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 10:32

*d0s писал(а): А разве все устройства могут работать с накопителями, отформатированные exFAT?

exFAT (от англ. Extended FAT — «расширенная FAT»), иногда называется FAT64 — проприетарная файловая система, предназначенная главным образом для флэш-накопителей.
Поддержка exFAT имеется в Windows XP с Service Pack 2 и 3 с обновлением KB955704, Windows Vista с Service Pack 1, Windows Server 2008, Windows 7, Windows 8, в Mac OS X начиная с версии 10.6.5, а также Linux.

*d0s · Сообщение *d0s » 16 сен 2015, 10:48

Barmalei писал(а):
*d0s писал(а): А разве все устройства могут работать с накопителями, отформатированные exFAT?
exFAT (от англ. Extended FAT — «расширенная FAT»), иногда называется FAT64 — проприетарная файловая система, предназначенная главным образом для флэш-накопителей.
Поддержка exFAT имеется в Windows XP с Service Pack 2 и 3 с обновлением KB955704, Windows Vista с Service Pack 1, Windows Server 2008, Windows 7, Windows 8, в Mac OS X начиная с версии 10.6.5, а также Linux.

Не все устройства могут распознать файловую систему exFAT, т.е. подключив флешку пишут типа "неизвестная ФС". Помимо компов есть и другие устройства с usb-портами.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 10:51

*d0s писал(а): Не все устройства могут распознать файловую систему exFAT, т.е. подключив флешку пишут типа "неизвестная ФС"

Не от устройства зависит, а от написанной проги поддержки этой ФС. Мелкие устройства такие например как роутеры, медиаплееры могут и не поддерживать, надо читать их характеристики.
Форматнул свою флешку в exFAT, вставил в свой телек Samsung, увидел. Там линукс вроде стоит.

*d0s · Сообщение *d0s » 16 сен 2015, 10:59

Barmalei писал(а):
*d0s писал(а): Не все устройства могут распознать файловую систему exFAT, т.е. подключив флешку пишут типа "неизвестная ФС"
Не от устройства зависит, а от написанной проги поддержки этой ФС. Мелкие устройства такие например как роутеры, медиаплееры могут и не поддерживать, надо читать их характеристики.

Мда, похоже что, вавилонская башня не миф.

unixnik · Сообщение **unixnik** » 16 сен 2015, 12:31

Галахов Роман писал(а):
unixnik писал(а):Решил я тут скинуть фильм на USB флешку, размер файла 1,5GiB, при копировании обычными графическими средствами (перетаскиванием файла из окна в окно) запись проходит довольно шустро и по достижении ~600-700MiB скорость начинает быстро падать и падает в ноль, дальше ничего не происходит. При копировании через терминал по средствам простой команды "cp /исходный_файл /флешка" копирование так же шустро доходит до ~600-700MiB и дальше копирование продолжается, но очень и очень медленно, на копирование ушло минут ~25. Флешка отформатирована в fat32 и имеет объём 16Gb.

Может кто сталкивался? Как решить данную проблему?
На флешке, что еще есть?. Скорее всего это ограничение Fat32 (если файл больше размера кластера, хоть на байт, он займет уже 2 кластера (или следующий, если файл занимает несколько, кластер - и 2-й файл туда уже не запишешь) -вроде видишь, что осталось много места - а в реальности ровно столько - сколько осталось не занятых кластеров. На Fat такая "потеря" места вечная беда.

Нет флешка новая и пустая.

unixnik · Сообщение **unixnik** » 16 сен 2015, 12:36

Barmalei писал(а):
*d0s писал(а): А разве все устройства могут работать с накопителями, отформатированные exFAT?
exFAT (от англ. Extended FAT — «расширенная FAT»), иногда называется FAT64 — проприетарная файловая система, предназначенная главным образом для флэш-накопителей.
Поддержка exFAT имеется в Windows XP с Service Pack 2 и 3 с обновлением KB955704, Windows Vista с Service Pack 1, Windows Server 2008, Windows 7, Windows 8, в Mac OS X начиная с версии 10.6.5, а также Linux.

Попробую в exFAT. Мне фильмы на флешку скидывать что бы на домашнем кинотеатре смотреть, вот не знаю, увидит или нет.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 12:49

unixnik писал(а): Попробую в exFAT. Мне фильмы на флешку скидывать что бы на домашнем кинотеатре смотреть, вот не знаю, увидит или нет.

В характеристиках обычно пишут поддержку форматов, ну или попробовать можно.

Алзим · Сообщение **Алзим** » 16 сен 2015, 13:10

unixnik писал(а):Решил я тут скинуть фильм на USB флешку, размер файла 1,5GiB, при копировании обычными графическими средствами (перетаскиванием файла из окна в окно) запись проходит довольно шустро и по достижении ~600-700MiB скорость начинает быстро падать и падает в ноль, дальше ничего не происходит. При копировании через терминал по средствам простой команды "cp /исходный_файл /флешка" копирование так же шустро доходит до ~600-700MiB и дальше копирование продолжается, но очень и очень медленно, на копирование ушло минут ~25. Флешка отформатирована в fat32 и имеет объём 16Gb.

Может кто сталкивался? Как решить данную проблему?

Утверждать не буду. Это всего-лишь моё предположение.
Я думаю, тут проблема в подсчёте скорости и объёма скачивания. Я думаю, что утилиты каким-то своим образом считаю не просто скорость загрузки на флешку и не размер загрузки на флешку, а скорость и размер отдачи с жёсткого диска.
Например, с одной скоростью жёсткий отдал 600 метров , они записались в кеш (или память, или не знаю куда) и диск остановился, т.к. на флешку эти данные ещё не перешли. Сама флешка пишет со своей скоростью и этой скорости утилиты не показывают.
А скорость записи на флешку может зависеть от разных причин.

БольшойКомпьютер

Я думаю, тут проблема в подсчёте скорости и объёма скачивания. Я думаю, что утилиты каким-то своим образом считаю не просто скорость загрузки на флешку и не размер загрузки на флешку, а скорость и размер отдачи с жёсткого диска.
Например, с одной скоростью жёсткий отдал 600 метров , они записались в кеш (или память, или не знаю куда) и диск остановился, т.к. на флешку эти данные ещё не перешли. Сама флешка пишет со своей скоростью и этой скорости утилиты не показывают.
А скорость записи на флешку может зависеть от разных причин.

Не факт, что флэшка попросту не бракованная, ибо 1,5 гига должна съедать в любом случае.
Ну, и очевидно: Fat32 не нужна и подлежит уничтожению сразу после покупки носителя.

unixnik · Сообщение **unixnik** » 16 сен 2015, 18:14

Отформатировал флешку в exfat, запись идет стабильно и довольно быстро, но почитав характеристики кинотеатра узнал что поддерживается только FAT. Попробовал вставить в кинотеатр, идет чтение и на этом всё.

*d0s · Сообщение *d0s » 16 сен 2015, 18:39

unixnik писал(а):Отформатировал флешку в exfat, запись идет стабильно и довольно быстро, но почитав характеристики кинотеатра узнал что поддерживается только FAT. Попробовал вставить в кинотеатр, идет чтение и на этом всё.

Что за кинотеатр?

БольшойКомпьютер

Странный, однако, кинотеатр... Фильмы, весящие более 4 гигабайт, с флэшки, значит, не поймёт.

unixnik · Сообщение **unixnik** » 16 сен 2015, 18:49

*d0s писал(а):
unixnik писал(а):Отформатировал флешку в exfat, запись идет стабильно и довольно быстро, но почитав характеристики кинотеатра узнал что поддерживается только FAT. Попробовал вставить в кинотеатр, идет чтение и на этом всё.
Что за кинотеатр?

Samsung HT-TZ315.

unixnik · Сообщение **unixnik** » 16 сен 2015, 18:51

БольшойКомпьютер писал(а):Странный, однако, кинотеатр... Фильмы, весящие более 4 гигабайт, с флэшки, значит, не поймёт.

Максимум FullHD с двухслойных DVD. Покупался очень давно.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 19:00

unixnik писал(а):
БольшойКомпьютер писал(а):Странный, однако, кинотеатр... Фильмы, весящие более 4 гигабайт, с флэшки, значит, не поймёт.
Максимум FullHD с двухслойных DVD. Покупался очень давно.

Не поддерживаются устройства, в которых используется файловая система NTFS. (Система поддерживает только файловую систему FAT и в режиме USB не воспроизводит фильм, размер файла которого превышает 1 ГБ.)

*d0s · Сообщение *d0s » 16 сен 2015, 19:11

unixnik писал(а):
БольшойКомпьютер писал(а):Странный, однако, кинотеатр... Фильмы, весящие более 4 гигабайт, с флэшки, значит, не поймёт.
Максимум FullHD с двухслойных DVD. Покупался очень давно.

Интересно девки пляшут! Значит DVD-DL весом 8 гигабайт понимает, а с флешки на FAT только файлы не более 4?

Алзим · Сообщение **Алзим** » 16 сен 2015, 19:20

ExFAT был создан в конце 2007. И только в конце 2009 МикроСофт начал разрешать его использование другим производителям.
https://ru.wikipedia.org/wiki/ExFAT
Если кинотеатр не новый, то не удивительно, что он поддерживает только FAT.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 19:25

*d0s писал(а): Интересно девки пляшут! Значит DVD-DL весом 8 гигабайт понимает, а с флешки на FAT только файлы не более 4?

DivX формат с диска. Да и на диске как таковой файловой системы нет, там свое UDF.

БольшойКомпьютер

Раритет, однако. Скоро и фильмов-то такого веса не останется. Не знаю точно, но... Возможно, дешевле, чем покупать новый кинотеатр, присмотреться к внешним медиаплеерам, и уж через такой всё подключать?

unixnik · Сообщение **unixnik** » 16 сен 2015, 19:47

Barmalei писал(а): Не поддерживаются устройства, в которых используется файловая система NTFS. (Система поддерживает только файловую систему FAT и в режиме USB не воспроизводит фильм, размер файла которого превышает 1 ГБ.)

Фильм размером с 1.5GiB на FAT32 воспроизводил. Просто проблема в том что копирование происходит очень долго.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 20:03

unixnik писал(а):
Barmalei писал(а): Не поддерживаются устройства, в которых используется файловая система NTFS. (Система поддерживает только файловую систему FAT и в режиме USB не воспроизводит фильм, размер файла которого превышает 1 ГБ.)
Фильм размером с 1.5GiB на FAT32 воспроизводил. Просто проблема в том что копирование происходит очень долго.

А что поделать. Я на вынь такие файлы на FAT тоже не быстро копировал. минут по 15-20.

*d0s · Сообщение *d0s » 16 сен 2015, 20:15

Понимаю, что неудобно, но может через mc будет быстрее?

*d0s · Сообщение *d0s » 16 сен 2015, 20:18

Barmalei писал(а): DivX формат с диска. Да и на диске как таковой файловой системы нет, там свое UDF.

Я не об этом. Можно было ещё NTFS, а производители сие чудо ограничились только FAT.

Алзим · Сообщение **Алзим** » 16 сен 2015, 20:19

*d0s писал(а):Понимаю, что неудобно, но может через mc будет быстрее?

Если разобраться, то примерно так же, как и через Дольфин, а может и проще

(я про неудобства)

*d0s · Сообщение *d0s » 16 сен 2015, 20:34

Алзим писал(а):Если разобраться, то примерно так же, как и через Дольфин, а может и проще
(я про неудобства)

Вот у меня быстрее копируется/перемещается. Но опять же, тут зависит от многих факторов.
Заезженная тема http://forum.altlinux.org/index.php?PHP ... ic=11048.0

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 20:38

*d0s писал(а):
Алзим писал(а):Если разобраться, то примерно так же, как и через Дольфин, а может и проще
(я про неудобства)
Вот у меня быстрее копируется/перемещается. Но опять же, тут зависит от многих факторов.
Заезженная тема http://forum.altlinux.org/index.php?PHP ... ic=11048.0

Факторов много. Я тут недавно с Вынь мучался, не могла обновы установить. оказалось банально просто, скорость чтения-записи HDD на столько мала стала что глючит это дело. Скорость была в районе 3 метров.

Алзим · Сообщение **Алзим** » 16 сен 2015, 20:46

Barmalei писал(а): Факторов много. Я тут недавно с Вынь мучался, не могла обновы установить. оказалось банально просто, скорость чтения-записи HDD на столько мала стала что глючит это дело. Скорость была в районе 3 метров.

Дефрагментация нужна?

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 20:50

Алзим писал(а):
Barmalei писал(а): Факторов много. Я тут недавно с Вынь мучался, не могла обновы установить. оказалось банально просто, скорость чтения-записи HDD на столько мала стала что глючит это дело. Скорость была в районе 3 метров.
Дефрагментация нужна?

Нет. Сам диск тю-тю.

Алзим · Сообщение **Алзим** » 16 сен 2015, 20:52

Barmalei писал(а): Нет. Сам диск тю-тю.

А я бы сначала попытался дефрагментировать.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 21:08

Алзим писал(а):
Barmalei писал(а): Нет. Сам диск тю-тю.
А я бы сначала попытался дефрагментировать.

Че его дефрагментировать если скорость почти половину 500 mc.

Алзим · Сообщение **Алзим** » 16 сен 2015, 21:16

Barmalei писал(а): Че его дефрагментировать если скорость почти половину 500 mc.

Сначала стандартной утилитой вычистить всё, в том числе и обновления, которые давно установлены. Потом, этой прогой дефрагментировать. С Виндой такие штуки часто помогают.

Алзим · Сообщение **Алзим** » 16 сен 2015, 21:19

Линукс почти не фрагментируется. А Винда постоянно — диск крутиться, но почти на холостых оборотах и поэтому скорость у диска и производительность системы падает.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 21:24

Алзим писал(а):
Barmalei писал(а): Че его дефрагментировать если скорость почти половину 500 mc.
Сначала стандартной утилитой вычистить всё, в том числе и обновления, которые давно установлены. Потом, этой прогой дефрагментировать. С Виндой такие штуки часто помогают.

Причем тут дефрагментация если диск был голый.

Алзим · Сообщение **Алзим** » 16 сен 2015, 21:34

Barmalei писал(а): Причем тут дефрагментация если диск был голый.

Почитай про ВиртуалБокс в сети. Почему, гостевая система может показывать, что размер её занятого дискового пространства всего гигов 15, а когда смотришь реально сколько занимает в хостовой системе файл с гостевой, то там может оказаться, что и все 50 гигов.
После удаления файлов и т.п. не всё удаляется. Там ещё куча всякого мусора остаётся ненужного. А ВиртуалБокс не умеет различать, где мусор, а где полезные файлы и потому показывает что место занято, хотя гостевая система говорит, что там пусто.
Я к тому, что «голый диск» — это понятие относительное.
К тому же, он может часть диска записано, часть пустое, а ещё часть опять записано — и всё это влияет на скорость диска.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 21:38

Алзим писал(а):
Barmalei писал(а): Причем тут дефрагментация если диск был голый.
Почитай про ВиртуалБокс в сети. Почему, гостевая система может показывать, что размер её занятого дискового пространства всего гигов 15, а когда смотришь реально сколько занимает в хостовой системе файл с гостевой, то там может оказаться, что и все 50 гигов.
После удаления файлов и т.п. не всё удаляется. Там ещё куча всякого мусора остаётся ненужного. А ВиртуалБокс не умеет различать, где мусор, а где полезные файлы и потому показывает что место занято, хотя гостевая система говорит, что там пусто.
Я к тому, что «голый диск» — это понятие относительное.
К тому же, он может часть диска записано, часть пустое, а ещё часть опять записано — и всё это влияет на скорость диска.

Хватит вас уже не туда понесло. Причем виртуал бокс, удаление файлов не понимаю.
Вы знаете такое понятие удалить разделы диска, создать новые и форматнуть? Там что-то останется? Ну дп всякими прогами можно куски файлов вытащить но не более.

Алзим · Сообщение **Алзим** » 16 сен 2015, 21:44

Barmalei писал(а): Вы знаете такое понятие удалить разделы диска, создать новые и форматнуть? Там что-то останется?

Много чего останется

Но, я не про это.
Линуксовскими программами всё сожмите, переместите, чтобы чисто было. Возможно, это будет долго происходить.
Но, почти в любом случае, скорость скорее всего увеличиться. Проверено мною и неоднократно. За Виндою ещё и ухаживать надо, иначе она всё испоганит и поломает.
Впрочем, это ваше дело. Я просто посоветовал. Я бы выбрал сначала постараться восстановить диск, а потом решил бы, что ему хана. У меня диски под Виндой более 10 лет работали. И сейчас рабочие, просто переходники нужны, чтобы к новой системе их подключить.

Barmalei · Сообщение **Barmalei** » 16 сен 2015, 21:53

Проверка посекторная приказала не долго жить тоже. SMART выдал перегрев. Что там еще думать. Выкинуть.
У меня тоже диски живут по 10 лет. Потом переезжают под бэкап.

unixnik · Сообщение **unixnik** » 17 сен 2015, 01:18

Ну в общем ничего не приходиться делать кроме как писать файлы через "cp". Большие файлы не часто нужно копировать, а помельче копируются нормально, оставил богомерзкий fat32. Если бы не кинотеатр, то вообще в ext2 форматнул бы.