Skip to main content

File Systems and thumb drives: Choosing between FAT16, FAT32 and NTFS to get a faster USB Flash Drive

        I use USB flash drives (also know as thumb drives and UFDs) often and was wondering how to squeeze the most performance out of them. I noticed most came formatted FAT16 (just called FAT when you use format from Windows XP's GUI) and was wondering what kind of performance boost I might get from formatting the flash media as FAT32 or NTFS.
This article will list my data an conclusions about the experiment. I'd like to hear other's experiences and add them to this page, so please email me if you perform your own tests. Before you can repeat my tests you will have to be able to format you thumb drive as NTFS, and option that is not enabled by default in Windows XP. There are two ways you can format a flash drive as NTFS in XP, the first is to pull up the UFD's device properties and set it to be optimized for best performance, then you can just right click on the drive in Explorer, choose format, and NTFS will be an option.

 The other way is to use HP's handy thumb drive formatting utility. Just Google up SP27213.exe or use my mirror. Once you can format your flash drive as NTFS you can repeat my experiments.
        The tool I used for benchmarking the write speed of my UDFs was Node Soft's Disk Bench, available from:
http://nodesoft.com/DiskBench/Default.aspx
With it I tested the speed of writing a 10MB file to three examples of NAND-type flash memory, a 512MB of unknown make, an Apacer 1GB UFD and a 1GB SD card. I performed the tests three times for each file system. Here are my results:
Test 1
MediaFat 16
1st
Fat 16
2nd
Fat 16
3rd
Fat 32
1st
Fat 32
2nd
Fat 32
3rd
NTFS
1st
NTFS
2nd
NTFS
3rd
512MB UFD1.641 MB/s 1.628 MB/s1.620 MB/s0.174 MB/s0.177 MB/s0.176 MB/s322.581 MB/s322.581 MB/s322.581 MB/s
1GB UFD 0.300 MB/s 0.300 MB/s 0.301 MB/s 0.217 MB/s0.214 MB/s0.215 MB/s322.581 MB/s322.581 MB/s322.581 MB/s
1GB SD0.321 MB/s0.307 MB/s0.319 MB/s0.069 MB/s0.069 MB/s0.069 MB/s128.205 MB/s128.205 MB/s128.205 MB/s
My first conclusion is that NTFS was so much faster that something must be wrong with the experiment. I imagine it has to do with Windows using a delayed write and RAM cache when the drive it's about to write to is formatted NTFS, and an immediate write directly to the device when it's formatted FAT or FAT32.  To test further, I tried copying a large Quick Time file to the 512MB UFD (iron_man-tlr1_h1080p.mov, 196 MB) and timed it:
Test 2
MediaFat 16
1st
Fat 16
2nd
Fat 16
3rd
Fat 32
1st
Fat 32
2nd
Fat 32
3rd
NTFS
1st
NTFS
2nd
NTFS
3rd
512MB UFD15.658 MB/s 15.716 MB/s15.735 MB/s15.638 MB/s15.735 MB/s15.658 MB/s16.284 MB/s15.996 MB/s15.716 MB/s
Conclusion of tests 1 and 2: As you can see, all of the results are much more comparable when I copied over one large file. However, I remembered that I had performed some previous tests and had posted them to BinFev:
http://www.binrev.com/forums/index.php?showtopic=27622
        The previous tests had tested both the read and write capabilities of the thumb drives. I used a tool from http://oette.info/ for benchmarking different files systems on a 512MB thumb drive. I set it to write five 1 MB files and did two trials. Here are the results:

Test 3
Fat16 default allocation unit size
Result:
Write time: 3.3108 Sec.
0.302041802585478 MB/s

Read time: 0.0862 Sec.
11.6009280742459 MB/s

Result:
Write time: 3.3208 Sec.
0.301132257287401 MB/s

Read time: 0.0762 Sec.
13.1233595800525 MB/s
Fat32 default allocation unit size
Result:
Write time: 23.81 Sec.
4.19991600167997E-02 MB/s

Read time: 0.08 Sec.
12.5 MB/s

Result:
Write time: 23.7444 Sec.
4.21151934771988E-02 MB/s

Read time: 0.1202 Sec.
8.31946755407654 MB/s
NTFS default allocation unit size
Result:
Write time: 0.8712 Sec.
1.14784205693297 MB/s

Read time: 0.0682 Sec.
14.6627565982405 MB/s

Result:
Write time: 0.9174 Sec.
1.09003706126008 MB/s

Read time: 0.0882 Sec.
11.3378684807256 MB/s
Conclusion of test: To cut to the chase, NTFS seems to be the fastest to write, FAT16  next and FAT32 was dog ass slow. FAT16 had the fastest read time, followed by NTFS and then FAT32.

I did some more test, this time with my 1GB Apacer UFD. I wanted a more realistic test of real life use, so  I copied Torpark 1.5.0.7 (27 MB in 275 files, 83 directories) to the UFD.  The times to copy were as follows:
Test 4
FAT16
0:55
FAT32
1:05
NTFS
1:35 1st try
1:23 2nd try
These new, slower results for NTFS gave me pause, that's why I ran it twice. I also test NTFS under the following conditions:
Test 5
No Anti-Virus live protection
1:11
Anti-Virus live on, using XCOPY
1:38
NTFS Compression on
1:17
Seems like turning compression on (less total data to write to the disk) seems to help. Over all, seems like FAT16 is the best choice for faster thumb drive file systems.

Conclusions of whole article:

1. I thought that my Symantec AV might be slowing thing down, but after removal it made little difference to the thumb drive's access speed. If you are copying over a lot of little executables it may still be a good idea to turn off your AV.
2. Reads and writes are much faster under Linux than under Vista/XP, no idea why exactly. Write me if you know.
3. It's faster in Vista to mount a Trucrypt volume off the thumb drive, then run your apps off of it then it is to run the app straight off of the thumb drive. I found this out when I was testing TorPark.
4. Changing the device options in control panel from the default "Optimize for removal" to "Optimize for performance" seemed to make little difference.
5. NTFS may sometimes give you speed increases, and some useful file system options, but you have to be aware of the following potential problems:
        a. You better use the "Safely Remove Hardware" option when you unplug your UFD to keep from corrupting your file system.
        b. If you use your flash drive in an MP3 player or a non-windows computer it most likely will not work.
        c. Because of how NTFS works, more writes are done to your drive with NTFS than FAT so you may decrease your UFDs life span.
        d. You may get weird permissions problems when you switch to a Windows box in another Domain.
6. Copying one big file to a flash drive is much faster that copying many smaller ones. In other words, you can write one 100MB file to a UFD faster than you can one-hundred 1MB files.

Recommendation: Format you thumb drive FAT16 and have a nice day. If you perform your own tests I'd love to see and add them to this page.

Comments

Popular posts from this blog

Как найти реального заливщика

Своего первого реального заливщика, который показал мне как можно скачать деньги в интернет с банковских счетов, я нашел случайно, когда еще трудился в Укртелекоме сменным инженером немного подрабатывая продавая трафик налево, но потом этот человек отошел от дел в связи со слишком уж скользкой ситуацией в данной сфере, и я решил поискать партнера на форумах, разместив рекламу на трёх электронных досках объявлений. Честно говоря поначалу даже был готов сразу закинуть 500 000 гривен в Гарант, но потом призадумался, а стоит ли?


Ко мне начал обращаться народ обращается разных категорий

1. Дебильная школота, которая что-то любит повтирать про свою серьезность и просит закинуть 10 000 USD им на Вебмани в качестве аванса 
2. Реальные мэны, которые льют сразу большую сумму по SWIFT без разговоров про гарантии и прочую шнягу, но после того, как им отдаёшь нал, они сразу пропадают, суть данных действий я так и не понял. зачем пропадать, если всё прошло гладко? 3. Мутные личности, берущие реквизиты …

Как стать реальным заливщиком

Некоторые опытные дроповоды, кому уже надоело следить за тем как дропы постоянно прокалываются или их принимают, хотят выйти из темы и думают о том, как бы самим начать лить, и причём по-крупному.

И тут сразу возникает вопрос о покупке банковского трояна. В этом месте позвольте задать извечный китайский вопрос: а нахуа его покупать? Банковские трояны ZeUS и CarberP давно уже выложены на торрентах грамотными людьми и их можно просто так скачать. На самом деле по функционалу у них небольшая разница и CarberP отличается от ZeUS наличием загрузчика, который способен отключить антивирус, установленной на банковской машине, перед загрузкой основного тела программы банковского трояна.

Однако это ещё только начало... чтобы что-либо слить с помощью этих инструментов их нужно установить на какой-нибудь абузный хостинг, написать инжекты под выбранный вами банк и только после этого можно приступать к основной части работы. 

В Мариуполе и Ивано-Франковске я разговаривал со многими ботоводами, и …

Black Hat SEO или бот для скликивания контекстной рекламы

На днях мне стало интересно, а каким образом с точки зрения «черных» методов SEO могут быть использованы хакерские программы – например, путем генерации трафика для заинтересованных ресурсов или скликивания контекстной рекламы AdWords или Яндекс.Директ
Понятно, что увеличение числа посетителей на сайте интернет-магазина или компании, занимающейся недвижимостью, вероятнее всего положительно скажется на их доходах. Поэтому разработка подобного типа программ — вполне себе обыденное дело, и появились такие программы уже давно. По большей части таких ботов можно разделить на два класса — это различного рода Adware, которое распространяется вместе с популярными программами, или трояны, которые осуществляют более серьезную модификацию системы.  Win32/Patched.P Давай для начала рассмотрим достаточно экзотический, но от этого не менее интересный способ подмены результатов поиска в популярных поисковых сервисах Яндекс и Google, который был реализован в троянской программе Win32/Patched.P (ESET)…

Залив на карту без предоплаты по SWIFT или SEPA

В последнее время наблюдается такая ситуация, что нальщиков и дропов на рынке много, а адекватных заливщиков, можно сказать, совсем нет.


Например, один мой хороший знакомый, имеющий свой собственный офшор, работает с заливщиками на условиях партнерства, предоставляя им трафик и взамен получая 20% от поведенных транзакций на свой счет в офшорном банке. Мне он рассказал по большому секрету, как такое ему удается, а начинал он как и все с малого - продажи дебетовых карт и игре на рынке FOREX.

Просто так искать Заливщиков на различных форумах, посвящённых обналу и отмыванию денег - достаточно муторное и нудное занятие, потому как после общения с десятым по счету заливщиком, начинаешь понимать, что просто так на карты и счета никто лить не будет.

Однако моему другу попался один довольно интересный вариант - Заливщик предложил сделать перевод в размере 375 000 EUR по SEPA в день предоставления готового к работе счета и активной системы Multihomed AS.



Остальные предложения были более мутные …

Чем рискуют дропы и нальщики принимая заливы на свои карты

Зам.начальника управления Следственного департамента МВД Павел Сычев рассказал о криминальном бизнесе «нальщиков»
- Глава Банка России Эльвира Набиуллина заявила о снижении объемов теневого оборота в конце 2013 года. Что показывает ваша статистика по выявлению незаконных операций?

- В последние годы объем денежных средств, выведенных в теневой сектор, увеличивался, и криминогенная обстановка ухудшалась. Проблема находится в поле зрения президента -  в декабрьском послании Федеральному Собранию, он призвал избавить нашу финансовую систему от разного рода «отмывочных контор» и так называемых «прачечных». Оперативники уже получили ориентировку на более активное выявление этих преступлений.

По уголовным делам, расследованным МВД только в первом полугодии 2013 года, проходит 145 млрд рублей, обналиченных и незаконно выведенных заграницу. Это неуплаченные налоги, незаконный бизнес, хищения, взятки. Финансовый доход посредников от этих операций составил 8 млрд рублей. Расследовано 89 таких дел …

Как работает банк со своими корреспондентами по SWIFT

Итак, наш банк имеет открытые корреспондентские счета в США (CITIBANK N.A. NEW YORK), в Европе (VTB BANK DEUTSCHLAND AG), в России (Промсвязьбанк Москва и Собинбанк Москва).



Соответственно, все расследования по платежам происходят через эти банки согласно  установленным корреспондентским отношениям с использованием соответствующих форматов SWIFT MT-195/295, MT-196/296, MT-199/299 и MT-192/292

Кроме прямых корреспондентских отношений с банками, нашим банком установлены отношения и с другими финансовыми организациями через процедуру обмена ключами, что даёт возможность использовать SWIFT-форматы МТ-195, МТ-196 и МТ-199 для проведения процедуры расследования по стандартным платежам и платежам с покрытием:

- DEUTSCHE BANK TRUST COMPANY AMERICAS USA
- COMMERZBANK AG Germany
- CITIBANK N.A. London
- CITIBANK N.A. Brussels
- BANQUE DE COMMERCE ET DE PLACEMENTS S.A. Geneva
- NORVIK BANKA JSC  LV
- ABLV BANK AS  LV

В среднем процедура расследования занимает от 3 до 14 дней (если необходимо уточнить дета…