MS Excel може да показва 1 048 576 реда. Въпреки че това може да изглежда като наистина голям брой при нормална употреба, има много сценарии, при които това не е достатъчно.

Независимо дали разглеждате регистрационни файлове или големи набори от данни, лесно е да попаднете на CSV файлове с милиони редове или огромни текстови файлове. Тъй като Excel не може да поддържа толкова големи файлове, как точно да ги отворите? Нека разберем.

Защо нормалните текстови редактори^{(Normal Text Editors)} не могат да отварят наистина големи файлове^{(Open Really Large Files)} ?

Компютърът има гигабайти памет, така че защо текстовите редактори не могат да отварят големи файлове?

Тук действат два фактора. Някои приложения имат твърдо зададено ограничение за това колко данни могат да показват. Няма значение колко памет има вашият компютър, те просто няма да го използват.

Вторият проблем е RAM . Много текстови редактори нямат твърдо ограничение за броя на редовете, но не могат да показват големи файлове поради ограничения на паметта. Те зареждат целия файл в системната RAM памет^(RAM) , така че ако тази памет не е достатъчно голяма, процесът се проваля.

Метод №1: Използване на безплатни редактори

Най-добрият начин да видите изключително големи текстови файлове е да използвате... текстов редактор. Не просто всеки текстов редактор, а инструментите, предназначени за писане на код. Такива приложения обикновено могат да обработват големи файлове без затруднения и са безплатни.

Large Text File Viewer е може би най-простото от тези приложения. Той е наистина лесен за използване, работи бързо и има много нисък отпечатък на ресурсите. Единственият недостатък? Не може да редактира файловете. Но ако искате да преглеждате само големи CSV файлове, това е най-добрият инструмент за тази работа.

За да редактирате и големи текстови файлове, трябва да опитате Emacs . Първоначално създаден за Unix системи, той работи перфектно и на Windows и може да обработва големи файлове. По същия начин, Neovim и Sublime Text са две леки IDE , които могат да се използват за отваряне на ^(IDEs)CSV текстови файлове с размер на гигабайта .

Ако всичко, което търсите, е да търсите данни чрез големи регистрационни файлове, тогава klogg е точно инструментът за вас. Актуализираща вилка на популярния glogg , това приложение ви позволява да извършвате сложни операции за търсене чрез огромни текстови файлове с лекота. Тъй като компютърно генерираните регистрационни файлове често могат да имат милиони редове, klogg е проектиран да работи с такива размери на файлове без проблем.

Метод^(Method) №2: Разделете на множество части^{(Into Multiple Parts)}

Целият проблем с опитите за отваряне на големи CSV файлове е, че те са твърде големи. Но какво ще стане, ако ги разделите на множество по-малки файлове?

Това е популярно решение, тъй като обикновено не включва необходимостта от изучаване на интерфейса на нов текстов редактор. Вместо това можете да използвате един от многото CSV сплитери, налични онлайн,^{(one of the many CSV splitters available online)} за да разделите големия файл на редица лесни за отваряне файлове. След това всеки от тези файлове може да бъде достъпен нормално.

Това обаче не е най-добрият начин да направите това. Разделянето на голям файл често може да доведе до странни печатни грешки или неправилно конфигурирани файлове. Освен това отварянето на всяка част поотделно ви предотвратява филтрирането на всички данни наведнъж.

Метод №3: Импортиране в база данни

Текстовите и .csv файловете, простиращи се до няколко гигабайта, обикновено са големи набори от данни. Така че защо просто не ги импортирате в база данни?

SQL е най-разпространеният език за маркиране на база данни, използван в наши дни. Има много използвани версии на SQL^{(many versions of SQL)} , но най-лесната е може би MySQL . И за късмет е възможно да конвертирате CSV файл в MySQL таблица^{(convert a CSV file into a MySQL table)} .

Това в никакъв случай не е най-лесният метод за работа с големи CSV файлове, така че препоръчваме това само ако искате да работите редовно с големи набори от данни. Ако MySQL звучи твърде трудно, винаги можете вместо това да импортирате вашите .csv файлове в MS Access .

Метод^(Method) №4: Анализирайте с библиотеки на Python^(Python)

Когато работите с .csv файл с милиони редове данни, очевидно няма да можете да го разберете ръчно. Вероятно искате да филтрирате данните и да изпълнявате конкретни заявки, за да разберете тенденциите.

Така че защо не напишете код на Python,^{(write Python code)} за да направите точно това?

Още веднъж, това не е най-удобният метод. Въпреки че Python не е най-трудният език за програмиране за научаване^{(Python isn’t the hardest programming language to learn)} , той е кодиране, така че може да не е най-добрият подход за вас. Все пак, ако се налага да анализирате наистина големи CSV файлове всеки ден, може да искате да автоматизирате задачата с някакъв код на Python^{(automate the task with some Python code)} .

Метод № 5: С първокласни инструменти

Текстовите редактори, които видяхме в първия метод, не бяха специални инструменти, предназначени за CSV обработка. Те бяха инструменти с общо предназначение, които можеха да се използват и за работа с големи .csv файлове.

Но какво да кажем за специализираните приложения? Няма ли приложения, създадени за решаване на този проблем?

Всъщност има ги. CSV Explorer , например, се основава на самия процес, който описахме в последните два метода ( SQL база данни и Python код), за да създаде приложение, способно да преглежда и редактира CSV файлове от всякакъв размер. Можете да правите всичко, което очаквате от инструмент за електронни таблици, като например създаване на графики или филтриране на данните в CSV Explorer .

Друга опция е UltraEdit . За разлика от предишния инструмент, това е предназначено не само за .csv файлове, но и за всякакъв тип текстов файл. Той може лесно да обработва текстови и CSV файлове, вариращи до няколко гигабайта, с интерфейс, подобен на много от безплатните редактори, които обсъждахме по-рано. 

Единственият недостатък на тези инструменти е, че те са първокласни приложения, които изискват да получите платен лиценз, за ​​да можете да ги използвате. Винаги можете да изпробвате техните безплатни пробни версии, за да проверите техните функции или ако използвате само еднократно.

Кой е най-добрият начин за отваряне на големи текстови^{(Large Text)} и CSV файлове^{(CSV Files)} ?

В тази епоха на големите данни^{(Big Data)} не е необичайно да се сблъскате с текстови файлове, работещи в гигабайти, които могат да бъдат трудни за разглеждане дори с вградени инструменти като Notepad или MS Excel . За да можете да отваряте такива големи CSV файлове, трябва да изтеглите и използвате приложение на трета страна.

Ако всичко, което искате, е да преглеждате такива файлове, тогава Large Text File Viewer е най-добрият избор за вас. За да ги редактирате реално, можете да опитате богат на функции текстов редактор като Emacs или да изберете първокласен инструмент като CSV Explorer .

Техники като разделяне на CSV файла или импортирането му в база данни включват твърде много стъпки. По-добре е да получите платен лиценз за специален първокласен инструмент, ако откриете, че работите много с огромни текстови файлове.

How to Open Really Large Text and CSV Files

MS Excel can display 1,048,576 rows. While that may seem like a reаlly large number in normal usagе, there are plenty of ѕcenarios wherе thаt isn’t quite enough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Как да търсите текст в няколко PDF файла наведнъж

• Как да изпратите анонимно текстово съобщение, което не може да бъде проследено до вас

• Как да форматирате текст в Discord: шрифт, получер, курсив, зачертаване и други

• Как да конвертирате множество изображения в PDF файлове

• Как автоматично да премествате или копирате файлове в Windows

• Вашето приложение за съобщения наистина ли е сигурно?

• Как да изпращате големи видеоклипове

• Как да търсите дума или текст на уеб страница във всеки уеб браузър

• Как да отваряте или извличате RAR файлове на Windows и Mac

• Как да скриете текстовите съобщения на iPhone (Изключете визуализацията)

• Скриване на файлове и папки в Windows (лесно хакване)

• Как да извлечете файлове от мъртъв твърд диск

• Не можете да възпроизвеждате MP4 файлове на вашия XBox 360?

• Как да промените датата на последната промяна, датата на създаване и датата на последен достъп за файлове и папки

• 7 бързи поправки, когато Minecraft продължава да се срива

• Най-бързият начин за сканиране на голям брой снимки у дома

• Как да извиете текст в InDesign

• Как да използвате VLOOKUP в Google Sheets

• Как да преглеждате Mac файлове на компютър с Windows

• Какво представлява рейтингът на пътниците на Uber и как да го проверите