python 节省纯数字字 rune 本文件大小的注意事项-6ren

python 节省纯数字字 rune 本文件大小的注意事项

转载作者：行者123 更新时间：2023-11-28 19:51:01

25

4

我将一些网络分析的大量输出制成表格，每行列出一条边，这会导致数十 GB，超出了我的资源限制(轻描淡写)。因为我只处理数值，所以我想到我可能比使用 Py3k 默认值更聪明。 IE。如果我只有数字(以及空格和偶尔的小数点)，一些其他字符编码可能会为我节省很多空间。由于我的限制，我什至可以保存行尾(不要让 Windows 标准 CRLF 重复)。这方面的最佳做法是什么？

示例行如下所示:

62233 242344 0.42442423

(实际上最后一个数字毫无意义地精确，我将把它缩减为三个非零数字。)

因为我需要用其他软件(实际上是 Stata)读取文本文件，所以我不能将数据保存为任意二进制文件，尽管我看不出 Stata 只读取 UTF-8 文本的原因。或者您只是说避免使用 UTF-8 几乎不能为我节省任何东西？

我认为压缩对我不起作用，因为我逐行编写文本，即使在此期间限制输出大小也很好。我可能很容易弄错压缩是如何工作的，但我认为它可以在文件生成后节省我的空间，但我的问题是我的代码在我对文本文件进行制表(逐行)时已经崩溃了。

感谢所有的想法和澄清的问题!

最佳答案

您可以使用 zlib或 gzip在生成数据时压缩数据。您根本不需要更改格式，压缩将根据您最常使用的字符和序列进行调整，以创建最佳文件大小。

关于python 节省纯数字字 rune 本文件大小的注意事项，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/7575329/

25

4

0

文章推荐： ios - 在 UITableView 中禁用部分 Cell

文章推荐： javascript - Google map API OVER_QUERY_LIMIT

文章推荐： testing - 推荐的基于模型的测试工具

php - 使用PHP的“注意: undefined variable ”，“注意: undefined index ”和“注意: undefined offset ”
我正在运行PHP脚本，并继续收到如下错误：注意：未定义的变量：第10行的C：\ wamp \ www \ mypath \ index.php中的my_variable_name 注意
php - 使用PHP的“注意: undefined variable ”，“注意: undefined index ”和“注意: undefined offset ”
我正在运行PHP脚本，并继续收到如下错误：注意：未定义的变量：第10行的C：\ wamp \ www \ mypath \ index.php中的my_variable_name 注意
php - 使用PHP的“注意: undefined variable ”，“注意: undefined index ”和“注意: undefined offset ”
我正在运行PHP脚本，并继续收到如下错误：注意：未定义的变量：第10行的C：\ wamp \ www \ mypath \ index.php中的my_variable_name 注意
"Notice: Undefined variable", "Notice: Undefined index", "Warning: Undefined array key", and "Notice: Undefined offset" using PHP(注意：未定义变量“、”注意：未定义索引“、”警告：未定义数组键“、”注意：未定义偏移量“)
我正在运行一个PHP脚本，并且继续收到如下错误：。第10行和第11行如下所示：。这些错误消息的含义是什么？。为什么他们突然出现了？我多年来一直使用这个脚本，从来没有遇到过任何问题。。我该怎么修理它们呢
android - 注意 : Recompile with -Xlint:deprecation. 注意:一些输入文件使用或覆盖已弃用的 API
当我在 flutter clean 之后运行 flutter run 或 debug my code 时显示此错误 Note: C:\src\flutter.pub-cache\hosted\pub.
java - 注意 : MainActivity uses or overrides a deprecated API. 注意:使用 -Xlint:deprecation 重新编译以获取详细信息
My Goal: To fix this error and be able to run my app without an error. Error Message: Note:D:\Learni
注意！JAVA中的值传递
前言：今天在解决一个问题时，程序总是不能输出正确值，分析逻辑思路没问题后，发现原来是由于函数传递导致了这个情况。 LeetCode 113 问题：给你二叉树的根节点
r - 检查描述元信息...注意
我正在 R 中开发一个包，当我运行时 devtools::check()我收到以下说明。 checking DESCRIPTION meta-information ... NOTE Malforme
php - 注意:使用未定义的常量GLOB_BRACE
获得通知和警告波纹管 Notice: Use of undefined constant GLOB_BRACE - assumed 'GLOB_BRACE' in /var/www/html/open
r - 对不同包的外部函数调用注意
我正在准备一个 R 包以提交给 CRAN。 R CMD 检查给了我以下注意: Foreign function calls to a different package: .Fortran("cinc
php - 注意:尝试获取非对象错误的属性
我正在尝试从以下位置获取数据: http://api.convoytrucking.net/api.php?api_key=public&show=player&player_name=Mick_Gi
php - 注意:未定义索引product_name
我有这段代码，但我不明白为什么我仍然有这个错误，我已经尝试了所有解决方案，但无法解决这个问题:-注意:未定义索引:product_price-注意:未定义索引:product_quantity-注意:
php - 注意:php中的未定义索引
This question already has answers here: “Notice: Undefined variable”, “Notice: Undefined index”, and
php - 注意:尝试获取非对象错误的属性
我正在尝试从以下位置获取数据: http://api.convoytrucking.net/api.php?api_key=public&show=player&player_name=Mick_Gi
注意!PHP 7中不要做的10件事
切记，在PHP 7中不要做的10件事 1. 不要使用 mysql_ 函数这一天终于来了，从此你不仅仅“不应该”使用mysql_函数。PHP 7 已经把它们从核心中全部移除了，也就是说你需要迁移
注意:php5.4删除了session_unregister函数
前几天安装了dedecms系统，当在后台安全退出的时候，后台出现空白，先前只分析其他功能去了，也没太注意安全，看了一下安全退出的代码，是这样写的：复制代码代码如下: function ex
php - 注意 php - 替代还是删除？
我使用此代码来检查变量$n0、$n1、$n2是否未定义。但每次未定义时我都会收到通知。我的代码是一种不好的做法吗？还有什么替代方案吗？或者只是删除通知，代码就可以了？ if
php - 修复所有警告，注意，错误是否重要？
编写代码时处理所有警告是否重要？在我公司中具有较高资历的开发人员坚持认为警告是无害的。诚然，其中一些是: Warning: Division by zero Notice: Undefined ind
php - 注意:未定义索引:点击
我有一个搜索查询，执行搜索查询后，我将$ result放入数组中。我的PHP代码- $contents = $client->search($params); // executing the se
php - PHP:注意:未定义索引
This question already has answers here: “Notice: Undefined variable”, “Notice: Undefined index”, and

首页

博学

6Ren·AI

商城

python 节省纯数字字 rune 本文件大小的注意事项