- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我正在将一组约 200 个 .xlsx 文件(每个文件都有多个工作表)转换为 .csv。 in2csv
允许使用 -s
提取单个工作表开关,但首先我需要从命令行获取 .xlsx 电子表格中所有工作表的名称。
我试过python的xlrd
包,但单个文件 >100MB 需要几分钟,因为它需要加载整个工作簿才能读取工作表包装。
我知道 gnumeric ssconvert
(-S
开关可以解决问题)但宁愿不为一个功能安装 600MB 的软件包。
有没有办法在不加载整个电子表格/工作簿的情况下提取工作表名称?如果没有,我如何分别将每个工作表和输出转换为单独的输出文件?
到目前为止,以下是我的解决方案,首先是查找所有未转换文件的 bash 脚本,其次是提取工作表名称的 python 脚本。
#!/bin/bash
# Paths
RAW_DATA_DIR_EBS=/mnt/data/shared/raw
CSV_DATA_DIR_EBS=/mnt/data/shared/csv
ETL_CONVERT_DIR=$(pwd)/$(dirname "$0")
function check_conversion {
# If filesize = 0 bytes, exit with error
filesize=$(wc -b $1)
if [ $filesize == 0 ]; then
echo "ERROR: conversion failed. Empty output file: $1"
exit 1
fi;
}
# For each data source directory
for source in $RAW_DATA_DIR_EBS/; do
dir=$(basename $source)
# Create output dir if absent
mkdir -p $CSV_DATA_DIR_EBS/$dir
# For each file for that source
for fin in $RAW_DATA_DIR_EBS/$dir/*.xlsx; do
# Get sheet names and store in array
echo "Obtaining worksheet names from $fin"
sheets=$(python $ETL_CONVERT_DIR/check_sheet_names.py -x $fin | tr -d '[]' | tr -d [:punct:])
IFS="," read -r -a sheets_array <<< "$sheets"
if [ ${#sheets_array[@]} == 1 ]; then
# Just one sheet
fout=$CSV_DATA_DIR_EBS/$dir/$(basename "$fin" .xlsx).csv
if [ ! -e $fout ]; then
echo "Converting worksheet in $fin ..."
in2csv -e utf-8 $fin > $fout;
check_conversion $fout
gzip $fout
else
echo "Spreadsheet $fin already converted:" $fout;
fi;
else
# Multiple sheets
for sheet in $sheets; do
fout=$CSV_DATA_DIR_EBS/$dir/$(basename "$fin" .xlsx)__sheet_"${sheet}".csv
if [ ! -e $fout ]; then
echo "Converting worksheet $sheet in $fin ..."
in2csv -e utf-8 --sheet $sheet $fin > $fout;
check_conversion $fout;
gzip $fout
else
echo "Spreadsheet $fin already converted:" $fout
fi;
done;
fi;
done;
done;
exit 0
#!/usr/bin/env python
''' check_sheet_names.py
Get names of worksheets contained in an .xlsx spreadsheet
'''
import xlrd
import argparse
if __name__ == '__main__':
parser = argparse.ArgumentParser(description='CLI')
parser.add_argument('--xlsx', '-x', type=str, required=True)
args = parser.parse_args()
xls = xlrd.open_workbook(args.xlsx, on_demand=True)
print(xls.sheet_names())
xls.release_resources()
del xls
最佳答案
-n 标志将提供 xlsx 文档中不同工作表的名称。
in2csv -n filename.xlsx
关于excel - 高效地从 .xlsx 电子表格中提取工作表名称,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52978483/
我正在尝试做这样的事情:Name[i] = "Name"+ (i+1) 在 forloop 中,这样数组的值将是:Name[0] = Name1,Name[1] = Name2,Name[2] = N
我读了here,在GSP中我们可以这样写: ${params.action} 从GSP中,我们可以使用${params.action}作为参数调用Javascript函数(请参阅here)。 是否有其
我的问题:非常具体。我正在尝试想出解析以下文本的最简单方法: ^^domain=domain_value^^version=version_value^^account_type=account_ty
我创建了一条与此类似的路线: Router::connect("/backend/:controller/:action/*"); 现在我想将符合此模式的每个 Controller 路由重命名为类似
我在 Visual Studio 2013 项目中收到以下警告: SQL71502 - Procedure has an unresolved reference to object 最佳答案 这可以
任何人都可以指导我使用名称/值 .NET 集合或 .NET 名称/值字典以获得最佳性能吗?请问最好的方法是什么?我的应用程序是 ASP.NET、WCF/WF Web 应用程序。每个集合应该有 10 到
我在 Zend Framework 2 中有一个默认模块: namespace Application\Controller; use Zend\Mvc\Controller\AbstractActi
这是表格: 关于javascript - 在 javascript 中,这是一个有效的结构吗? : document. 名称.名称.值?,我们在Stack Overflow上找到一个类似的
HtmlHelper.ActionLink(htmlhelper,string linktext,string action) 如何找出正确的路线? 如果我有这个=> HtmlHelper.Actio
我需要一些有关如何将 Controller 定义传递给嵌套在 outer 指令中的 inner 指令的帮助。请参阅http://plnkr.co/edit/Om2vKdvEty9euGXJ5qan一个
请提出一个数据结构来表示内存中的记录列表。每条记录由以下部分组成: 用户名 积分 排名(基于积分)- 可选字段- 可以存储在记录中或可以动态计算 数据结构应该支持高效实现以下操作: Insert(re
错误 : 联合只能在具有兼容列类型的表上执行。 结构(层:字符串,skyward_number:字符串,skyward_points:字符串)<> 结构(skyward_number:字符串,层:字符
我想要一个包含可变数量函数的函数,但我希望在实际使用它们之前不要对它们求值。我可以使用 () => type 语法,但我更愿意使用 => type 语法,因为它似乎是为延迟评估而定制的。 当我尝试这样
我正在编写一个 elisp 函数,它将给定键永久绑定(bind)到当前主要模式的键盘映射中的给定命令。例如, (define-key python-mode-map [C-f1] 'pytho
卡在R中的错误上。 Error in names(x) <- value : 'names' attribute must be the same length as the ve
我有字符串,其中包含名称,有时在字符串中包含用户名,后跟日期时间戳: GN1RLWFH0546-2020-04-10-18-09-52-563945.txt JOHN-DOE-2020-04-10-1
有人知道为什么我会收到此错误吗?这显示将我的项目升级到新版本的Unity3d之后。 Error CS0103: The name `Array' does not exist in the curre
由于 Embarcadero 的 NNTP 服务器从昨天开始就停止响应,我想我可以在这里问:我使用非数据库感知网格,我需要循环遍历数据集以提取列数、它们的名称、数量行数以及每行中每个字段的值。 我知道
在构建Android应用程序的子项目中,我试图根据根build.gradle中的变量设置版本代码/名称。 子项目build.gradle: apply plugin: 'com.android.app
示例用例: 我有一个带有属性“myProperty”的对象,具有 getter 和 setter(自 EcmaScript 5 起支持“Property Getters 和 Setters”:http
我是一名优秀的程序员,十分优秀!