如何在Linux命令行上解析CSV文件？（linux读取csv文件）

25-02-07 16

这篇文章主要围绕如何在Linux命令行上解析CSV文件？和linux读取csv文件展开，旨在为您提供一份详细的参考资料。我们将全面介绍如何在Linux命令行上解析CSV文件？的优缺点，解答linux读

这篇文章主要围绕如何在Linux命令行上解析CSV文件？和linux读取csv文件展开，旨在为您提供一份详细的参考资料。我们将全面介绍如何在Linux命令行上解析CSV文件？的优缺点，解答linux读取csv文件的相关问题，同时也会为您带来c++解析csv文件、Linux命令行上传文件到百度网盘、Linux命令行上如何使用日历详解、Linux命令行下如何使用USB传递文件？的实用方法。

本文目录一览：

如何在Linux命令行上解析CSV文件？（linux读取csv文件）
c++解析csv文件
Linux命令行上传文件到百度网盘
Linux命令行上如何使用日历详解
Linux命令行下如何使用USB传递文件？

如何在Linux命令行上解析CSV文件？（linux读取csv文件）

如何在Linux命令行上解析CSV文件？

做类似的事情：

csvparse -c 2,5,6 filename

从所有行的第2、5和6列中提取字段。

它应该能够处理csv文件格式：http :
//tools.ietf.org/html/rfc4180，这意味着要对
字段进行引用并适当地转义内部引号 ，因此对于具有3个字段的示例行：

field1,"field, number ""2"", has inner quotes and a comma",field3

这样，如果我在上面的行中请求字段2，我得到：

field, number "2", has inner quotes and a comma

我赞赏有很多解决方案，例如Perl，Awk（等等），但是我想要一个本机bash命令行工具，它不需要我调用其他脚本环境或编写任何其他代码（！）。

答案1

小编典典

我的FOSSCSV流编辑器CSVfix完全可以满足您的需求。有一个用于Windows的二进制安装程序，一个用于UNIX/ Linux的可编译版本（通过makefile）。

c++解析csv文件

 1 /***
 2 *        解析csv文件
 3 */
 4 BOOL ParseCSVFile(string fileName)
 5 {
 6     //文件名错误
 7     vector<string> fields; //声明一个字符串向量
 8     string field;
 9     SplitString(fileName.c_str,fields,".");
10     if (fields.size() < 2 || fields[fields.size()-1] != "csv")
11     {
12         //"文件格式错误";
13     }
14 
15     ifstream fin(fileName); //打开文件流操作
16     string line; 
17     int lineCount = 0;
18     while (getline(fin, line))   //整行读取，换行符“\n”区分，遇到文件尾标志eof终止读取
19     {
20         vector<string> fields; //声明一个字符串向量
21         string field;
22         SplitString(line,fields,",");
23         if (fields.size() != 7)
24         {
25             continue;
26         }
27         string loginName = Trim(fields[0]); //用户登录名
28         string userName = Trim(fields[1]); //用户名称
29         string cardId = Trim(fields[2]); //身份证号
30         string sex = Trim(fields[3]);    //性别
31         string ustatus = Trim(fields[4]); //状态
32         string invalidTime = TimeToDbTime(Trim(fields[5])); //到期时间
33         string department = Trim(fields[6]); //所属部分信息
34         if (lineCount == 0)
35         {
36             lineCount++;
37             continue;
38         }
39 
40         lineCount++;
41         
42         //具体处理方法。。。
43     }
44     
45     return TRUE;
46 }
47 
48 /***
49 *        按指定字符截取字符串
50 */
51 void SplitString(const string& str, vector<string>& ret_, const string &sep)
52 {
53     if (str.empty())
54     {
55         return ;
56     }
57 
58     string tmp;
59     string::size_type pos_begin = 0;//str.find_first_not_of(sep);
60     string::size_type comma_pos = 0;
61 
62     while (pos_begin != string::npos)
63     {
64         comma_pos = str.find(sep, pos_begin);
65         if (comma_pos != string::npos)
66         {
67             tmp = str.substr(pos_begin, comma_pos - pos_begin);
68             pos_begin = comma_pos + sep.length();
69         }
70         else
71         {
72             tmp = str.substr(pos_begin);
73             pos_begin = comma_pos;
74         }
75 
76         ret_.push_back(tmp);
77     }
78 }
79 
80 /***
81 *        删除字符串中空格，制表符tab等无效字符
82 */
83 string Trim(string& str)
84 {
85     str.erase(0,str.find_first_not_of(" \t\r\n"));
86     str.erase(str.find_last_not_of(" \t\r\n") + 1);
87     return str;
88 }

更多内容请访问 www.uusystem.com

Linux命令行上传文件到百度网盘

最近在学习 MysqL 的 bin-log 时候考虑到数据备份的问题，突然想到如果能将数据通过 Linux 命令行方式备份到百度网盘，那是一件多么牛逼的事情。百度网盘有免费的 2TB 存储空间，而且有百度做靠山，不怕数据丢失，安全可靠。说干就干，通过百度 and 谷歌找到了几种方式，比较喜欢 bypy 的方式，使用简单，方便。下边简单的总结一下如何使用 bypy 实现百度网盘数据的同步。

这是一个百度云的 Python 客户端，其主要目的和功能，就是为 Linux 使用者提供一种在命令行下，使用百度云盘中2T存储空间的方法。它提供文件列表、下载、上传、比较、向上同步、向下同步，等操作。

系统环境：

Linux 系统 + Python 2.7

安装软件工具：

pip install requests
pip install bypy

授权登陆：

执行 bypy info，显示下边信息，根据提示，通过浏览器访问下边灰色的https链接，如果此时百度网盘账号正在登陆，会出现长串授权码，复制。

[root@ineedle ~]# bypy infoPlease visit:   # 访问下边这个连接，复制授权码https://openapi.baidu.com/oauth/2.0/authorize?scope=basic+netdisk&redirect_uri=oob&response_type=code&client_id=q8WE4EpCsau1oS0MplgMKNBnAnd authorize this app
Paste the Authorization Code here within 10 minutes.
Press [Enter] when you are done    # 提示在下边粘贴授权码

在下边图示红色位置粘贴授权码，耐心等待一会即可(1-2分钟)

Press [Enter] when you are donea288f3d775fa905a6911692a0808f6a8Authorizing,please be patient,it may take upto None seconds...
Authorizing/refreshing with the OpenShift server ...
OpenShift server Failed,authorizing/refreshing with the Heroku server ...
Successfully authorized
Quota: 2.015TB
Used: 740.493GB

授权成功。

测试上传和同步本地文件到云盘

由于百度PCS API权限限制，程序只能存取百度云端/apps/bypy目录下面的文件和目录。我们可以通过：

 bypy downdir

比较本地当前目录和云盘根目录，看是否一致，来判断是否同步成功：

<span style='font-family: courier new,1)> bypy compare

Linux命令行上如何使用日历详解

前言

通过 Linux 上的日历，不仅仅可以提醒你今天是星期几。诸如 date、cal、 ncal 和 calendar 等命令可以提供很多有用信息。

Linux 系统可以为你的日程安排提供更多帮助，而不仅仅是提醒你今天是星期几。日历显示有很多选项 —— 有些可能很有帮助，有些可能会让你大开眼界。

日期

首先，你可能知道可以使用 date 命令显示当前日期。

$ date
Mon Mar 26 08:01:41 EDT 2018

cal 和 ncal

你可以使用 cal 命令显示整个月份。没有参数时，cal 显示当前月份，默认情况下，通过反转前景色和背景颜色来突出显示当天。

$ cal
 March 2018
Su Mo Tu We Th Fr Sa
  1 2 3
 4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31

如果你想以“横向”格式显示当前月份，则可以使用 ncal 命令。

$ ncal
 March 2018
Su 4 11 18 25
Mo 5 12 19 26
Tu 6 13 20 27
We 7 14 21 28
Th 1 8 15 22 29
Fr 2 9 16 23 30
Sa 3 10 17 24 31

例如，如果你只想查看特定周几的日期，这个命令可能特别有用。

$ ncal | grep Th
Th 1 8 15 22 29

ncal 命令还可以以“横向”格式显示一整年，只需在命令后提供年份。

$ ncal 2018
     2018
 January  February  March  April
Su 7 14 21 28 4 11 18 25 4 11 18 25 1 8 15 22 29
Mo 1 8 15 22 29 5 12 19 26 5 12 19 26 2 9 16 23 30
Tu 2 9 16 23 30 6 13 20 27 6 13 20 27 3 10 17 24
We 3 10 17 24 31 7 14 21 28 7 14 21 28 4 11 18 25
Th 4 11 18 25 1 8 15 22 1 8 15 22 29 5 12 19 26
Fr 5 12 19 26 2 9 16 23 2 9 16 23 30 6 13 20 27
Sa 6 13 20 27 3 10 17 24 3 10 17 24 31 7 14 21 28
...

你也可以使用 cal 命令显示一整年。请记住，你需要输入年份的四位数字。如果你输入 cal 18，你将获得公元 18 年的历年，而不是 2018 年。

$ cal 2018
    2018
 January  February  March
Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
 1 2 3 4 5 6  1 2 3  1 2 3
 7 8 9 10 11 12 13 4 5 6 7 8 9 10 4 5 6 7 8 9 10
14 15 16 17 18 19 20 11 12 13 14 15 16 17 11 12 13 14 15 16 17
21 22 23 24 25 26 27 18 19 20 21 22 23 24 18 19 20 21 22 23 24
28 29 30 31  25 26 27 28  25 26 27 28 29 30 31
 April   May   June
Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
 1 2 3 4 5 6 7  1 2 3 4 5   1 2
 8 9 10 11 12 13 14 6 7 8 9 10 11 12 3 4 5 6 7 8 9
15 16 17 18 19 20 21 13 14 15 16 17 18 19 10 11 12 13 14 15 16
22 23 24 25 26 27 28 20 21 22 23 24 25 26 17 18 19 20 21 22 23
29 30   27 28 29 30 31 24 25 26 27 28 29 30
 July   August  September
Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
 1 2 3 4 5 6 7  1 2 3 4   1
 8 9 10 11 12 13 14 5 6 7 8 9 10 11 2 3 4 5 6 7 8
15 16 17 18 19 20 21 12 13 14 15 16 17 18 9 10 11 12 13 14 15
22 23 24 25 26 27 28 19 20 21 22 23 24 25 16 17 18 19 20 21 22
29 30 31  26 27 28 29 30 31 23 24 25 26 27 28 29
      30
 October  November  December
Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
 1 2 3 4 5 6  1 2 3   1
 7 8 9 10 11 12 13 4 5 6 7 8 9 10 2 3 4 5 6 7 8
14 15 16 17 18 19 20 11 12 13 14 15 16 17 9 10 11 12 13 14 15
21 22 23 24 25 26 27 18 19 20 21 22 23 24 16 17 18 19 20 21 22
28 29 30 31  25 26 27 28 29 30 23 24 25 26 27 28 29
      30 31

要指定年份和月份，使用 -d 选项，如下所示：

$ cal -d 1949-03
 March 1949
Su Mo Tu We Th Fr Sa
 1 2 3 4 5
 6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31

另一个可能有用的日历选项是 cal 命令的 -j 选项。让我们来看看它显示的是什么。

$ cal -j
 March 2018
 Su Mo Tu We Th Fr Sa
   60 61 62
 63 64 65 66 67 68 69
 70 71 72 73 74 75 76
 77 78 79 80 81 82 83
 84 85 86 87 88 89 90

你可能会问：“什么鬼？？？” OK， -j 选项显示 Julian 日期 -- 一年中从 1 到 365 年的数字日期。所以，1 是 1 月 1 日，32 是 2 月 1 日。命令 cal -j 2018 将显示一整年的数字，像这样：

$ cal -j 2018 | tail -9
   November      December
 Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
    305 306 307       335
308 309 310 311 312 313 314 336 337 338 339 340 341 342
315 316 317 318 319 320 321 343 344 345 346 347 348 349
322 323 324 325 326 327 328 350 351 352 353 354 355 356
329 330 331 332 333 334  357 358 359 360 361 362 363
        364 365

这种显示可能有助于提醒你，自从你做了新年计划之后，你已经有多少天没有采取行动了。

运行类似的命令，对于 2020 年，你会注意到这是一个闰年：

$ cal -j 2020 | tail -9
   November      December
 Su Mo Tu We Th Fr Sa Su Mo Tu We Th Fr Sa
306 307 308 309 310 311 312   336 337 338 339 340
313 314 315 316 317 318 319 341 342 343 344 345 346 347
320 321 322 323 324 325 326 348 349 350 351 352 353 354
327 328 329 330 331 332 333 355 356 357 358 359 360 361
334 335      362 363 364 365 366

calendar

另一个有趣但潜在的令人沮丧的命令可以告诉你关于假期的事情，这个命令有很多选项，但我们这里介绍下你想看到即将到来的假期和值得注意的日历列表。日历的 -l 选项允许你选择今天想要查看的天数，因此 0 表示“仅限今天”。

$ calendar -l 0
Mar 26 Benjamin Thompson born, 1753, Count Rumford; physicist
Mar 26 David Packard died, 1996; age of 83
Mar 26 Popeye statue unveiled, Crystal City TX Spinach Festival, 1937
Mar 26 Independence Day in Bangladesh
Mar 26 Prince Jonah Kuhio Kalanianaole Day in Hawaii
Mar 26* Seward''s Day in Alaska (last Monday)
Mar 26 Emerson, Lake, and Palmer record "Pictures at an Exhibition" live, 1971
Mar 26 Ludwig van Beethoven dies in Vienna, Austria, 1827
Mar 26 Bonne fête aux Lara !
Mar 26 Aujourd''hui, c''est la St(e) Ludger.
Mar 26 N''oubliez pas les Larissa !
Mar 26 Ludwig van Beethoven in Wien gestorben, 1827
Mar 26 Emánuel

对于我们大多数人来说，这庆祝活动有点多。如果你看到类似这样的内容，可以将其归咎于你的 calendar.all 文件，该文件告诉系统你希望包含哪些国际日历。当然，你可以通过删除此文件中包含其他文件的一些行来削减此问题。文件看起来像这样：

#include <calendar.world>
#include <calendar.argentina>
#include <calendar.australia>
#include <calendar.belgium>
#include <calendar.birthday>
#include <calendar.christian>
#include <calendar.computer>

假设我们只通过移除除上面显示的第一个 #include 行之外的所有行，将我们的显示切换到世界日历。我们会看到这个：

$ calendar -l 0
Mar 26 Benjamin Thompson born, 1753, Count Rumford; physicist
Mar 26 David Packard died, 1996; age of 83
Mar 26 Popeye statue unveiled, Crystal City TX Spinach Festival, 1937
Mar 26 Independence Day in Bangladesh
Mar 26 Prince Jonah Kuhio Kalanianaole Day in Hawaii
Mar 26* Seward''s Day in Alaska (last Monday)
Mar 26 Emerson, Lake, and Palmer record "Pictures at an Exhibition" live, 1971
Mar 26 Ludwig van Beethoven dies in Vienna, Austria, 1827

显然，世界日历的特殊日子非常多。但是，像这样的展示可以让你不要忘记所有重要的“大力水手雕像”揭幕日以及在庆祝“世界菠菜之都”中它所扮演的角色。

更有用的日历选择可能是将与工作相关的日历放入特殊文件中，并在 calendar.all 文件中使用该日历来确定在运行命令时将看到哪些事件。

$ cat /usr/share/calendar/calendar.all
/*
 * International and national calendar files
 *
 * This is the calendar master file. In the standard setup, it is
 * included by /etc/calendar/default, so you can make any system-wide
 * changes there and they will be kept when you upgrade. If you want
 * to edit this file, copy it into /etc/calendar/calendar.all and
 * edit it there.
 *
 */
#ifndef _calendar_all_
#define _calendar_all_
#include <calendar.usholiday>
#include <calendar.work>   <==
#endif /* !_calendar_all_ */

日历文件的格式非常简单 - mm/dd 格式日期，空格和事件描述。

$ cat calendar.work
03/26 Describe how the cal and calendar commands work
03/27 Throw a party!

注意事项和怀旧

注意，有关日历的命令可能不适用于所有 Linux 发行版，你可能必须记住自己的“大力水手”雕像。

如果你想知道，你可以显示一个日历，远至 9999 —— 即使是预言性的 2525。

总结

以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，如果有疑问大家可以留言交流，谢谢大家对的支持。

您可能感兴趣的文章:

Linux下指定源ip进行ping操作的方法
Linux下设置Vim编辑器里Tab的长度行号
linux 后台运行node服务指令方法
关于Linux命令行下的数学运算示例详解
解决python nohup linux 后台运行输出的问题
linux查看匹配内容的前后几行方法

Linux命令行下如何使用USB传递文件？

服务器上有很多的文件，现在只能使用SSH下载到本机传送，想在服务器上直接插移动硬盘，怎么做？

各位大牛指点一哈~

关于如何在Linux命令行上解析CSV文件？和linux读取csv文件的介绍已经告一段落，感谢您的耐心阅读，如果想了解更多关于c++解析csv文件、Linux命令行上传文件到百度网盘、Linux命令行上如何使用日历详解、Linux命令行下如何使用USB传递文件？的相关信息，请在本站寻找。

本文标签：