ParserError:第32行中应为2个字段，实际为4

Question

我在解析txt文件时遇到问题(请参阅此处：文件(这是我的代码

import pandas as pd
objectname = r"path"
df = pd.read_csv(objectname, engine = 'python',  sep='t', header=None)

不幸的是，它不起作用。由于这个问题已经被问了好几次，我尝试了很多建议的解决方案(其中大多数可以在这里找到：可能的解决方案(

然而，没有什么对我有用。例如，当我使用时

sep='delimiter'

数据帧已创建，但所有内容都在一列中结束。

当我使用时

error_bad_lines=False

我感兴趣的行被跳过了。

它的唯一工作方式是，当我第一次打开txt文件，复制内容，将其粘贴到谷歌工作表中，将文件保存为CSV，然后打开数据帧。

我想另一个变通办法是使用

df = pd.read_csv(objectname, engine = 'python',  sep = 'delimiter', header=None)

结合拆分功能拆分功能

有没有什么建议可以在不需要转换文件或使用拆分函数的情况下实现这一点？我使用的是Python 3和Windows 10。感谢您的帮助。

Answer 1

您的文件有制表符分隔符，但不是TSV。该文件是元数据的混合物；标准"；TSV，然后是更多的元数据。因此，我发现将元数据作为一项独立于加载数据的任务来处理是非常有用的。

以下是我提取元数据行的步骤：

with open('example.txt','r') as file_handle:
file_content = file_handle.read().split('n')
for index, line in enumerate(file_content):
if index<21 or index>37:
print(index, line.split('t'))

请注意，表示元数据的开始和停止的行(在我的示例中为21和37(是特定于文件的。我已经提供了我在下面使用的修剪数据(基于您的链接文件(。

另外，我使用将TSV加载到Pandas中

import pandas as pd
df = pd.read_csv('example.txt', engine = 'python',  
sep='t', error_bad_lines=False, header=None,
skiprows=list(range(21))+list(range(37,89)))

再次，我跳过了文件开头和结尾的元数据。

这是我试验过的文件。我已经修剪了额外的数据以减少行数。

TITLE   Test123
DATA TYPE   
ORIGIN  JASCO
OWNER   
DATE    19/03/28
TIME    16:39:44
SPECTROMETER/DATA SYSTEM    
LOCALE  1031
RESOLUTION  
DELTAX  -0,5
XUNITS  NANOMETERS
YUNITS  CD [mdeg]
Y2UNITS HT [V]
Y3UNITS ABSORBANCE
FIRSTX    300,0000
LASTX     190,0000
NPOINTS      221
FIRSTY      -0,78961
MAXY        37,26262
MINY       -53,38971
XYDATA
300,0000    -0,789606   182,198 -0,0205245
299,5000    -0,691644   182,461 -0,0181217
299,0000    -0,700976   182,801 -0,0136756
298,5000    -0,614708   182,799 -0,0131957
298,0000    -0,422611   182,783 -0,0130073
195,0000    26,6231 997,498 4,7258
194,5000    -17,3049    997,574 4,6864
194,0000    16,0387 997,765 4,63967
193,5000    -14,4049    997,967 4,58593
193,0000    -0,277261   998,025 4,52411
192,5000    -29,6098    998,047 4,45244
192,0000    -11,5786    998,097 4,36608
191,5000    34,0505 998,282 4,27376
191,0000    28,2325 998,314 4,1701
190,5000    -13,232 998,336 4,05036
190,0000    -47,023 998,419 3,91883
##### Extended Information
[Comments]
Sample name X
Comment
User
Division
Company RWTH Aachen
[Detailed Information]
Creation date   28.03.2019 16:39
Data array type Linear data array * 3
Horizontal axis Wavelength [nm]
Vertical axis(1)    CD [mdeg]
Vertical axis(2)    HT [V]
Vertical axis(3)    Abs
Start   300 nm
End 190 nm
Data interval   0,5 nm
Data points 221     
[Measurement Information]
Instrument name CD-Photometer
Model name  J-1100
Serial No.  A001361635
Detector    Standard PMT
Lock-in amp.  X mode
HT volt   Auto
Accessory   PTC-514
Accessory S/N   A000161648
Temperature   18.63 C
Control sonsor    Holder
Monitor sensor    Holder
Measurement date    28.03.2019 16:39
Overload detect 203
Photometric mode    CD, HT, Abs
Measure range   300 - 190 nm
Data pitch  0.5 nm
CD scale    2000 mdeg/1.0 dOD
FL scale    200 mdeg/1.0 dOD
D.I.T.  0.5 sec
Bandwidth   1.00 nm
Start mode  Immediately
Scanning speed  200 nm/min
Baseline correction Baseline
Shutter control Auto
Accumulations   3