Twitter流API Python -将不完整的数据写入文件

Question

我正在使用Twitter流API来获取匹配某些关键字的tweet。得到的输出被写入一个文件。我根据tweet的起源距离做了一些基本的比较，并相应地写入单独的文件。

        lat2=float(d['geo']['coordinates'][0])
        long2=float(d['geo']['coordinates'][1])
        lat1=venue_latitude
        long1=venue_longitude
        lon1, lat1, lon2, lat2 = map(radians, [long1, lat1, long2, lat2])
        dlon = lon2 - lon1 
        dlat = lat2 - lat1 
        a = sin(dlat/2)**2 + cos(lat1) * cos(lat2) * sin(dlon/2)**2
        c = 2 * asin(sqrt(a)) 
        distance = 6367 * c * 0.621371
        if distance < 1:
            user= d['user']['screen_name']
            user_id=d['user']['id']
            file=open('Tweets_within_one_mile.txt','a')
            users.append(user)
            text=str(user)  + str(user_id)+ "qwertyasdfgzxcvb" + str(distance) + d['text'] 
            u = text.encode('utf-8')
            file.write(u)
            file.close()
        if distance > 2 and distance < 60:
            user= d['user']['screen_name']
            user_id=d['user']['id']
            file=open('Tweets_within_sixty_miles.txt','a')
            users.append(user)
            text=str(user)  + str(user_id) + str(co_lon2) +d['text']
            u = text.encode('utf-8')
            file.write(u)
            file.close()

最后一次运行脚本时。收集到的推文数量约为3万条。但只有2万条推文被完全写入了该文件。

Python输出缓冲区有问题吗?

Answer 1

我不能确定这就是为什么只有一部分被保存的确切原因，但是你构造if语句的方式可能与此有关。

例如:

if distance < 1:
    print("foo")
if distance  > 2 or distance a < 60:
    print("bar")

2. 1和2之间的数字不能工作(即1.1到1.9)
3. 等于2或60的数字
4. 大于60的数字

同样，不确定您试图获得的确切值，但这可能会有所帮助(它将捕获所有数据):

if distance <= 1:
    print("foo")
if 2 <=distance or distance <= 60:
    print("bar")