- android - 多次调用 OnPrimaryClipChangedListener
- android - 无法更新 RecyclerView 中的 TextView 字段
- android.database.CursorIndexOutOfBoundsException : Index 0 requested, 光标大小为 0
- android - 使用 AppCompat 时,我们是否需要明确指定其 UI 组件(Spinner、EditText)颜色
我使用 java 和 twitter 搜索 api 将推文存储在 mongoDB 中,有没有办法按原样存储来自 twitter api 的 json?
我也在考虑使用python,有没有办法用python实现?
最佳答案
我不知道你是否仍然对这个问题的答案感兴趣,但从纯粹的Python角度来看,这就是我存储原始推文json的方式:
import tweetstream # Needed For Twitter API Capture (Make sure using modified version with proxy support)
import argparse # Needed for taking cmd line input
import gzip # Needed for compressing output
import json # Needed for Data conversion for easier DB import
import ast # Also Needed for Data conversion
collector = argparse.ArgumentParser(description='Collect a lot of Tweets') # This line sets up the argument collector
collector.add_argument('--username', dest='username', action="store") # This line collects the Username
collector.add_argument('--password', dest='password', action="store") # This line collects the password
collector.add_argument('--outputfilename', dest='outputfilename', action="store") # This line collects the output filename
args = collector.parse_args() # Setup args to store cmd line arguments
def printusername(): # define the username argument
print args.username
def printpassword(): # define the password argument
print args.password
def printoutputfilename(): # define the output filename
print args.outputfilename
output=gzip.open(args.outputfilename, "a") # Open the output file for GZIP writing
with tweetstream.TweetStream(args.username, args.password) as stream: # Open the Twitter Stream
for tweet in stream: # For each tweet within the twitter stream
line = str(tweet) # turn the tweet into a string
line = ast.literal_eval(line) # evaluate the python string (dictionary)
line = json.dumps(line) # turn the python dictionary into valid JSON
output.write(line) # write the line to the output file
output.write("\n")
运行这个:“python myscript.py --username yourusername --password yourpassword --outputfilename yourpathandfilename”
您需要安装 tweetstream argparse gzip json 和 ast 模块。所有这些都可以通过 pip 或 easy_install 或大多数 ubuntu/fedora 包管理器安装。
脚本将创建的输出文件是一个简单的 gzip 压缩文本文件,其中每一行都是一个新的 json 字符串,其中包含完整的 tweet json 对象。由于脚本会一直运行直到达到速率限制,因此它不会使用正确的 EOF 关闭 gzip 文件。然而 python 并不关心,因此您可以使用另一个脚本打开它,7zip 或 winrar 也不关心。
我希望这会有所帮助。 :)
关于java - 在 mongoDB 中存储来自 twitter api 的 json 文件,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/10026342/
用户使用 oauth 登录我的应用程序,注销我的应用程序后,但 twitter 无法执行,问题是用户 twitter 帐户处于事件状态。 当注销我的应用程序的同时注销 Twitter twitter
我在 Twitter 的文本查询字符串参数方面遇到了一些字符编码问题。 a) http://www.twitter.com/share?url=http://www.example.com&text=
就目前而言,这个问题不适合我们的问答形式。我们希望答案得到事实、引用或专业知识的支持,但这个问题可能会引起辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the he
我正在尝试执行3-legged authorization来在浏览器中调用Twitter API。该过程首先通过将签名的请求发布到 /oauth/request_token 来获得请求 token (
我正在做一个项目来识别用户是否是 Twitter 中的名人。有什么方法可以检查 Twitter 中的用户是否被验证为名人?我知道名人会在推特个人资料中用蓝色徽章来识别。但是我如何通过 Twitter
我想对推文进行一些挖掘。是否有更具体的推文停用词列表,例如删除“lol”和其他推特笑脸? 最佳答案 我想你应该合并普通的停用词列表,例如 this one或that ,带有特定的首字母缩略词词典,例如
我正在为我的期末项目建立一个网站,用于查找和显示 Twitter 上当前 HitTest 门的主题。有谁知道如何从上周或一天内的大量推文中提取主题?我还想知道如何在 http://tweet3d.co
我可以使用获取所有用户的详细信息 https://api.twitter.com/1/account/verify_credentials.json 但我只想通过使用 api 获取 ID 如何获得它。
我见过多个“允许此应用程序与 twitter 一起运行”的内容,但没有一个: 查看您的 Twitter 密码 在“此应用程序将能够”下 示例: 最佳答案 没有 Twitter 永远不会允许人们看到您的
我注意到最近的一些推文有与之相关的媒体,例如来自 TwitPic 或 Flickr 的照片以及来自 Youtube 的视频。你可以直接在 Twitter 网站上看到它们,所以它不仅仅是一个链接。我的想
在 Twitter API 中,有一个 status_lookup 方法可以“水化”推文。文档不清楚这意味着什么。那么我什么时候需要补充推文呢? 如果我有来自 /statuses/user_timel
我使用以下代码来显示一个带有已填充消息的 Twitter 框的页面: Click me 但是,在页面上,我在 Twitter 框中得到了这个: myMessage/ 注意结尾的斜杠。有什么想法可以解决
关闭。这个问题不符合Stack Overflow guidelines .它目前不接受答案。 这个问题似乎与 help center 中定义的范围内的编程无关。 . 关闭 7 年前。 Improve
在开发包含 Twitter 客户端的 iOS 应用程序时,我必须允许用户生成主题标签(可以在应用程序内的其他位置创建,而不仅仅是在推文正文中创建)。 我想确保任何此类主题标签对于 Twitter 都有
我是集群新手,之前刚刚实现了一些算法。我需要根据推文的相似性对推文进行聚类。一种方法是仅使用哈希标签,但我认为这不会提供那么多信息。因此应该分析完整的推文。 此外,我还在网上搜索聚类提要的算法。 我遇
我想在 ios 7 中集成 twitter 并希望实现以下功能。1. 从 iOS 应用程序使用 Twitter 登录。2. 获取用户资料信息 我尝试了几个解决方案,但没有一个对我有用。请帮忙。 最佳答
是否有任何方法可以使用用户 ID 或屏幕名称构建个人资料图像 URL?我将用户 ID 存储在数据库中,但我不想存储个人资料图像 url。 编辑: 我也不想进行 api 调用。我想将 user_id 放
在 iOS5 上,是否可以提示用户并将其引导至 Twitter Settings.app 区域,以便他们可以将自己的 Twitter 帐户添加到手机中?如果是,你是怎么做到的? 作为解决方法,我可以指
有许多网站为 Twitter 提供附加服务: hashtags.org tweetmeme.com repeets.com dailyrt.com backtweets.com 他们都有一个共同点:他
我正在使用 Twitter Bootstrap 并尝试使用背景打印页面。 我尝试了网络浏览器中的所有选项,但它不起作用。 如果我不包括 twitter bootstrap,则背景的打印效果很好。 (顺
我是一名优秀的程序员,十分优秀!