在BigQuery Reddit数据集中加入带有评论的帖子
BigQuery是Google Cloud提供的一种托管式数据仓库解决方案，它可以用于存储和分析大规模数据集。Reddit是一个社交媒体平台，用户可以在其上发布帖子和评论。在BigQuery Reddit数据集中加入带有评论的帖子，可以通过以下步骤完成：
- 创建BigQuery项目：首先，您需要在Google Cloud上创建一个BigQuery项目。您可以使用Google Cloud控制台或Google Cloud SDK来完成此操作。
- 导入Reddit数据集：在BigQuery中，有一个公共可用的Reddit数据集，其中包含了Reddit上的帖子和评论数据。您可以使用以下命令将此数据集导入到您的BigQuery项目中：bq --location=US mk --dataset reddit bq load --autodetect --source_format=NEWLINE_DELIMITED_JSON reddit.comments gs://bigquery-public-data/reddit/comments/2019/RC_2019-01.bz2 bq load --autodetect --source_format=NEWLINE_DELIMITED_JSON reddit.posts gs://bigquery-public-data/reddit/posts/2019/RS_2019-01.bz2
- 查询带有评论的帖子：一旦数据集导入完成，您可以使用SQL查询语言在BigQuery中查询带有评论的帖子。以下是一个示例查询，用于获取带有评论的帖子：SELECT p.title, c.body FROM `reddit.posts` AS p JOIN `reddit.comments` AS c ON p.id = c.link_id WHERE p.num_comments > 0
在这个查询中，我们使用了reddit.posts和reddit.comments表，并通过p.id = c.link_id将它们连接起来。我们还添加了一个条件p.num_comments > 0来确保只返回带有评论的帖子。
- 腾讯云相关产品推荐：腾讯云提供了一系列与云计算相关的产品和服务，以下是一些推荐的产品和产品介绍链接地址：
- 云数据库 TencentDB：https://cloud.tencent.com/product/cdb
- 云服务器 CVM：https://cloud.tencent.com/product/cvm
- 云存储 COS：https://cloud.tencent.com/product/cos
- 人工智能 AI Lab：https://cloud.tencent.com/product/ailab
- 云安全 SSL 证书：https://cloud.tencent.com/product/ssl
请注意，以上答案仅供参考，具体的实施步骤和产品选择可能因实际需求和环境而异。
相关·内容
在上可用的Reddit数据集中的comments和posts表是如何相关的？这看起来并不明显。
浏览 12提问于2018-01-07得票数 1
回答已采纳
我试图将评论加入到多个表的帖子中。我需要一个AS子句，因为posts表和comments表共享一个列'score‘。
我的目标是能够在顶部的帖子中找到顶部的注释，并在所有这些表中找到数据。.2015_12，fh-bigquery.reddit_posts.2016_01，fh-bigquery.reddit_posts.2016_02，
浏览 0提问于2019-01-27得票数 1
回答已采纳
我试图收集(例如，前20位)在一个给定的subreddit中投票最多的帖子中最受欢迎的评论。FROM `fh-bigquery</em
浏览 0提问于2019-01-25得票数 0
回答已采纳
1回答
我试着在每个Reddit帖子中获得排名前5的评论。我只想检索每个帖子标题的前N个评论。 例如:我只想为每个帖子添加评论1和2。SUBSTR(comments.body, 0, 80), comments.id `fh-bigquery.reddit_posts.2015*` A
浏览 8提问于2019-01-30得票数 2
回答已采纳
我正在尝试在SQL子编辑中获取关于AskDocs的帖子和评论，这个SQL子编辑器可以很好地获取帖子SELECT `fh-bigquery.reddit_postssubreddit = &#
浏览 0提问于2019-07-04得票数 0
1回答
我是Google大查询的新手，我想从数据库中提取帖子标题、帖子正文、评论、评分和创建日期，这些文章是在2010年或2010年以后为subreddit创建的，目前我已经能够使用以下方式查询所有subreddit评论但我的动机是加入</
浏览 1提问于2020-08-10得票数 0
回答已采纳
我在谷歌BigQuery上的Reddit数据上做数据挖掘，我想为每个子Reddit的分数排名前1,000个帖子的整个201704个数据。我尝试过不同的技术，但由于BigQuery的限制，结果太大而无法返回。:reddit_comments.2017_04] where mm <= 1000 AND subred
浏览 2提问于2017-06-18得票数 5
回答已采纳
我正在试图找到某些短语出现在reddit评论bigquery 2015。这些短语也是通过运行查询获得的。我保存了表结果，以便可以访问这些短语(存储在列中)： FROM ( FROM [lucid-bond-156818:bquijob_658cefdf_15a212b8aaf] #the phrases I want to search within reddit comment bigquery
SELECT CO
浏览 8提问于2017-02-09得票数 1
回答已采纳
(哪些提交的评论在N秒内达到了第1000条评论--按N升序排序)。基本上是根据评论数量的加速程度对提交的内容进行排名。(我假设突发新闻是最快的)。
浏览 1提问于2015-08-28得票数 2
请问在BigQuery上，HackerNews数据集中的comments和stories表是如何相关的？这看起来并不明显。
浏览 23提问于2019-09-27得票数 0
回答已采纳
我如何安排Reddit的评论，就像Gmail和Twitter一样？
根据多个消息来源，您可以安排Reddit帖子稍后发送。你也能用评论来做吗？如果是，那怎么做？
浏览 0提问于2022-09-26得票数 3
BigQuery -新手
试图获取两个用户，这些用户都对前10名用户进行了评论，并使用BigQuery Reddit Data对其进行了评论。
浏览 2提问于2016-04-19得票数 0
我正在通过以下自联接创建Reddit subreddits之间重叠评论员数量的表：JOIN [fh-bigquery:reddit_comments.2015_05] t2WHERE t1.subreddit<
浏览 6提问于2016-11-12得票数 4
回答已采纳
2回答
我正在尝试使用bigquery上的reddit数据，我希望在一行中看到评论和回复。我看到bigquery支持子查询，但我无法构造查询。由于数据的结构，我必须使用子查询来自连接同一个表，特别是我希望将id和parent_id连接在一起，但在连接之前需要修改id。_',p.id) AS first_id , c.last_score,FROM
[fh-big
浏览 0提问于2016-02-22得票数 3
回答已采纳
3回答
我有一个包含user_id和日期列的每日会话表。我想在每天的基础上画出DAU/MAU (每日活跃用户/每月活动用户)。计算每日活动用户很简单，但是计算每月活动用户(例如，今天登录的用户数量减去30天)会造成问题。每天没有左加入，这是如何实现的？
编辑:我在用Postgres。
浏览 6提问于2014-06-30得票数 15
回答已采纳
我需要使用Python Reddit API包装器(PRAW)分析对子Reddit的所有评论(例如，从2015年起)。我希望将数据存储在JSON中。我已经找到了一种方法，可以使用PRAW以JSON的形式获得所有的热门、新、热门等提交：top_submissions= reddit.subreddit("do
浏览 7提问于2021-11-22得票数 1
我想抓取这个reddit页面中的所有评论，然后将数据写入csv文件。我已经写了这段代码。from bs4 import BeautifulSoupimport csv
source = requests.get('https://www.reddit.
浏览 3提问于2021-07-17得票数 0
我目前在Google BigQuery上有一些reddit数据，我想对选择的subreddits上的所有评论做一个单词计数。查询大约是90GiB，因此不可能直接加载到DataLab中并转换为数据帧。有人建议我使用DataProc中的Hadoop或Spark作业来创建字数统计，并设置一个连接器将BigQuery数据导入到DataProc中，以便DataProc可以进行字数统计。
浏览 33提问于2021-10-25得票数 1
2回答
我试图查询Google BigQuery公共红迪数据集。我的目标是使用计算subreddits的相似性，它的定义如下：我的计划是在2016年8月从评论数量上选择排名第一的N=1000分类。到目前为止，我的疑问是： subreddit1, (SELECT FROM `fh-bigquery
浏览 5提问于2016-10-03得票数 2
回答已采纳
1回答
我在创建一个编辑机器人。当我创建一个包含图片和标题的帖子时。我想要自动添加一个评论在创建的帖子中，其中包含一段文字("hello world")。这是我用来发布带有标题和图片的帖子的代码。reddit.subreddit(subreddit).submit_i
浏览 8提问于2020-01-17得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
