我一直在阅读Kafka，Flume，Scribe，S4，Storm和一大堆其他工具，但我仍然不确定哪一个最适合手头的任务。这些似乎要么专注于日志文件数据，要么专注于活动流的实时处理，而我猜我更感兴趣的是在活动流上做ETL。(在规模方面，我预计最多有30,000个用户与大约10个系统交互-不是同时进行的-所以不是真正的“大数据”，但也不是微不足道的。)
谢谢!
浏览 1提问于2013-07-03得票数 2
2回答
我正在设计一个可视化java日志的工具。具体来说，每当调用方法和返回方法时，都会将这些日志打印到控制台。使用字节码操作将这些日志语句注入整个Android源代码。到目前为止，我们已经能够检测Android操作系统并生成这些日志语句。这些日志语句中包含的字段是:调用方法、方法签名、参数类型、返回类型和时间戳的进程。
浏览 8提问于2017-02-14得票数 2
3回答
我在if命令中使用(在Matlab中)一个global语句，因此只有在真正需要全局变量的情况下，我才会将全局变量导入本地命名空间。
警告是正确的；Matlab在后台使用了一些非常不寻常的变量加载机制，因此在if语句中导入全局变量的速度要慢得多。在这种情况
浏览 6提问于2011-10-25得票数 7
回答已采纳
馈送Hadoop集群并使用该集群将数据馈送到Vertica/InfoBright数据仓库有什么意义？谢谢！
浏览 6提问于2011-11-25得票数 5
11回答
智慧城市是通过互联网无处不在的城市智能化传感器连接而形成的“物联网”，利用云计算，大数据技术对感知信息进行智能处理和分析，实现网络数字城市与物联网的融合，然而存在很多问题，那么物联网技术在智慧城市中应用的难点和疑点有哪些
浏览 1712提问于2018-04-12
在我们的大数据时代，您的IT基础架构可能会受到各种来源数据涌入的影响。最重要的是，客户要求“实时”查看他们的数据，没有任何延迟时间，因此您的服务器需要快速处理和显示数据。Kafka是一个分布式流媒体平台，使公司能够创建实时数据源。Uber，Twitter，Airbnb，Yelp以及今天财富500强公司中超过30％的公司都在使用它。例如，通过集成各种数据，如喜欢，页面点击，搜索，订单，购物车和库存，Kafka可以帮助实时将数据提供给预测分析引擎，以分析客户行为。
浏览 7160提问于2018-09-14
6回答
背景我怀疑很适合这样做，但根据的说法，它将花费我们每月1400多美元(这对我们来说是一件大事)：看一看像这样的东西，每个月的价格是3美元(如果我没有遗漏一些必要的东西)：即使没有模式的数据库更适合我们，我们也可以将我们的事件作为带有一些元数据的blob来存储。我们可以用BigQuery代
浏览 5提问于2015-12-23得票数 23
回答已采纳
首先，我没有学习英语数学，所以我可能在课文中使用错误的单词。C/C++数字中的存储在基2上。我们的头脑运行在基础10。many (a lot, actually) of float numbers with base 10, that are finite, have no exact finite representation in base 2, and vice-versa.当我们计算两个实际上是整数的浮点数时，就会出现一个问题。
浏览 5提问于2014-04-02得票数 2
如果编译器将高级语言转换成机器代码，为什么我们还需要汇编程序呢？有任何汇编语言，我们不能使用编译器吗？
浏览 0提问于2018-08-10得票数 6
回答已采纳
我听说星火有一个优势比hadoop，因为火花的内存计算。然而，一个明显的问题是，并非所有的数据都可以容纳到一个计算机的内存。星火也是如此，仅限于较小的数据集。同时，也有火花集群的概念。因此，我没有遵循所谓的火花相对于hadoop先生的优势。
浏览 10提问于2017-03-12得票数 0
回答已采纳
5回答
我已经开始学习Apache，这个框架给我留下了深刻的印象。尽管困扰我的一件事是，在所有星火演示文稿中，他们都谈到了Spark如何缓存RDDs，因此需要相同数据的多个操作比Map等其他方法更快。为什么要创建一个新的框架呢？
浏览 3提问于2014-07-11得票数 17
回答已采纳
我正在使用Google Data Flow来实现一个ETL数据仓库解决方案。而且看起来DataProc比DataFlow便宜一点。为什么谷歌同时提供这两种服务？
浏览 1提问于2017-09-27得票数 66
现在，我正在考虑利用会话变量(或缓存)来存储一些基于用户ID的数据，这样在用户连续重新加载页面的情况下，它将防止不必要的调用(当然，在某些情况下，数据需要实时更新)。
浏览 0提问于2020-02-05得票数 0
回答已采纳
19回答
支持和反对将代码放在存储过程中的理由是什么，目的是使代码更易于维护(即，更容易在不重新编译代码的情况下更改业务规则)？
浏览 25提问于2009-02-27得票数 14
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
