Grails 2.2.0 MySQL 5.5.x
我们应用程序的一部分需要一个数据仓库，我们希望使用MyISAM引擎将数据仓库放在它自己的数据库中。我们应用程序的事务部分仍然是InnoDB。为此，我们使用org.hibernate.dialect.MySQL5InnoDBDialect方言。
对于数据仓库DataSource，我们尝试使用org.hibernate.dialect.MySQLMyISAMDialect，也就是使用type=myisam的MySQL 4语法，而不是engine=myisam，我们使用的是MySQL5。
谁能告诉我这里获得正确方言的最佳选择是什么？
浏览 0提问于2013-05-31得票数 0
回答已采纳
1回答
我正在将SSIS解决方案转换为Hadoop，以便在数据仓库中进行ETL处理。
我的预期系统：
ETL -登陆和分期(Hadoop) -放置--数据->数据仓库(MySQL)
问题是:在转换阶段，我需要从hadoop端(pig或mapreduce作业)在MySQL中查找数据。有两种解决办法：
1：克隆所有表都需要从MySQL查找到Hadoop。这意味着我们需要维护两个地方的数据。
2：查询直接到MySQL。我担心MySQL服务器上会有很多连接。
解决这个问题的解决方案/最佳实践是什么？还有其他解决办法吗。
浏览 1提问于2013-10-04得票数 0
回答已采纳
我的网站由存储在php数据库中的用户加载的图片组成。我正在尝试做一个页面，在那里用户可以输入与他们的图像相关联的"image_id“，并在页面上显示一些统计数据(赢/输)。目前，我必须将image_id放入代码中以拉取图像。
下面是我用来从数据库中提取信息的代码
<?php
include('mysql.php');
$query="SELECT filename FROM images WHERE image_id = 449";
$result = @mysql_query($query);
while($row = mysql_fetch
浏览 1提问于2013-03-15得票数 0
我被要求学习“Oracle提供的创建数据仓库的工具”。我从理论上研究了基本的数据仓库概念、数据立方体、数据挖掘等，我也知道如何使用类似于Access的“经典”关系数据库构建基本数据仓库(好吧，假设MySQL.)
现在是时候把我的手放在更实用的东西上了所以..。
你能推荐几本书吗，可能是免费的？
Oracle是否为演示/教育目的提供免费工具来构建数据仓库？
浏览 5提问于2012-09-17得票数 0
回答已采纳
2回答
jdbc验证查询
、、
是否有一个库可以为jdbc驱动程序类确定要使用的适当验证查询？
例如，如果jdbc驱动程序是com.mysql.jdbc.Driver或com.mysql.jdbc.jdbc2.optional.MysqlXADataSource，库将知道验证查询是"SELECT 1“。
c3po
dbcp "validationQuery“
浏览 0提问于2011-02-12得票数 8
回答已采纳
2回答
我使用PHP和MySQL构建了一个典型的web应用程序，以供企业使用。
MySQL数据库是尽可能多的3NF。
但是，随着时间的推移，对数据的请求似乎更多地是针对数据仓库的，这样他们就可以以任何他们想要的方式分割和剪切数据。
因此，我拿起了一本书，第3版数据仓库工具包的金球集团。
在本文中，作者描述了一个Kimball DW/BI体系结构，并将星型模式用于DW/BI的维度和事实表。见下文。
📷
我的问题是，由于我最熟悉PHP和MySQL，我是否应该将数据仓库星型模式与原始的3NF数据库分开？
。
不会使用商业BI工具。任何看起来像OLAP或BI的东西都可能是一个开源软件，我可以自己来扩充。
请给
浏览 0提问于2015-01-31得票数 3
回答已采纳
1回答
我正在尝试使用“用MySQL实现多维数据仓库”这本书来理解数据仓库。在第二章中，我需要在MySQL中将数据插入到一个表中。
我正在尝试这段代码
TRUNCATE customer_stg;
LOAD DATA INFILE 'customer2.csv'
INTO TABLE customer_stg
FIELDS TERMINATED BY ','
OPTIONALLY ENCLOSED BY '"'
LINES TERMINATED BY '\r\n'
IGNORE 1 LINES(
customer_number,
浏览 2提问于2014-04-26得票数 0
我有一个使用sqlite的c#项目，我想知道在php中是否有类似mysql_insert_id方法的东西？
谢谢
浏览 0提问于2010-06-02得票数 0
回答已采纳
我正在尝试在Azure Synapse建立一个演示数据仓库。我希望从本地MySQL数据库中提取数据，转换和聚合一些数据，并将其存储在中的实际-/维度表中。
目前，我有一个Azure SQL数据仓库和数据工厂的实例。我在dataset中创建了到我的MySQL数据库的连接，我的想法是，我可以使用这个连接器作为一个新数据流的输入，它转换数据集并将其存储到我的目标数据集，该数据集链接到我的Azure Synapse数据仓库。
问题是，Database只是支持一些Azure服务，如Azure Database或Azure SQL数据库作为新数据流的源。
解决这个问题的最佳做法是什么？创建Azure SQ
浏览 2提问于2020-04-13得票数 1
回答已采纳
假设我有一个像BigQuery、RedShift这样的数据仓库。我存储适合联机分析处理(OLAP)的数据。类似地，假设我有一个数据库，比如MySQL或Microsoft SQL Server，其中有一些适合联机事务处理(OTLP)的数据。
查询数据仓库和数据库有哪些不同的参数？
浏览 2提问于2018-12-01得票数 0
当我检查mySQL服务器守护进程正在访问的文件数量时，我有一个mysql大小的数据仓库，几乎是1.4TB，我很惊讶。
cmd用户: lsof \ grep mysql cnd2使用: lsof \ grep mysql \ wc -l 2598请建议这是如何reduced.What对mysql性能的影响相同的。
浏览 0提问于2014-09-23得票数 0
2回答
我是一个数据库新手，第一次探索数据仓库。我已经完成了将大量数据从我们的生产系统(MySQL 2012)复制到数据仓库(MySQL)的过程。
我遇到的问题是，用于ETL进程的软件/硬件资源不够健壮，无法使用单个查询复制较大表中的所有数据(程序将耗尽内存和崩溃)。为了解决这个问题，我使用表id上的模运算符添加了一个where子句，将这些表分解成12个块，因为这样写起来既快又容易：
SELECT * FROM table WHERE table.tableID % 12 = 0;
SELECT * FROM table WHERE table.tableID % 12 = 1;
SELECT * F
浏览 0提问于2018-07-05得票数 3
回答已采纳
我运行了一个Spring Boot应用程序，用于将我想要使用联机分析处理分析的数据填充到MySQL数据库中。我选择了Pentaho Data Integration、Schema Workbench和Business Intelligence Server (CE版本)来创建我的数据仓库。在ETL过程中，我只是用我的Spring Boot应用程序生成的数据填充我的数据仓库。在BI-Server中，我使用Saiku插件来进行所有的OLAP操作，它都工作得很好。
然而，我想把所有这些都公开。在哪里可以使用数据库(最好是MySQL)和BI服务器部署我的应用程序？
我已经调查了Heroku，它似乎使用
浏览 19提问于2017-07-06得票数 0
2回答
我得为旅行社建立数据仓库。我第一次这么做。我已经学习了关于星空、雪花和星座模式的所有基础知识，以及创建数据仓库的所有基础知识。我想问一下，有什么可以改变更好，如果这个设计是好的整体。
以下是我的维度层次结构：
下面是我目前所取得的成就(在MySQL工作台中创建模式)：
浏览 4提问于2017-04-02得票数 0
回答已采纳
2回答
哪个数据库引擎最适合处理数组值？
、、、、
常见的用例是将标签列表存储到一个项目标签中: 123,233，...，结果应该是可查询的，就像“获取带有标签233的所有行”一样。
似乎在mysql中最受欢迎的方法是使用另一个表并进行连接。然而，考虑到现在有这么多其他的数据库/搜索引擎，例如弹性搜索，mongodb，postgresql，我想知道这些新数据库中是否有内置支持这种结构的。我不是简单地谈论完成工作的能力，而是针对这种查询进行优化的数据库体系结构。
浏览 0提问于2013-10-31得票数 0
我正在为我们的数据仓库和资源探索德鲁伊，我们有activemq，mysql和一些apis。我可以很容易地连接到本地文件和kafka，但我如何在德鲁伊中连接activemq，mysql和apis。我可以在druid中为特定的时间和频率安排数据提取任务吗？
浏览 3提问于2019-04-03得票数 0
我有一个用于简单报表解决方案的access数据库，它通过ODBC链接从远程数据库中提取数据。数据仓库提供程序最近向其所有表添加了一个新的数据字段，该字段的格式为'BIGINT‘
Access现在将所有记录显示为已删除，因为它无法处理BIGINT链接表。
由于数据仓库不会更改它们的表，有没有什么方法可以让MS-Access正确显示，并忽略表链接中的'BIGINT‘字段？
此时此刻，我不得不通过将减去这一列的整个数据仓库复制到MYSQL DB中来解决这个问题，这并不理想……
我无论如何也解决不了这个问题。
浏览 2提问于2014-04-29得票数 1
1回答
我本质上是在创建一个数据仓库。为了使仓库与源数据保持一致，我必须每天从源mysql数据库中提取更改。我的问题是，在一些源mysql表中，没有'lastupdated‘等效列。
在这种情况下，我如何拉取更改？
浏览 1提问于2018-03-12得票数 0
我正在计划从AWS MySQL实例到GCP BigQuery的数据迁移。我不想迁移每个MySQL数据库，因为最后我想使用BigQuery创建一个数据仓库。 将AWS MySQL DB作为csv/json/avro导出到S3存储桶，然后传输到GCP存储桶是一个好的选择吗？此数据管道的最佳实践是什么？
浏览 37提问于2019-03-10得票数 0
回答已采纳
在Server 2000和2005年的日子里，查询中的最大表数为256.。
MySQL有类似的限制吗？
我知道这样大的查询意味着数据库设计有问题，或者应该使用某种数据仓库解决方案，但是让我们暂时忘记这一点，关注MySQL的理论能力。
浏览 0提问于2011-01-04得票数 7
回答已采纳
1回答
优化只读Mysql从站
、、、、
我在我的一个三角洲装载项目上遇到了麻烦:)
上下文：，我的基于Postgres的数据仓库，每天都在从基于Mysql的webshop中提取数据。我们为此设置了一个只读奴隶，我认为这是信息技术给我的最大支持(不会对主人做任何事来帮助我)。
情况：I将最近创建或更新的行从MySQL提取到Postgres。大概每15-30分钟一次。因此，我的数据仓库中的延迟大约是进程结束时30分钟的最大值。对于每个需要的表，只要有一个简单的日期条件，快速循环就足够了。
问题： webshop DB很大，处理每个表需要一段时间(每个表最多1分钟，日期没有索引，也没有分区)，这损害了整个项目.
问题：我可以优化这个只读的
浏览 1提问于2016-01-25得票数 0
回答已采纳
我们计划转向amazon-redshift对于我们的数据仓库解决方案，我们需要建立一个从mysql到redshift的增量管道，它还可以处理更新，什么是最有效的方法来做到这一点？
浏览 4提问于2014-12-18得票数 3
我正在考虑DWH服务器布局，我想问您是否能够发现这种布局的任何缺点。其基本思想是拥有临时区域&数据仓库DBs和ETL工具，用于在一台机器上运行从stg到dwh的转换，因为它降低了硬件成本，减少了管理工作：
sda: 512 GB SDD -> OS (Centos 7)、应用程序、交换空间、MySQL数据库应用程序(但没有数据)、来自数据源的MySQL文件、ETL (五旬节)
sdb: 960 GB SDD -> MySQL表空间用于暂存区域表
sdc: 960 GB -> MySQL表空间用于数据仓库表
sdd: 4 TB ->备份存档磁盘
内存: 160 G
浏览 0提问于2018-01-07得票数 0
回答已采纳
2回答
这是我当前获取所有用户的函数：
function get_all() {
return $this->db->get($this->tableName)->result();
}
现在，我有一个函数可以将mysql日期时间更改为“时间之前”。
timespan(human_to_unix($datetime),time());
在将get_all生成的数组传递给控制器和视图之前，如何更改该数组中的所有mysql日期时间？
其次，在模型中这样做是正确的，还是应该在控制器中这样做？
浏览 0提问于2012-03-21得票数 1
回答已采纳
1回答
我正在使用azure数据工厂从MySQL服务器复制数据作为源。数据很大。当我设置管道并执行它时：
MySQL: Timeout expired. The timeout period elapsed prior to completion of the operation or the server is not responding.
我认为这可以用解决。如何使用MySQL作为源将此配置添加到数据工厂管道中？
更新：我使用一个普通脚本将数据从MySQL复制到MySQL数据仓库。MySQL查询是简单的选择：select * from mytable;完全错误：
复制活动在源端遇到用户错误:
浏览 2提问于2017-09-20得票数 0
我想从一个数据仓库摄取数据到卡夫卡，然后我想把阿夫罗记录存储到mySQL RDMS中。我想消除动物园管理员的依赖。不使用动物园管理员就能做到这一点吗？
浏览 17提问于2022-08-17得票数 0
1回答
协调复杂的数据迁移过程
、、、、
我参与的一个项目的范围发生了变化，在我开始尝试想出一些本土的解决方案之前，我想知道是否有什么东西--比如某个框架--可以让我不必设计和调试自己的代码。让我尽量简单地解释这些细节。
原始项目
这是一个数据迁移项目，一个ETL。最初，有多个源数据库、多个ETL引擎(允许故障转移)和一个数据仓库数据库。数据仓库将使来自单个数据源的数据保持清晰，并且它将在幕后被复制:这意味着，我的ETL只需担心将数据写入1数据仓库。我对此有个计划。
项目的变更
现在，客户担心将单个源数据混合到单个数据仓库中。他们想要单独的数据仓库。这将是足够简单的，但事实上，他们仍然希望ETL引擎按照原来的协议工作。让我解释一下。
浏览 0提问于2014-10-04得票数 0
1回答
我正在配置一个在MySQL8上运行CentOS7的新unix框。这个盒子是hyperV上的专用数据库服务器，16 CPU的64 Gb内存，2Tb的SSD空间。我的配置文件如下所示。服务器主要用于生产OLAP处理。我的问题是：
my.cnf配置文件中有什么突出的问题吗？
与我的服务器上的MySQL8默认fsync相比，使用MySQL8的Sysbench性能要差得多(与我在这个论坛上一直阅读的内容相反)。这是CentOS7的具体问题吗？在基准测试过程中，有没有其他人遇到过类似的性能下降？
- My.Cnf --
[client]
#########Connect to 3306
port=330
浏览 0提问于2018-07-19得票数 1
回答已采纳
2回答
我想在MySQL数据仓库中处理日期维度。(我是DW世界的新手)
我用谷歌做了一些搜索，看到了很多表结构(大部分) date维度，其中主键是一个简单的UNSIGNED INTEGER。
既然MySQL是3字节而INTEGER是4字节，为什么不使用DATE字段作为主键呢
例如：
CREATE TABLE dimDate
id INTEGER UNSIGNED NOT NULL PRIMARY AUTOI_NCREMENT,
date DATE NOT NULL,
dayOfWeek
...
VS
CREATE TABLE dimDate
date DATE NOT NULL PRIMARY,
da
浏览 1提问于2011-12-07得票数 13
回答已采纳
2回答
我试着用jinja模板来显示数字的平均值，但我无法拼凑出来。
我正在从Google应用引擎数据存储实体'Score‘中获取'points’列的值。
使用python代码，并将其放在jinja模板中，我想通过这个模板来计算点的平均值并显示。
{% for num in number%}
{{num.points}}
{% endfor %}
浏览 1提问于2014-11-30得票数 2
回答已采纳
我一直在寻找一种方法来防止MySQL delete语句被从服务器处理，我正在从事数据仓库项目，我想在将数据复制到从服务器之后从生产服务器中删除数据。
完成这项工作的最好方法是什么？
谢谢
浏览 0提问于2013-03-13得票数 6
回答已采纳
2回答
我已经使用编写了ETL流程。它执行从操作数据源(Windows上的MS SQL )到数据仓库(Ubuntu上的MySQL)的数据传输。
我想安排每天执行水壶作业(其他)来填充维度表和事实表，以便让我的数据实际并准备好进行分析和报告。
如何安排执行水壶作业？
浏览 18提问于2016-08-17得票数 2
回答已采纳
1回答
我正在启动我的数据仓库，我正在使用Pentaho数据集成，Mondrian和Pentaho bi服务器。数据库是MySQL，但我已经尝试过PostgreSQL。但是我的仪表盘的性能非常低。不幸的是，我不能增加我的体力资源。我以前想过加载缓存(precache)，但我不知道这是否是最好的解决方案。谢谢
浏览 2提问于2014-12-18得票数 0
我正在使用ZK框架、Hibernate、Spring和Mysql进行一个项目。
我需要从Mysql数据库生成一些图表，但在计算了计算这些图表的值所需的对象数量之后，我发现它有1400多个对象，以及相同数量的查询和事务。
因此，我想如果使用Mysql中的存储过程来计算这些值并将它们保存在一个单独的表中(使用靠近数据仓库的体系结构)，然后使用我的web应用程序来读取这些表的值并将它们显示为图表。
我想知道在速度和性能方面，哪种方法更好？
谢谢你
浏览 1提问于2014-06-18得票数 2
回答已采纳
1回答
我有许多CSV文件需要导入我的数据仓库。由于csv文件的列可能每天都会更改，因此我决定删除旧表，每天为每个CSV文件创建一个新表。我更喜欢使用Talend jobs来做这件事。如果有人告诉我如何使用Talend job在MySQL中删除表或创建新表，我将不胜感激？
浏览 21提问于2017-07-27得票数 0
回答已采纳
我看过所有关于datawarehouse和olap.....however的文章，我对此有一些疑问
我已经使用mysql创建了一个数据仓库，我还创建了一个API，其中包含了用于从datawarehouse查询的即席查询，那么这个API是否被认为是ROLAP呢？
是否有可能创建自己的OLAP？如果是，怎么做？
浏览 0提问于2015-02-24得票数 2
回答已采纳
我开始研究mysql c++连接器API。但是我找不到任何关于API的在线文档，我只能找到示例。是否有任何链接(或使用doxygen的隐藏方式)来生成文档？
浏览 2提问于2011-03-15得票数 16
回答已采纳
我们有一个数据仓库应用程序，我们计划将其转换为Hadoop。
目前，我们每天收到20个feeds，并将这些数据加载到MySQL数据库中。
随着数据变得越来越大，我们计划迁移到Hadoop以加快查询处理速度。
作为第一步，我们计划每天将数据加载到HIVE中，而不是MySQL。
问题：-1.我是否可以将Hadoop转换为类似DWH应用程序，以便每天处理文件?2.当我在Master Node中加载数据时，它是否会自动同步？
浏览 0提问于2016-01-06得票数 0
2回答
似乎可以删除在MySQL 5.5中为外键创建的索引，只需使用一个小“技巧”，如下所示：
mysql > create table commands (
id int primary key auto_increment, name varchar(255));
mysql > create table data (
dim_command int, cnt int NOT NULL,
CONSTRAINT FOREIGN KEY (dim_command) references commands(id));
现在创建了一个不能删除的索引：
m
浏览 4提问于2017-11-02得票数 4
回答已采纳
1回答
我正在使用默认数据库.Now在hadoop上成功地运行Hive，我希望通过mysql连接Hive(mysql安装在端口3306上)。
步骤： 1)创建hive-site.xml并粘贴属性
<property>
<name>hive.metastore.local</name>
<value>true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<
浏览 3提问于2013-07-02得票数 3
1回答
我正在构建一个需要定期向服务器端文本文件追加行的应用程序。到目前为止，我想出的最好的方法是使用Dropbox API，用户必须下载文本文件，更新它，然后上传它-显然这并不理想。做这样的事情最好的(免费的)方式是什么？我想要一个不需要亲自托管服务器，但可以使用一些第三方云(如Dropbox)的解决方案。
浏览 3提问于2013-05-13得票数 0
回答已采纳
1回答
我们正在执行一个DMS任务CDC，它正在从RDS Mysql复制到Redshift。我们面临的问题是，一些记录被插入目标红移多次作为复制，即使我们有一个主键。在AWS DMS上运行CDC任务并作为目标红移时，是否存在避免重复行的最佳实践？
(我们设置了主键和外键，但是仍然会发生重复)。
浏览 11提问于2022-01-13得票数 0
我们搜索一个快速且可扩展的分析数据库，以便托管在Amazon中，查询如下
“按值从表组中选择值，计数(*)”
我们测试了很多分析和数据仓库解决方案，但是我们没有找到我们需要的解决方案：
有大约50兆记录的桌子都要慢下来。
经测试：
红移
MySQL、甲骨文、Postgres
杂波
浏览 3提问于2013-12-15得票数 0
在我的Grails项目中，当应用程序第一次运行时，我需要在db中添加一些表。在DataSource文件中，我将dbCreate的值设置为"create"，这样就创建了链接到域类的表。我还需要添加一些没有在域类中定义的其他表。例如，我需要一张包含世界上所有国家的表格。
有没有一种方法可以在不手动添加数据的情况下创建包含数据的表，或者通过在数据库中导入(使用phpmyadmin)？
浏览 0提问于2014-12-05得票数 0
1回答
我有一个带有以/Plan/Production开头的网址的页面。我使用的是URL，当我单击某个链接时，它会将HTML5的开头更改为/Plan/Selling。这在点击链接和使用前进/后退按钮时效果很好，但是当我在网址开始变为/Plan/Selling后刷新页面时，它不再加载布局。我的解决方案是编辑我的_ViewStart.cshtml文件以检查URL的开头，并基于此呈现一个布局，如下面的代码片段所示。
问题是，如果我的网址以/Plan/Selling开头，它甚至不会使用_ViewStart.cshtml文件。只有当URL以/Plan/Production开头时，它才使用此文件。添加consol
浏览 4提问于2016-02-17得票数 0
在我的教科书中，它说数据仓库中的数据只在一段时间内有效，换句话说，它被认为是时间依赖的，但是根据数据仓库的四个特点，非易失性说一旦数据被输入到数据仓库中，就不能不惜任何代价改变它。
那么，数据仓库还有什么其他的属性来讨论数据仓库是时间依赖的呢？
浏览 4提问于2017-04-22得票数 1
回答已采纳
1回答
我有一个带有一些数据的蔚蓝数据仓库。我需要在SQL数据库上进行一些性能测试，测试内容与数据仓库中的内容相同。
可以从数据仓库创建备份并使用它创建SQL server数据库吗？我怎样才能做到这一点？我没能在文档中找到任何东西。有一些方法可以从数据库迁移到数据仓库。在门户中，我可以看到将数据仓库还原到另一个数据仓库的选项。
浏览 0提问于2020-11-20得票数 0
回答已采纳
我们有一个用于MySQL数据仓库数据库的Amazon小实例。不久，数据库大小将在400-500 GB左右。备份数据库的最佳方法是什么？
可以用RDS提供的自动备份和DB快照有效地完成吗？
还是我们应该考虑其他的选择？那会是什么？使用EC2，托管在其他云中，还是使用任何其他数据库？
浏览 0提问于2013-03-06得票数 4
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
腾讯云开发者
