mysql批量赋值
基础概念
MySQL 批量赋值是指在一次数据库操作中，对多条记录的多个字段进行同时赋值。这种操作可以显著提高数据处理的效率，尤其是在需要更新大量数据时。
相关优势
- 效率提升：相比于逐条记录进行更新，批量赋值可以减少数据库的 I/O 操作次数，从而提高整体性能。
- 减少网络开销：批量操作减少了网络传输的数据量，降低了网络延迟。
- 简化代码：通过一次操作完成多个字段的赋值，简化了代码逻辑。
类型
- 使用
INSERT INTO ... ON DUPLICATE KEY UPDATE： 这种方式适用于需要插入新记录，如果记录已存在则更新的情况。 - 使用
INSERT INTO ... ON DUPLICATE KEY UPDATE： 这种方式适用于需要插入新记录，如果记录已存在则更新的情况。 - 使用
UPDATE语句： 这种方式适用于需要更新现有记录的情况。 - 使用
UPDATE语句： 这种方式适用于需要更新现有记录的情况。
应用场景
- 数据导入：在导入大量数据时，可以使用批量赋值来提高导入速度。
- 数据同步：在多个系统之间同步数据时，批量赋值可以减少数据传输的时间和开销。
- 批量更新：在需要同时更新多个字段的场景中，批量赋值可以简化代码并提高效率。
常见问题及解决方法
问题：批量赋值时遇到 Duplicate entry 错误
原因：当使用 INSERT INTO ... ON DUPLICATE KEY UPDATE 时，如果插入的数据与现有数据冲突（例如主键或唯一键重复），会触发此错误。
解决方法：
- 确保插入的数据不违反唯一性约束。
- 使用
ON DUPLICATE KEY UPDATE语句来处理冲突情况。 - 使用
ON DUPLICATE KEY UPDATE语句来处理冲突情况。
问题：批量赋值时性能不佳
原因：可能是由于数据量过大、索引不合理或数据库配置不当等原因导致的。
解决方法：
- 优化索引：确保表的索引设计合理，避免全表扫描。
- 分批处理：将大数据量分成多个小批次进行处理，减少单次操作的数据量。
- 调整数据库配置：根据实际情况调整数据库的配置参数，如缓冲区大小、连接数等。
参考链接
通过以上内容，您可以全面了解 MySQL 批量赋值的基础概念、优势、类型、应用场景以及常见问题的解决方法。
相关·内容
据我所知(如果我错了，请纠正我)，backpack只处理$fillable字段。整个$guarded不就是$fillable和laravel之间的分离吗？
MWE：
在User.php中：
class User extends Authenticatable {
protected $guarded = ['password'];
}
在UserCrudController.php中：
public function update(UpdateRequest $request)
{
$this->handlePasswordInput($request);
浏览 2提问于2018-01-10得票数 1
我已经绞尽脑汁几个小时了，试图找出这几行代码的问题： ContentSetting::updateOrCreate(
['content_id' => $this->id, 'key' => 'max_width'],
['value' => $value]
); 它应该检查我的content_settings表中是否有一行具有特定的内容id和键"max_width“，如果有，则更新它，如果没有，则创建它。它被用在模型赋值器中，因此被称为$this。
浏览 26提问于2020-10-15得票数 1
回答已采纳
我需要上传csv并将此数据导入到MySQL表中。
public function insertData()
{
while (($column = fgetcsv($file, 10000, ",")) !== FALSE) {
$query = "INSERT into deleted_users (email)
values ('" . $column[0] . "'); $query->execute()
浏览 1提问于2018-11-25得票数 0
我使用这个教程将我的项目从Rails3升级到Rails4：
我有一个模型：
class Test < ActiveRecord::Base
validates :content, :presence => true, :length => { :minimum => 2 }
validates :name, :presence => true, :length => { :minimum => 2 }
validates :value, :presence => true
end
升级后，我尝试在
浏览 3提问于2013-07-07得票数 2
我在我的一个模型中有一个datatime属性taken_at，它将记录测试的时间。我试着用下面这一行来验证这个字段是否总是出现在我的模型中：
validates :taken_at, :presence => true
在我的rspec测试中，我用下面的测试验证了这个规则：
before (:each) do
@user = Factory(:user)
@attr = { :taken_at => DateTime.now }
end
it "should create a new profile given valid attributes" do
浏览 0提问于2011-03-22得票数 0
回答已采纳
我正在尝试添加一个字段的产品上狂欢，这只是一个复选框，这只是为了标记产品，如果他们是出售或他们是内部产品。
我已经添加了迁移，并且最终知道了如何在表单上添加复选框，但是当我单击更新时，我得到的是Can't mass-assign protected attributes: for_sale
这就是迁移
class AddProductForSaleField < ActiveRecord::Migration
def up
add_column :spree_products, :for_sale, :boolean
end
def down
remo
浏览 0提问于2012-05-30得票数 0
回答已采纳
1回答
在一个新的rails项目中，质量分配在生产中没有设置为严格的原因是什么，而在开发和测试中设置为严格的原因是什么？
浏览 0提问于2012-11-07得票数 2
回答已采纳
1回答
我听说有几个人抱怨并发布了关于Rails中的批量分配的问题。我收到了几次相同的错误，我所做的一切都是attr_accessible。但是，什么是批量分配呢？有没有人能举例说明一下？
浏览 37提问于2012-08-04得票数 22
回答已采纳
1回答
数组文件作为数组保存在数据库中..此数组中的每一项都应呈现为fields_for中的text_fields。(在我的带有Postgres DB的Rails 4应用中)
它并没有按照预期呈现...请期待您的建议。
守则内容如下：
资源迁移有：
t.string :news_outlets, array: true
父帖子的_form.html
<%= form_for [@post, @post.declare_victory], :html => {} do |f| %>
<%= f.hidden_field :post_id, value: @post.id %&
浏览 3提问于2013-08-31得票数 4
我在Rails3上，我有两个模型，用户和帖子。用户将帖子作为嵌套属性。当我尝试保存用户，然后我得到无法批量分配受保护的属性：.....
浏览 3提问于2013-06-06得票数 0
回答已采纳
我希望自己有一个更系统的解决方案，以避免大规模分配。
一种典型的情况是从参数中删除id或user_id (通过表单自动提交)，并在内部用current_user.id替换(在MyController#create中)。
我能想到的一个解决方案是从params hash创建对象，然后创建update_attributes (父对象和子对象)，用内部值替换敏感属性：
@user = User.create(:params[:user])
@user.update_attributes(:id => current_user.id)
@user.profile.update_attribute
浏览 2提问于2012-01-09得票数 0
我在这里错过了什么。我有一个有一堆变量的模型：
class Car extends CFormModel
{
public $item1;
public $item2;
}
如果我使用item1 = "one“和item2 = "two”发布表单，并在控制器中执行以下操作：
if(isset($_POST['Car']))
{
$model->attributes = $_POST['Car'];
if($model->validate()) {
print_r($model);
浏览 0提问于2013-04-26得票数 1
回答已采纳
Rails3.1中处理attr_accessor的部分明显被破坏了。
我有几个模型根本没有数据库，还有一些模型的属性没有持久化。
示例：
class User < ActiveRecord::Base
#persisted attribs
attr_accessible :name, :email, :password, :password_confirmation, :is_admin, :permissions
#non persisted attribs<br />
attr_accessor :roseburg, :kfc, :kcpl
...
浏览 0提问于2012-09-07得票数 1
这本书真的很吸引我。我在我的用户模型中有这样的验证：
validates :first_class, :presence => true, :inclusion => %w(Fighter Ranger Magician)
现在，我尝试在我的控制台中创建一个示例：
ruby-1.9.2-p180 :053 > new = User.create(:first_class => 'Magician')
=> #<User id: nil, ...
ruby-1.9.2-p180 :054 > new.errors
=> {:fi
浏览 0提问于2011-05-30得票数 0
回答已采纳
Rails中attr_accessible的对立面是什么？
我只想写那些我想阻塞的属性，而不是写每个单独的属性。
浏览 1提问于2011-10-01得票数 1
回答已采纳
2回答
我在一个表中有大约200个字段，它们是编号的：
field_1
field_2
etc
我尝试在表中插入数据：
Result::insert($data);
其中$data是多个数组：
$data = [] = array("field_1" => 3);
$data = [] = array("field_1" => 2);
是否可以在选项protected $fillable = ["*"];中设置*以使所有字段都可填写？
浏览 0提问于2016-12-04得票数 25
回答已采纳
我是cakephp的新手。对于像我这样的初学者来说，和的文档要么太简短，要么太高级。
据我所知，我做了以下工作。
//Table Baskets belongsToMany Apples
//At BasketsTable.php in initialize()
$this->belongsToMany('Apples',[
'joinTable' => 'apples_baskets'
]);
MySQL中的连接表apples_baskets：
+---+---------+---------
浏览 1提问于2015-08-20得票数 2
1回答
public function index()
{
//
$users = \App\User::with(['roles','profile'])->get();
return view('dashboard.users.index',compact('users'));
}
/**
* Show the form for creating a new resource.
*
* @return \Illuminate\Http\Response
*/
public function cr
浏览 18提问于2020-02-16得票数 0
1回答
我需要从WX2数据库中选择一些数据，并将其放入MYSQL DB中。有人能在这方面帮我吗？mysql数据库要连接到WX2数据库，ODBC.ini配置是否有效？
谢谢
浏览 4提问于2014-09-18得票数 0
是否有可能在Kibana Dev中变异两个字段。工具/控制台，即纬度，使用已从MySQL导入的现有索引和字段，将经度转换为geo_point类型的字段。
我们的想法不是从MySQL重新导入所有数据并通过Logstash。
浏览 1提问于2017-10-12得票数 0
我有一个库(mylib.rb)，我在其中定义了一些类和方法。它对控制器和视图是可用的(我已经验证过了)。
在mylib.rb中，我有：
def admins_filled (params)
if params[:admin_selections]
return TRUE
end
end
def return_admins_json (params)
admins_list = Array.new
params[:admin_selection].each do |admin_id|
admins_list << admin_id
end
r
浏览 2提问于2012-07-06得票数 2
回答已采纳
简单，快速，提问。
如何通过view/javascript将散列或关联数组传递给rails控制器。在contoller中，我想在ActiveRecord的新方法中使用hash对象
像这样的东西
hash = {}
hash = params[data]
Task.new(hash)
我可以传递和读取单个字段，但我正在寻找更好的方法。Thnx。
浏览 1提问于2012-03-16得票数 1
回答已采纳
我有一个check_box_tag，它返回一个我似乎不允许的权限对象。我已经检查了StackOverflow，并尝试了一些东西，但由于我对编码和参数是新的，所以我无法让它工作。 参数如下所示："product_builder_permissions"=>[{"1"=>["1"], "2"=>["1"], "6"=>["42", "59"]}] 其中嵌套散列的键是产品构建器的id和数组中的值，即那些构建器可以访问的对象id。 如果我稍微改变我的
浏览 13提问于2019-09-11得票数 1
您好，我正在使用以下脚本将数据从mysql迁移到redshift。
mysql_table_name = 'clabDevelopment.KPI_kpireport'
mysql_cur = mysql_conn.cursor()
mysql_cur.execute('select * from %s where Date = "2018-01-01";' % mysql_table_name )
description = mysql_cur.description
rows = mysql_cur.fetchall()
# Insert
浏览 29提问于2018-06-29得票数 1
我使用的是vestal_versions 1.0.2和rails 2.3.8
我正在尝试将用户与文档中所示的模型更改相关联：
@user.update_attributes(:last_name => "Jobs", :updated_by => "Tyler")
@user.versions.last.user # => "Tyler"
文档：
在调用@user.save之后，用户"Tyler“没有保存在vestal_versions使用的versions表中。
有没有人看过这个？这是一个bug吗？
浏览 3提问于2010-07-08得票数 2
2回答
我有一个表单，允许用户更新他们的个人资料信息，但我想防止某些信息被更改。我也想让我的控制器代码非常简单。在我的Users Controller的update操作中，我有以下代码：
def update
@user = Users.find params[:id]
if @user.update_attributes(params[:user])
flash[:notice] = 'Update successful.'
redirect_to user_path(@user)
else
render :action => :edit
浏览 8提问于2012-01-25得票数 2
回答已采纳
我正在制作一个游戏，并有一个游戏模型和用户模型。
游戏模型如下所示：
class Game < ActiveRecord::Base
belongs_to :first_user, :class_name => 'User', :foreign_key =>'first_user_id'
belongs_to :second_user, :class_name => 'User', :foreign_key =>'second_user_id'
validates_presence_of
浏览 2提问于2012-06-20得票数 1
回答已采纳
我正在尝试创建一个表单，可以同时创建游戏和game_players。我遇到的问题是，当我提交表单时，游戏被创建了，但game_players却没有。
我环顾了四周，但没有找到任何有用的答案。
博弈模型
class Game < ActiveRecord::Base
belongs_to :league
has_many :game_players, :dependent => :destroy
accepts_nested_attributes_for :game_players
attr_accessible :league_id, :game_date
浏览 0提问于2012-02-23得票数 1
回答已采纳
1回答
我无法在一个专栏中创建一个雄辩的模型。可以编辑现有条目。不会将任何内容记录到laravel.log或php.log。由于其他30个型号运行良好，我不知道这里有什么问题。
我已经试着删除了
use Userstamps, SoftDeletes, Billable;
谢谢
<?php
namespace App;
use App\Traits\Userstamps;
use Illuminate\Database\Eloquent\Model;
use Illuminate\Database\Eloquent\SoftDeletes;
use Laravel\Cashier\Billa
浏览 3提问于2018-06-06得票数 0
1回答
我在一个Rails3应用程序中使用Devise，我成功地对它进行了配置，使其使用用户名作为身份验证方法，而不是电子邮件。问题是，在devise的默认注册控制器中，它对传入的参数调用"update_with_password“方法，这实际上允许用户更改他们的用户名和密码。如果您使用电子邮件作为身份验证方法，则此行为是有意义的，因为期望人们能够更改他们的电子邮件是合理的。然而，对于使用用户名，我不希望用户能够更改它们；我只希望他们能够更改他们的密码。要做到这一点，最好的方法是覆盖RegistrationsController，并防止大量分配参数，以便只能更改密码吗？
希望这一点是清楚的。谢
浏览 0提问于2010-09-28得票数 2
回答已采纳
我有一个如下的类：
class Player < ActiveRecord::Base
attr_accessor :name, :rating, :team_name
end
所以我运行了'bundle exec rails console‘，然后
Player.create(:name => "Ben", :rating => 5, :team_name => "Brown")
然而，这是我得到的结果：
(0.1ms) begin transaction
SQL (7.0ms) INSERT INTO &
浏览 2提问于2014-03-29得票数 0
我们刚刚从4.0.1升级到rails 4.1.13。我们在实现强参数方面拖拖拉拉。因此，我们仍然使用protected_attributes gem，所以我们可以使用旧的行为。
现在，我们得到了一个ActiveModel::ForbiddenAttributesError。我不明白为什么，因为我们使用的是protected_attributes gem..
浏览 0提问于2015-11-09得票数 1
我是rails的新手，正在构建我的第一个“真正的”应用程序，并努力理解如何让关系正常工作。
我有一个测验模型和一个图标模型。每个测验belongs_to一个图标，一个图标has_many测验。(将图标视为一个类别)。
在我的“新建/编辑”测验表单上，我想要一个选择框来选择正确的图标。目前我有..。
<%= collection_select(:quiz, :icon_id, Icon.all, :id, :title, :prompt => true) %>
在我的测验控制器中创建动作我有...
def create
@icon = Icon.find(params[:
浏览 0提问于2012-07-17得票数 0
回答已采纳
我有一个网站，人们可以在那里发表评论，每个评论都有一个类别，他们可以从一个下拉菜单中选择。在我的评论模式中，我有
belongs_to :category
我在评论表中有一个category_id。
当用户在参数中提交评论时，我得到参数:comment= {"locale"=>"en"，"body"=>"fds"，"category_id“=>2，"from_identifier"=>2130706433，"from_type"=>"ip"，&#
浏览 1提问于2011-08-27得票数 1
回答已采纳
我知道这违反了ruby on rails的约定，但是我的这个表的id不需要自动递增，我通过逻辑来设置它。但是，它不会保存到数据库中。要保存的所有内容都将保存为id的null。
def self.up
create_table :probes, :id => false do |t|
t.string :id
t.string :name
t.integer :user_id
t.boolean :online
t.timestamps
end
end
<% form_for @probe do |f| %>
<%= f.error_messag
浏览 2提问于2009-08-11得票数 4
回答已采纳
我已经成功地使用Devise和OmniAuth (内置于Devise)实现了Facebook的登录。现在，我需要弄清楚如何将用户名存储在数据库中，这样我就可以向其他用户显示他们的姓名，让他们看到他们在我的应用程序中创建/编辑了记录。
我一定是从某个地方复制了这段代码，看起来它应该可以工作，但它肯定没有将名称保存在数据库中：
class Users::OmniauthCallbacksController < Devise::OmniauthCallbacksController
def facebook
@user = User.find_for_facebook_oau
浏览 0提问于2011-07-28得票数 3
回答已采纳
1回答
我正在尝试在我的rails应用程序中实现条纹支付。我基本上按照errors广播中的教程进行了定制，但我似乎遇到了与stripe_card_token相关的大量赋值错误。你知道为什么会发生这种情况吗？
这是我的一堆代码
浏览 1提问于2012-07-03得票数 0
我只是对Ruby on Rails和模型(Rails3)中的attr_accessible属性有一个一般性的问题。有人能解释一下应该在那里定义哪些模型属性吗？我记得一些关于大规模任务的风险，尽管我在这方面不是很了解……谢谢:)
浏览 0提问于2011-08-25得票数 5
回答已采纳
3回答
针对批量分配进行测试
、、、
也许这不是需要测试的东西，但我正在学习，所以我不认为测试到最大值是错误的。
我有几个测试，除了一个之外，所有测试都能产生预期的结果。我找到了一种绕过它的方法，但我想知道正确的方法是什么。
当我在rails控制台中测试保存时，它没有保存params散列中的admin字段，这是我所期望的。当我使用工厂构建然后保存它时，验证相应地通过/失败。当我测试针对批量分配的保护时，测试失败(因为它会设置admin字段，而我预计它不会设置)。
有什么想法、建议或顾虑吗？
谢谢
型号：
class User ...
#id, name, email, admin(int)
attr_accesible :
浏览 0提问于2011-05-05得票数 5
1回答
当我尝试在数据库中创建数据时，我遇到了以下错误: 2014-09-27 09:02:40在E:\Web\xampp\htdocs\laravel\bootstrap\compiled.php:6397中production.ERROR: exception name和消息'name‘
在new.blade.php文件中：
@extends('layouts.default')
@section('content')
<h1>New Author page</h1>
{{ Form::open(arra
浏览 2提问于2014-09-27得票数 0
在加载数据列表时，Rails3.1 (RC4)和作用域质量赋值如何期望我们使用seeds.rb。
例如。我通常有这样的东西：
City.create([
{ :name => 'Chicago' },
{ :name => 'Copenhagen' },
...
])
创造了超过100+的城市。这不再起作用，因为城市模型有一个范围内的批量分配:as => :admin。
据我所知，.create()方法不允许我们抛出:as => :admin。只有.new()和.update_attributes()允许我们用:as =
浏览 1提问于2011-06-22得票数 4
回答已采纳
我知道当状态改变时，组件会重新呈现。但在下面的代码中：
<ColorPicker
onColorSelected={color => this.color = color}
style={{ width: width / 2, height: 200 }}
/>
<View style={{ width: width / 2, height: 200, justifyContent: 'center' }}>
<AnimatedText style={{ fontSize: 25, fon
浏览 0提问于2020-02-17得票数 0
3回答
rails中的嵌套模型创建
、、、、
我在使用Rails控制台，想知道为什么下面的代码不能工作：
Question.create(body: "Why this does not work?", answer_attributes: {body: "Some Answer"})
这很奇怪，因为当我这样做的时候：
question = Question.new(body: "Why this does not work?", answer_attributes: {body: "Some Answer"})
question.answer
我得到的东西看起来像这样：
=
浏览 0提问于2012-03-19得票数 0
回答已采纳
1回答
我正在尝试合并当前的用户id与一个早期的$request和合并后，所有的数据将保存到数据库中。执行后，数据保存到DB中，但id保存为空值。请看我的代码 public function store(Request $request, ClassModel $model)
{
$model->create($request->merge(['created_user_id' => Auth::user()->id])->all());
return redirect()->route('class.index'
浏览 12提问于2019-05-13得票数 0
回答已采纳
我使用的是microsoft visual studio 10 c++和mysql工作台。我有大量的excel文件，我想要将所有excel文件的内容更新到一个mysql表中。我可以为每个excel文件创建一个csv文件，然后导入它，但我希望它是在存储过程的帮助下完成的。我想使用c++.And，此过程必须与不同的excel文件重复。
我在考虑将我的c++程序同时连接到excel和mysql (这可能吗？)读取excel文件并将数据添加到mysql表中。我已经将我的程序连接到mysql数据库。任何其他方法都将不胜感激。
浏览 3提问于2014-07-10得票数 0
1回答
我正在使用iOS客户端调试我的rails应用程序。这是我关注的一个照片分享和上传应用
我完成了客户端部分，照片显示在提示周围。下一部分包括从客户端向服务器上传图像，这是发生错误的地方。我在控制器中使用‘put @photos’语句来查看上传后创建的变量。
这是从设备上传照片后抛出的错误
19:07:06 web.1 | Started POST "/photos" for 127.0.0.1 at 2012-09-11 19:07:05 -0700
19:07:06 web.1 | Connecting to database specified by database
浏览 0提问于2012-09-12得票数 0
回答已采纳
我完全理解“批量分配”是什么意思，如果一个模型在attr_accessible下不包含任何字段，它会在标题中给出警告。
现在我有了这个场景。我有一个只有2列的模型，user_id和company_id。我要确保在实例化这个模型的实例时，我没有使用批量赋值。取而代之的是我选择new + save。
但是由于brakeman在这个模型中没有找到任何attr_accessible，所以我在模型中添加了下面这一行：
attr_accessible :user_id, :company_id
发布上面的代码后，前面的问题得到了修复，但brakeman又提出了一个警告:潜在危险属性可用于批量分配。
那么在
浏览 18提问于2016-03-14得票数 0
1回答
我正在使用Devise进行用户注册。我一直在阅读关于定制设计的所有，但我不能理解这个简单的任务。我遵循了他的模型(HABTM)
我想在设计器编辑表单中添加一个角色复选框。我没有控制器，因为Devise没有提供控制器，但我设法为新用户添加了一个默认角色。我可以显示选中了正确信息的复选框，但不能编辑它(它不会保存anydata)。我需要一个自定义控制器吗？如果是，具体是怎么做的？我是HABTM关系的新手！
我的用户模型
class User < ActiveRecord::Base
has_and_belongs_to_many :roles
before_save :se
浏览 0提问于2011-01-07得票数 2
回答已采纳
1回答
我正在考虑对某些字段使用ActiveRecord聚合器。
让我困扰的是聚合属性在form_for和输入字段中的表现如何。也就是说，如何为聚合属性生成输入字段(因为它们是只读的)？
比如，让我们以为例。
class Customer < ActiveRecord::Base
composed_of :balance, :class_name => "Money", :mapping => %w(balance amount)
composed_of :address, :mapping => [ %w(address_street stre
浏览 0提问于2011-01-30得票数 0
嗨，我需要一个方法来插入大量的记录到一个MySQL数据库表。
我使用Linq to Entities，而使用foreach循环并插入每条记录的方法太慢了。
例如：
foreach(var item in items){
context.Add(item);
context.SubmitChanges();
}
.net连接器中是否有类似MySql命令的方法: LOAD DATA INFILE？
浏览 0提问于2012-04-13得票数 4
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
