ApacheSpark2.0: orderBy() / sort()列的表达式字符串按降序排列
Apache Spark是一个开源的大数据处理框架，具有高速、通用、易用和可扩展的特点。Apache Spark 2.0是Spark的一个版本，其中包含了一些新的功能和改进。
在Apache Spark 2.0中，orderBy()和sort()函数用于对列的表达式字符串进行排序操作。这两个函数可以按照降序排列列的值。
orderBy()函数是用于对DataFrame或Dataset中的数据按照指定的列进行排序。它接受一个或多个列名作为参数，并返回一个新的DataFrame或Dataset，其中的数据按照指定的列进行排序。orderBy()函数可以用于任何类型的列，包括数字、字符串等。
sort()函数是用于对DataFrame或Dataset中的数据按照指定的列进行排序。它与orderBy()函数的功能类似，但sort()函数可以更灵活地指定排序方式。sort()函数接受一个或多个列名和排序方式作为参数，并返回一个新的DataFrame或Dataset，其中的数据按照指定的列和排序方式进行排序。排序方式可以是升序（ascending）或降序（descending）。
这两个函数在数据分析、数据挖掘、机器学习等领域都有广泛的应用场景。例如，在电商领域，可以使用orderBy()函数按照销售额对商品进行排序，以找出最畅销的商品；在社交网络分析中，可以使用sort()函数按照用户的影响力指标对用户进行排序，以找出最有影响力的用户。
腾讯云提供了适用于大数据处理的云计算产品，如腾讯云数据分析（Tencent Cloud DataWorks）、腾讯云数据仓库（Tencent Cloud Data Warehouse）等。这些产品可以帮助用户在云端高效地进行大数据处理和分析工作。
更多关于Apache Spark 2.0的orderBy()和sort()函数的详细信息，可以参考腾讯云的官方文档：
相关·内容
我使用已排序()函数对一个元组列表进行排序，如下所示。输出按第二个元素(数字)所需的降序排列。但我真正想要的是在领带的情况下按字母顺序排列元组。
请帮帮忙。
sorted(word_Count, key = itemgetter(1,0), reverse = True)
输出：
[('butter', 2), ('was', 1), ('the', 1), ('of', 1), ('but', 1),
('bought', 1), ('bitter', 1), ('bit&
浏览 5提问于2016-10-09得票数 0
回答已采纳
我使用的是Elixir的 (不是Ecto)。我想查询有限制，但在此之前，我需要按降序排序。我不知道我该怎么做。文档提到了limit，但没有提到orderby：
Mongo.find(:mongo, "collection", %{"field" = "somefieldvalue"}, limit: 10)
有谁知道如何按字段输入orderby，例如字段名称是" time“，而我想要按时间排序的结果，降序？
如果我在IEX中输入h Mongo.find，我会得到一个:order_by原子，但是如果我想指定一个降序，我不确定该如何使用它。
浏览 15提问于2017-08-02得票数 1
回答已采纳
我有以下代码：
<li data-ng-repeat="question in modal.data.questions | orderBy: number">
<a data-ng-click="$parent.modal.selected=$index">Q{{ question.number }}</a>
</li>
其中，number是问句对象中的字段。当我检查调试器时，我看到了两个数字5和6的值，当它显示在屏幕上时，6是第一个值和第5秒值。
我的问题是
不按数字顺序重复。我试过一些不同的组合。有
浏览 1提问于2013-08-13得票数 0
回答已采纳
我有一个Java JTable，它存储了大约8000行，有10列，一切都很好。
当我单击列标题时，整个JTable将首先按该列中的数据按升序排序，然后再单击将按降序排序。
我想改变一个特定列的这种行为(双列-存储%s )，以便第一次单击将按降序对数据进行排序，然后第二次单击将是升序-因为我最感兴趣的是具有最高%s的条目。
这不是要在第一次显示表时更改原始排序顺序。该表最初是按ID号(第一列)升序排序的，这就是我想要的。
这是关于改变基于其他列重新排序时的行为，以便第一次单击将是降序的。
有谁有什么想法吗？
浏览 6提问于2016-05-03得票数 2
假设我有一个包含列a、b和c的数据帧，我想按列b升序排序，并按列c降序排序，我该怎么做呢？
浏览 25提问于2013-06-17得票数 376
回答已采纳
2回答
我在排序通过ORMLite查询的对象列表时遇到了问题，我想在其中按两个单独的列进行排序。我想按优先级排序，顺序是最低的，计数最高的。但是，似乎查询只接受我设置的最后一个orderBy，而不是两者都接受。例如，下面是两个查询及其结果：
QueryBuilder<CategoryData, Integer> queryBuilder4 = dao.queryBuilder();
queryBuilder4.orderBy(CategoryData.FACE_COUNT_COLUMN_NAME, false);
queryBuilder4.orderBy(CategoryData.PRI
浏览 1提问于2016-05-23得票数 0
回答已采纳
我在ruby中迭代给定目录中的文件，即：
Dir.each
我想按上次编辑日期的降序或升序遍历文件。用ruby编写代码的最短方式是什么？
浏览 4提问于2013-05-16得票数 2
回答已采纳
我尝试使用Salat在MongoDB上执行查询。查询应按两个属性对结果集进行排序。我还没有找到任何例子。使用单个MongoDBObject进行排序的效果与预期一致。
val results = dao
.find(MongoDBObject.empty)
.sort(orderBy = MongoDBObject("attribute1" -> 1))
.skip(0)
.limit(10).toList
如何组合两个MongoDBObjects以使其被orderBy评估？例如，如果我的第一个排序是按attribute1升序排序，第二个排序是按属性2升序排
浏览 5提问于2013-07-06得票数 0
3回答
元组列表的自定义排序
、、、
我几天前才开始学习Python，我想在其中实现我的小项目。我需要按数字值按降序排列(string, integer)列表，但如果多个元组的数字相同，则按字母顺序排序。所以我有一个清单，比如说：
tuples = [('ggg', 5), ('aaa', 5), ('bbb', 6), ('zzz', 6)]
tuples.sort(key=lambda score: score[1], reverse=True)
这将返回：
[('bbb', 6), ('zzz', 6), ('ggg
浏览 2提问于2015-09-27得票数 3
回答已采纳
我需要一个窗口函数，它按一些键(=列名)分区，按另一个列名排序，并返回排名在前x位的行。
这对于升序很有效：
def getTopX(df: DataFrame, top_x: String, top_key: String, top_value:String): DataFrame ={
val top_keys: List[String] = top_key.split(", ").map(_.trim).toList
val w = Window.partitionBy(top_keys(1),top_keys.drop(1):_*)
.or
浏览 41提问于2016-07-26得票数 27
回答已采纳
3回答
我正在做一个项目，在那里我需要接受两个数组，并排序，以打印出它们的下降顺序。
这就是我现在拥有的：
string[] nPlayer = {"aaa", "bbb", "ccc", "ddd", "eee"}
int[] nScore = {555, 444, 333, 222, 111}
public void Print()
{
Array.Sort(nScore, nPlayer);
PrintKeysAndValues(nPlayer, n
浏览 4提问于2015-06-21得票数 0
回答已采纳
1回答
我有一个Json对象数组
"students": [{
"id": 1,
"first_name": "John",
"last_name": "Doe",
"age": "14",
}, {
"id": 2,
"first_name": "Victoria",
"last_name": "Secret",
"ag
浏览 4提问于2017-09-26得票数 2
回答已采纳
我的employees和groups表之间有一个多对多的关系。我已经创建了数据透视表，并且一切工作正常。但是，我在employees表上有一个sortOrder列，用于确定它们的显示顺序。sortOrder列中值为1的Employee应该是第一个，值为2的应该是第二个，依此类推。(如果按降序排序，则向后) sortOrder列是允许空值的整数列。
我已经将我的组模型设置为按排序列对员工进行排序，但我遇到了一个问题。空值始终首先显示。我尝试使用ISNULL和类似的SQL方法来代替常规的"asc“或"desc”，但只得到了一个错误。
下面是我的Group模型中的代码：
class
浏览 5提问于2013-07-15得票数 36
回答已采纳
2回答
我有一个MyImageClass类型的泛型集合，而MyImageClass有一个布尔属性"IsProfile“。我想对这个IsProfile == true位于列表开头的通用列表进行排序。
我试过这个。
rptBigImages.DataSource = estate.Images.OrderBy(est=>est.IsProfile).ToList();
使用上面的代码，图像位于最后一个IsProfile属性为真的位置。但我希望它在第一个指数。我需要一些Asc或Desc。然后我做了这个。
rptBigImages.DataSource = estate.Images.Order
浏览 3提问于2009-02-10得票数 21
回答已采纳
可以做多个orderBy()列吗？
knex
.select()
.table('products')
.orderBy('id', 'asc')
orderBy() chainable只接受一个列键和一个排序值，但是我如何按多列排序呢？
浏览 4提问于2016-04-01得票数 34
回答已采纳
InvalidOperationException:未能转换LINQ表达式的DbSet() .OrderBy(s => LINQ。以可翻译的形式重写查询，或者通过插入对“AsEnumerable”、“AsAsyncEnumerable”、“ToList”或“ToListAsync”的调用显式切换到客户端计算。有关详细信息，请参阅。
当我尝试按属性对rest api进行排序时，出现此错误。
浏览 0提问于2021-03-14得票数 1
请参阅以下代码：
Public Function GetMembers(Optional ByVal sortExpression As String = "MemberId ASC") As List(Of Member) 'Implements IMemberDao.GetMembers
Using context = New LibraryDBEntities()
Dim members = context.Members.AsQueryable.OrderBy(sortExpression).ToList
浏览 8提问于2014-03-01得票数 1
回答已采纳
2回答
A = pd.DataFrame({"type":['a','b','c', 'd','e'], "cost basis":[50, 40, 30, 20, 10], "value":[5, 25, 40, 10, 20]}) 我正在寻找迭代" value“列，直到某个值或按降序求和。假设为50，而如果下一个数字超过该值，则迭代将在此停止。
浏览 10提问于2021-08-14得票数 0
回答已采纳
我使用的是tinytable表排序脚本。
请参阅上的示例。
这是一个大约2.5kb的非常基本的脚本。为了使用脚本，我们执行sorter.init("table",1);，其中table是表id，1是要排序的初始列。这很有效，但初始列是按asc顺序排序的。没有使其初始按降序排序的选项。我试图查看js文件，但无法找到它。我需要做什么才能使它成为按降序排列的初始列？
浏览 0提问于2011-10-07得票数 0
回答已采纳
我有一些记录给了我需要订购的课程。
值是简单的0,1,2。问题是客户端需要根据类名而不是类值按顺序显示记录。该命令应如下所示。
class (TBD)= 0
class (2/3)= 2
class (1)= 1
Using System.Linq.Dynamic我已经能够将列和那里的方向传递到我的OrderBy()中。是否有一种方法可以传递一个表达式，强制排序顺序为
升序:类(TBD)= 0，类(2/3)= 2，类(1)= 1
降序:类(1)= 1，类(2/3)= 2，类(TBD)= 0
我试过asc：
sort = "(Class = 0) desc, (Class = 2) d
浏览 0提问于2015-08-11得票数 2
回答已采纳
我有一个很大的矩阵导入一个.csv超过50.000行。
我和熊猫和numpy一起工作，这个矩阵是一个电影数据库，我想按预算对矩阵进行排序，例如第10行显示这个矩阵的所有列。
按收入分类，这是我的目标。
IMDb_data[['film', 'budget', 'revenue','vote_average','cast']].head(3)
film budget revenue vote_average ..... cast director homepage
J.Park 100000
浏览 0提问于2019-02-22得票数 0
回答已采纳
2回答
我在yii2中有一个端点，需要对多个参数进行排序。我在使用ActiveDataProvider。这是enpdoint：
public function actionIndex($client)
{
$sort = new Sort([
'attributes'=> ['name','mail','crdate']
]);
$query = Customer::find()
->andWhere(['clie
浏览 0提问于2018-03-11得票数 1
回答已采纳
我使用的是Angular 1.2.10 (~稳定~)
我有这样的东西：
<tr ng-repeat="server in servers.hits.hits | orderBy: type.id">
我的服务器对象如下所示：
server = {
name = "String",
type = {
id: Integer,
label: "String"
},
url: "String"
}
我的服务器列表没有正确组织，但在A
浏览 1提问于2014-02-03得票数 0
如何对3d数组中的每个2d数组进行排序？
我有一个形状(10, 1000, 3)数组
我尝试按每个子数组中的最后一列进行反向排序。
循环解决方案：
result = []
for subarr2d in arr3d:
subarr2d_sorted = subarr2d[subarr2d[:, -1].argsort()][::-1]
result.append(subarr2d_sorted)
我想在numpy一个人做吗？这有可能吗？
浏览 7提问于2021-02-20得票数 2
回答已采纳
我有这样的数据：
rows = [("Ali", 0, [100]),("Barbara", 1, [300, 250, 100]),("Cesar", 1, [350, 100]),("Dongmei", 1, [400, 100]), ("Eli", 2, [250]),("Florita", 2, [500, 300, 100]),("Gatimu", 3, [300, 100])]
df=spark.createDataFrame(rows,["name"
浏览 4提问于2020-08-12得票数 0
2回答
试图按用户的选择按升序或降序对数字数组进行排序。
这是我的密码-
Order by:
<select ng-model="orderCriteria">
<option value="false">ASC</option>
<option value="true">DESC</option>
</select>
<table border="2">
<th>Number</th>
<tr
浏览 2提问于2015-03-01得票数 1
回答已采纳
我有一个对象数组，我想从每个对象中选择最近的对象。数组按创建日期排序。
每个对象都有一个唯一的id和一个非唯一的外键(如下所示).他们也有约会。
例如：
1，2，1，3，1，2，4，4，2
如何只选择粗体的？(3,1,4,2)。
浏览 2提问于2014-10-21得票数 0
1回答
我有一段代码，它获取视图的内容并在列表中返回它们，以填充前端的下拉菜单。 public ActionResult GetMeetingList()
{
using (var context = new ClerkEntities())
{
var meetingList = context.vwGetMeetings.ToList();
return Json(new { data = meetingList }, JsonRequestBehavior.Allow
浏览 8提问于2020-09-11得票数 1
我有一个有3列的数据框架:日志、摘要和单词计数。我试图计算每个期刊摘要的平均字数，然后按降序排列，以显示平均摘要时间最长的期刊。
我已经到了一个只有日记和平均字数的地步。这是通过这样做实现的：
newDF = marchDF.select("journal", "abstract").withColumn("wordcount", lit("0").cast("integer")).withColumn("wordcount", sql.size(sql.split(sql.col("abs
浏览 1提问于2021-03-19得票数 0
回答已采纳
1回答
有没有办法安排一个简单的数组，如下所示：
<div ng-init="fruits=['apple','orange','mango','banana','pineapple','kiwi']">
按页面加载的升序排列
我试过了，但它很管用：
<ul>
<li ng-repeat="fruit in fruits | orderBy:predicate='fruit'">{{fruit}}</li>
&l
浏览 4提问于2014-06-29得票数 0
回答已采纳
我试图显示一个按每个元素的位置降序排列的数组($scope.stored_questions_clusters)，问题是我得不到想要的结果。
在这个例子中，我做了一个ng-repeat = "question cluster stored in clusters questions | orderBy '- question_cluster.position'"，在每次迭代中，我用bootstrap创建了一个面板，我在其中打印位置，所以我期望的是一个按位置排序的列表，但我没有得到这个……
下面是我使用的代码：
<div style="margin-
浏览 0提问于2016-02-05得票数 0
我的大脑在这方面不行了。我相信这是很容易找到的搜索，但我有一个地狱般的时间措辞，以找到任何相关的结果。
我正在使用Laravel，所以如果有一个雄辩的解决方案，这将是首选的，但一个原始的查询也可以。
我有一个表，名为 the ，它有两列status，当然还有updated_at。我想按updated_at DESC进行排序，但是在上面返回具有指定值的状态的行，但也有按updated_at排序的组。
我希望这是有意义的。
浏览 4提问于2015-02-18得票数 1
回答已采纳
我的数据库中有三个字段，id、date和qty。我想把它们按id分类，找到qty，这是每个月的最新数量。因此，对于每个月的date和每个月的最新一天，qty都会为它返回。
如果输入是
[
{
"id": "ABC",
"date": "2020-10-02 15:03:00.00",
"qty": 500,
},
{
"id": "ABC",
"date": "2020-10-31 20:22:00.00&#
浏览 1提问于2021-04-22得票数 1
回答已采纳
1回答
我希望按字母顺序排列我的表，但是先使用活动的数据，然后按字母顺序排列active为false。我正在通过我的表中的一个查询来完成这个任务，但是我不知道如何真正做到这一点。现在，查询只按长名称按字母顺序排序。注意:该表包含一个long_name列，它是一个字符串，一个是活动列，它是一个布尔列。
控制器中使用的查询：
@arrest_reason = ArrestReason.order(:long_name)
浏览 3提问于2022-10-26得票数 1
回答已采纳
概述
对于下面的Pandas DataFrame，我可以使用sort_values对数据进行排序(这里我使用了"Clust Length“)，但是这不允许我使用多标准的决策方法进行排序。我尝试用sort_values等方法向by=[col1,col2]添加一个列表，但最终有一列将对DataFrame进行排序，除非第一列有一个重复的值。
期望输出
对于所有列，首选为较高的值。是否有一种简单的方法可以根据所有列的均匀混合进行排序？这些数据是否可以标准化和加权？
例如,
行1 Clust Max Date值2020-11-30 >行02020-11-301 Clust Bounce值4
浏览 2提问于2021-03-14得票数 1
回答已采纳
6回答
按身份然后按年龄订购
、、、
对象排序列表给了我不想要的结果，为什么我不能按id (整数)排序列表，然后按年龄(整数)排序呢？它只按Id进行排序，在使用thenBy之后，没有任何变化。但是，当我首先使用orderBy名称和thenBy年龄时，它会订购列表。
// Student collection
IList<Student> studentList = new List<Student>() {
new Student() { StudentID = 1, StudentName = "John", Age = 18 } ,
浏览 17提问于2022-03-14得票数 -3
1回答
我有一个审查模型和产品模型，例如：
const ProductReviewSchema = Schema({型态：{ type: Number，min: 1，max: 5，required: true，}，product：{ type: mongoose.Types.ObjectId，ref：'ecommerce-product'，}，})；
和
const ProductSchema = Schema({ name: String，price: Number })；
我想要显示最高等级的产品，我可以使用reviewschema中的查找方法和循环来实现这一点。
浏览 1提问于2021-01-30得票数 1
回答已采纳
1回答
对散列的数组引用进行排序
、、、
在Perl中执行以下代码行后：
my $data = `curl '$url'`;
my $pets = XMLin($data)->(pets);
我有一个数组引用，其中包含对散列的引用：
$VAR1 = [
{
'title' => 'cat',
'count' => '210'
},
{
'title' => 'dog',
'count'
浏览 0提问于2010-06-29得票数 9
回答已采纳
4回答
我的模型表中有3列id、msg和created_at。created_at是时间戳，id是主键。
我还有5个数据，world => time4，hello => time2，haha => time1，hihio => time5和dunno => time3，这些数据是根据它们的id按升序排列的。
在laravel 4中，我想获取这些数据，按升序排列，并取最后n个记录数(在本例中为3)。因此，我希望在div中像这样显示dunno、world和hihio行：
dunno,time3
world,time4
hihio,time5
我已经尝试过的
M
浏览 3提问于2014-06-11得票数 14
回答已采纳
1回答
我有三列，多行:第一列(A)编号为(1,2,3,4)，第二列(B)为字母(A，B，C，D)，第三列为对应信息(C)。
我希望能够选择一个布尔值，在按数字排序(A列)和按字母排序(B列)之间切换工作表的排序。
谢谢!
浏览 3提问于2022-09-16得票数 1
1回答
与项过滤相关的数据结构问题
、、、、
我有这样的数据：
有三列r_code、wtg_code和rr。每一行都可以视为对象属性的集合。我们必须从现有的行中选择n行数。考虑到行按r_code的递减顺序排序，约束是，
按r_code的递减顺序选择行，多行可以具有相同的r_code。如果多行具有相同的r_code，则选择，然后在减少wtg_code的基础上进行选择。如果多行具有相同的wtg_code，则根据最低的rr.进行选择。
如果您可以在Javascript中给出解决方案，那么它将是更好的，否则我欢迎任何语言。
浏览 3提问于2022-02-10得票数 0
回答已采纳
4回答
如何对GridView获取的数据表按列进行排序。我正在试着做这样的事情，但它不起作用。
protected void GridView_Sorting(object sender, GridViewSortEventArgs e)
{
if (sender.GetType() != typeof(GridView))
return;
DataTable dt = (DataTable)((GridView)sender).DataSource;
DataTable dtClone = dt.Clone();
dt.AsEnumerable(
浏览 0提问于2010-09-02得票数 1
1回答
高级自定义字段按元键值排序
、、、、
我有一个简单的Wordpress查询，它列出了我的自定义post类型结果。
目前，他们按设立员额的日期排列。
我需要它们按照自定义字段的顺序排列为列表，从最近到最老，我都将其命名为“release_year”。
我很难将第二个查询合并到我的结果中。
如何确保所有帖子都按release_year排序?？
ANy帮助感谢。
<?php
$posts = get_posts(array(
'post_type' => 'discography',
'posts_per_page' => -1
浏览 7提问于2017-01-23得票数 2
回答已采纳
5回答
我在一个帖子中看到了下面的函数，它允许用户使用通用表达式对数据进行排序：
public static IOrderedQueryable<T> OrderBy<T, TKey>(
this IQueryable<T> source, Expression<Func<T, TKey>> func, bool isDescending) {
return isDescending ? source.OrderByDescending(func) : source.OrderBy(func);
}
当我尝试使用这个函数时，我得到一个
浏览 0提问于2009-09-10得票数 5
回答已采纳
1回答
如何按联接列对表进行排序？我只能按“从”选择的列进行排序。
我的全部问题是：
SELECT rp.'data', ra.'data2', rgl.'data3' FROM 'rp_table' rp
JOIN 'ra_table' ra ON rp.'Id' = ra.'pruefungsId'
JOIN 'rgl_table' rgl ON rp.'uId' = rgl.'Id'
ORDER BY rp.'data
浏览 9提问于2022-08-23得票数 0
我希望对元组列表进行排序(元组具有格式(整数，字符串))，以便将它们从最大的整数排序到最小的整数，然后字符串按字母顺序排序，而不丢失整数顺序。
### Inputs: data = [(86, 'william'), (74, 'olivia'), (86, 'willaim'), (62, 'lyli'), (74, 'olivai'), (62, 'lily')]
### Outputs: data = [(86, 'willaim'), (86, 'william
浏览 1提问于2020-01-29得票数 0
回答已采纳
let obj = [{'vote':999,'name':'D'},
{'vote':341,'name':'A'},
{'vote':789,'name':'A'},
{'vote':555,'name':'B'}]
let result = _.uniqBy(obj,(item)=>{
return item.name
浏览 1提问于2017-01-16得票数 2
回答已采纳
这是我的角度代码：
<li ng-repeat="(key, value) in list | orderBy:customOrderFn">
<span>{{key}}: {{value.age}}</span>
</li>
app.controller('ListController', function ($scope) {
$scope.list = {
'name1': {
浏览 2提问于2015-08-03得票数 1
回答已采纳
2回答
我有一个二维字符串数组。所有列都是数字的String。我需要按列的降序对数组进行排序，当列相同时，我需要按行中单词的字母顺序对它们进行排序。
示例：
input = "Practice makes perfect. you'll only get Perfect by practice. just practice!"
output: [ ["practice", "3"], ["perfect", "2"],
["by", "1"], ["get
浏览 14提问于2018-01-23得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
云直播活动推荐
腾讯云开发者
