首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Scalaz(12)- Monad:再述述flatMap,顺便了解MonadPlus

Scalaz(12)- Monad:再述述flatMap,顺便了解MonadPlus

作者头像
用户1150956
发布于 2018-01-05 02:02:14
发布于 2018-01-05 02:02:14
1K01
代码可运行
举报
运行总次数:1
代码可运行

  在前面的几篇讨论里我们初步对FP有了些少了解:FP嘛,不就是F[A]吗?也是,FP就是在F[]壳子(context)内对程序的状态进行更改,也就是在F壳子(context)内施用一些函数。再直白一点就是在F壳子内进行OOP惯用的行令编程(imperative programming)。当然,既然是在壳子(context)内进行编程这种新的模式,那么总需要些新的函数施用方法吧。我们再次审视一下以前了解过的FP函数施用方法:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 1 // Functor    :  map[A,B]    (F[A])(f:   A => B):  F[B]
2 2 // Applicative:  ap[A,B]     (F[A])(f: F[A => B]): F[B] 
3 3 // Monad      :  flatMap[A,B](F[A])(f: A => F[B]): F[B]

它们分别代表了scalaz的三个typeclass。对于FP编程来讲,函数施用(function application)就是改变程序状态,也就是map。那么从map角度分析,如果直接对F[A=>B], A=>F[B]进行map会产生不同的结果类型,如直接map A=>F[B]结果是F[F[B]]。所以我们会想办法把结果类型对齐了,使最终结果类型为F[B]:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 def ap[A,B](ma: F[A])(mf: F[A => B]): F[B] = mf.flatMap(f => ma.flatMap(a => point(f(a)))  
2  def flatMapByJoin[A,B](ma: M[A])(f: A => M[B]): M[B] = join(map(ma)(a => f(a)))
3  def join[A](mma: M[M[A]]): M[A]

从上面的代码中我们看到:在flatMap我们通过join施用了map。而这个join好像就是为了把F[F[B]]打平到F[B]而设计的,这点从join函数款式(signature)可以看出。难道FP就是为了实现类型匹配吗?绝不是!我们不能把眼光局限在如何取得类型匹配上,而是应该放阔到函数施用的目的上。我们从上面函数map,ap,flatMap的类型款式可以看出:map,ap都是在F[]壳(context)内施用的,而flatMap是在壳外对输入的类型A值进行施用的,但把结果放入了壳内。这可以说是flatMap与map,ap的根本不同之处。那么flatMap代表着什么呢?如果从flatMap的函数款式(function signature)分析:它是一个递归算法: 给F[A]一个A产生F[B],再给F[B]一个B再产生F[C]...如此类推。这样看来flatMap是一个持续算法(computational continuation),如果把flatMap串联起来就可以实现某种编程语法(syntax)。这个推论在scala的for-comprehension中得到证实:flatMap可以被视作一种简单的FP语法,它使我们可以在for-comprehension中使用我们熟悉的行令编程,其结果是FP模式的行令编程。flatMap是Monad的标识函数,而Monad又具备所有的FP函数施用方法因为它继承了Functor和Applicative,所以有些人把FP编程称为Monadic programming。从这里也可以看到flatMap在FP编程里的重要性。

如果从flatMap代表持续算法这个角度分析:flatMap实际连接了两个算法F[A] => F[B]。我们应该可以在运算flatMap的过程中实现一些附加的效果。这个要求应该可以在实现flatMap函数时做到。我们这篇讨论的重点就是在示范如何在实现flatMap时增加一些效果。当把一串算法用flatMap链接起来时这些附加效果是如何积累的。

我想没什么比logger更能示范串接算法前面算法的一些效果是如何流转到下面的算法里的。我们来设计一个例子:模拟一个输入装置,每接收一次输入代表一次运算,用一个logger把每次运算的输入都记录下来。当然,这个例子用State Monad就很容易实现。不过我们的目的是去示范如何通过flatMap把效果传递下去的,所以还是应该紧贴着如何实现flatMap:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 trait KeyLog[K] {
 2   def value: K
 3   def log: String
 4   override def toString = "["+value+","+log+"]"
 5 }
 6 object KeyLog {
 7     def apply[K](k: K, msg: String): KeyLog[K] = new KeyLog[K] {
 8         def value = k
 9         def log = msg
10     }
11 }
12 
13 KeyLog(3,"Entered Number 3")                      //> res0: Exercises.keylog.KeyLog[Int] = [3,Entered Number 3]
14 KeyLog("Hello", "Entered String 'Hello'")         //> res1: Exercises.keylog.KeyLog[String] = [Hello,Entered String 'Hello']

我们用KeyLog[K]来代表这个输入算法。每个算法都包含一个K类型的value和String类型的log。对于类型参数K我们可以直接用普通的flatMap K => KeyLog[I]来转变value。而我们的目的是如何通过flatMap把前一个KeyLog的log累积到下个算法的log。挺简单,是吧?在KeyLog结构里转变log并把结果留在KeyLog里,听着像是map,不过map是针对K的。所以我们要先加个mapLog:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 trait KeyLog[K] {
2   def value: K
3   def log: String
4   override def toString = "["+value+","+log+"]"
5   def mapLog(preLog: String): KeyLog[K] = KeyLog(value,preLog +";"+log)
6 }

我们试着实现flatMap:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 trait KeyLog[K] {
2   def value: K
3   def log: String
4   override def toString = "["+value+","+log+"]"
5   def mapLog(preLog: String): KeyLog[K] = KeyLog(value,preLog +";"+log)
6   def flatMap[I](f: K => KeyLog[I]): KeyLog[I] =
7     f(value).mapLog(log)
8 }

确实简单又直接:f(value) 产生 KeyLog[I] 然后在这个接着的算法中调用 mapLog 把上一个算法KeyLog[K]的log并入KeyLog[I]的log。

我们试着用一下flatMap

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 KeyLog(3,"Entered Number 3").flatMap(a => KeyLog("Hello", "Entered String 'Hello'"))
2                                                   //> res2: Exercises.keylog.KeyLog[String] = [Hello,Entered Number 3;Entered Stri
3                                                   //| ng 'Hello']

最终log值:"Entered Number 3;Entered String 'Hello'。我们实现了在运算flatMap过程中对log进行的累积。

现在我们可以先获取KeyLog的Monad实例,然后进行flatMap串联及使用for-comprehension进行行令编程了:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 object KeyLog {
 2     def apply[K](k: K, msg: String): KeyLog[K] = new KeyLog[K] {
 3         def value = k
 4         def log = msg
 5     }
 6 import scalaz._
 7 import Scalaz._
 8     implicit object keylogMonad extends Monad[KeyLog] {
 9         def point[K](k: => K): KeyLog[K] = KeyLog(k,"")
10         def bind[K,I](kk: KeyLog[K])(f: K => KeyLog[I]): KeyLog[I] = kk flatMap f
11     }
12 }

在KeyLog Monad实例里bind使用了我们设计的flatMap函数。看看flatMap串接和for-comprehension效果:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
def enterInt(k: Int): KeyLog[Int] = KeyLog(k, "Number:"+k.toString)
                                                  //> enterInt: (k: Int)Exercises.keylog.KeyLog[Int]
def enterStr(k: String): KeyLog[String] = KeyLog(k,"String:"+k)
                                                  //> enterStr: (k: String)Exercises.keylog.KeyLog[String]
enterInt(3) >>= {a => enterInt(4) >>= {b => enterStr("Result:") map {c => c + (a * b).toString} }}
                                                  //> res3: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;String:
                                                  //| Result:;]
for {
 a <- enterInt(3)
 b <- enterInt(4)
 c <- enterStr("Result:")
} yield c + (a * b).toString                      //> res4: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;String
                                                  //| :Result:;]

value和log都按照要求实现了转变。

在使用for-comprehension时突然想到守卫函数(guard function)。我想既然已经得到了KeyLog的Monad实例,是不是可以在它的for-comprehension里使用守卫函数呢?就像这样:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 for {
2  a <- enterInt(3)
3  b <- enterInt(4)  if b > 0
4  c <- enterStr("Result:")
5 } yield c + (a * b).toString

不过无法通过编译。提示需要filter函数。查了一下MonadPlus typeclass可以提供这个函数。那么我们就沿着惯用的套路获取一下KeyLog的MonadPlus实例。MonadPlus trait的定义如下:scalaz/MonadPlus.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 trait MonadPlus[F[_]] extends Monad[F] with ApplicativePlus[F] { self =>
 2   ////
 3 
 4   /** Remove `f`-failing `A`s in `fa`, by which we mean: in the
 5     * expression `filter(filter(fa)(f))(g)`, `g` will never be invoked
 6     * for any `a` where `f(a)` returns false.
 7     */
 8   def filter[A](fa: F[A])(f: A => Boolean) =
 9     bind(fa)(a => if (f(a)) point(a) else empty[A])
10 ...

MonadPlus又继承了ApplicativePlus:scalar/ApplicativePlus.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 trait ApplicativePlus[F[_]] extends Applicative[F] with PlusEmpty[F] { self =>

ApplicativePlus又继承了PlusEmpty: scalaz/PlusEmpty.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 trait PlusEmpty[F[_]] extends Plus[F] { self =>
2   ////
3   def empty[A]: F[A]
4 ...

PlusEmpty定义了抽象成员empty[A],又继承了Plus: scalar/Plus.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 trait Plus[F[_]]  { self =>
 2   ////
 3 
 4   /**The composition of Plus `F` and `G`, `[x]F[G[x]]`, is a Plus */
 5   def compose[G[_]](implicit G0: Plus[G]): Plus[({type λ[α] = F[G[α]]})] = new CompositionPlus[F, G] {
 6     implicit def F = self
 7 
 8     implicit def G = G0
 9   }
10 
11   /**The product of Plus `F` and `G`, `[x](F[x], G[x]])`, is a Plus */
12   def product[G[_]](implicit G0: Plus[G]): Plus[({type λ[α] = (F[α], G[α])})] = new ProductPlus[F, G] {
13     implicit def F = self
14 
15     implicit def G = G0
16   }
17 
18   def plus[A](a: F[A], b: => F[A]): F[A]
19 
20   def semigroup[A]: Semigroup[F[A]] = new Semigroup[F[A]] {
21     def append(f1: F[A], f2: => F[A]): F[A] = plus(f1, f2)
22   }
23 ...

Plus又定义了抽象成员plus[A],那么获取MonadPlus实例必须实现empty[A]: F[A]和plus[A](a: F[A], b: F[A]): F[A]。看来这个PlusEmpty就是一种Monoid,只不过是针对高阶类型的。我们知道Monad实例类型必须是高阶的M[_],那么如果Monad实例同时又具备Monoid特性的话,那么就可以使用MonadPlus来描述它的性质。

好了,现在我想获取KeyLog[K]的MonadPlu实例,那么我必须实现empty[A]:F[A]和plus[A](a:F[A],b:F[A]):F[A]。KeyLog[K]的empty[K]是什么呢?想了半天没得到答案,可能KeyLog[K]就没有empty[K]吧。也许我们想取得KeyLog MonadPlu实例的目的还没搞清楚。看看上面的需求:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 for {
2  a <- enterInt(3)
3  b <- enterInt(4)  if b > 0
4  c <- enterStr("Result:")
5 } yield c + (a * b).toString

从字面上看是希望通过守卫函数过滤数字为0的数字。等等,enterInt(4)已经确定了输入为4,是 > 0,还过滤什么?不是找事吗。所以我们的目的应该聚焦在过滤需求上。Scalaz为List,Option提供了MonadPlus实例,我们看看这两种类型的守卫函数使用:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 for { //list
 2     a <- 1 |-> 50 if a.shows contains '7'
 3 } yield a                                         //> res5: List[Int] = List(7, 17, 27, 37, 47)
 4 for { //option
 5     a <- Some(3)
 6     b <- Some(4) if a < b
 7 } yield b                                         //> res6: Option[Int] = Some(4)
 8 for { //option
 9     a <- Some(3)
10     b <- Some(4) if a > b
11 } yield b                                         //> res7: Option[Int] = None

先来分析List例子:一个List可能是空的,又可能有多过一个元素,有多种可能。守卫函数的功能就是在这些可能里进行选择。

再分析Option:可能是None或者Some,这本身就是一种筛选。对于KeyLog[K],它只有一种状态,没有选择的需要,所以我无法实现KeyLog[K]的empty[K]。

List和Option的empty分别是:Nil和None,这个很容易理解。那么plus呢?把 plus(list1,list2):list3 = list1 ++ list2这个倒是容易理解,但plus(option1,option2):option3这个又应该怎么理解呢?我们还是看看在scalaz里是怎么定义plus的吧:scalaz.std/List.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1   implicit val listInstance = new Traverse[List] with MonadPlus[List] with Each[List] with Index[List] with Length[List] with Zip[List] with Unzip[List] with Align[List] with IsEmpty[List] with Cobind[List] {
2 ...
3     def empty[A] = Nil
4     def plus[A](a: List[A], b: => List[A]) = a ++ b
5 ...

List的plus就是把两个List接起来(concat)

scalaz.std/Option.scala

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1   implicit val optionInstance = new Traverse[Option] with MonadPlus[Option] with Each[Option] with Index[Option] with Length[Option] with Cozip[Option] with Zip[Option] with Unzip[Option] with Align[Option] with IsEmpty[Option] with Cobind[Option] with Optional[Option] {
2 ...
3     def empty[A]: Option[A] = None
4     def plus[A](a: Option[A], b: => Option[A]) = a orElse b
5 ...

Option的plus意思是如果a是None就取b否则取a,无论b是否None。我们用MonadPlus提供的操作符号<+>来示范:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 List(1,2,3) <+> List(4,5,6)                       //> res4: List[Int] = List(1, 2, 3, 4, 5, 6)
2 Nil <+> List(1,2,3)                               //> res5: List[Int] = List(1, 2, 3)
3 List(1,2,3) <+> Nil                               //> res6: List[Int] = List(1, 2, 3)
4 none <+> 2.some                                   //> res7: Option[Int] = Some(2)
5 2.some <+> 3.some                                 //> res8: Option[Int] = Some(2)
6 2.some <+> none                                   //> res9: Option[Int] = Some(2)
7 none <+> none                                     //> res10: Option[Nothing] = None

为了实现KeyLog MonadPlus实例,我们必须对KeyLog类型重新定义使之包含多过一种状态:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 import scalaz._
 2 import Scalaz._
 3 object keylog {
 4 trait KeyLog[+K] {
 5   override def toString = this match {
 6     case KeyIn(value,log) => "["+value+","+log+"]"
 7     case _ => "[Keypad Locked]"
 8   }
 9   def mapLog(preLog: String): KeyLog[K] = this match {
10     case KeyIn(value,log) => KeyIn(value,preLog +";"+log)
11     case _ => KeyLock
12   }
13   def flatMap[I](f: K => KeyLog[I]): KeyLog[I] = this match {
14     case KeyIn(value,log) => f(value).mapLog(log)
15     case _ => KeyLock
16   }
17 }
18 case class KeyIn[K](value: K, log: String) extends KeyLog[K]
19 case object KeyLock extends KeyLog[Nothing]
20 object KeyLog {
21 /*    def apply[K](k: K, msg: String): KeyLog[K] = new KeyLog[K] {
22         def value = k
23         def log = msg
24     } */
25     implicit object keylogMonad extends Monad[KeyLog] {
26         def point[K](k: => K): KeyLog[K] = KeyIn(k,"")
27         def bind[K,I](kk: KeyLog[K])(f: K => KeyLog[I]): KeyLog[I] = kk flatMap f
28     }
29 }

我们增加了KeyIn和KeyLock两种状态。然后我们只需要通过模式匹配(pattern matching)在实现前面逻辑的时候把多种KeyLog状态考虑进去。

运行前面的例子:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 def enterInt(k: Int): KeyLog[Int] = KeyIn(k, "Number:"+k.toString)
 2                                                   //> enterInt: (k: Int)Exercises.keylog.KeyLog[Int]
 3 def enterStr(k: String): KeyLog[String] = KeyIn(k,"String:"+k)
 4                                                   //> enterStr: (k: String)Exercises.keylog.KeyLog[String]
 5 enterInt(3) >>= {a => enterInt(4) >>= {b => enterStr("Result:") map {c => c + (a * b).toString} }}
 6                                                   //> res0: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;String
 7                                                   //| :Result:;]
 8 for {
 9  a <- enterInt(3)
10  b <- enterInt(4)
11  c <- enterStr("Result:")
12 } yield c + (a * b).toString                      //> res1: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;String
13                                                   //| :Result:;]

 现在把KeyLock效果加进去:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1 enterInt(3) >>= {a => (KeyLock: KeyLog[Int]) >>= {b => enterStr("Result:") map {c => c + (a * b).toString} }}
2                                                   //> res2: Exercises.keylog.KeyLog[String] = [Keypad Locked]
3 for {
4  a <- enterInt(3)
5  b <- enterInt(4)
6  x <- (KeyLock: KeyLog[String])
7  c <- enterStr("Result:")
8 } yield c + (a * b).toString                      //> res3: Exercises.keylog.KeyLog[String] = [Keypad Locked]

正是我们期待的效果。

现在我们可以把MonadPlus特质混入keylogMonad实例(trait mix-in):

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1     implicit object keylogMonad extends Monad[KeyLog] with MonadPlus[KeyLog] {
 2         def point[K](k: => K): KeyLog[K] = KeyIn(k,"")
 3         def bind[K,I](kk: KeyLog[K])(f: K => KeyLog[I]): KeyLog[I] = kk flatMap f
 4 
 5         def empty[K]: KeyLog[K] = KeyLock
 6         def plus[K](a: KeyLog[K], b: => KeyLog[K]): KeyLog[K] = a match {
 7             case KeyIn(value,log) => KeyIn(value,log)
 8             case KeyLock => b
 9         }
10     }

在实例中我们实现了empty和plus。

那么现在我们可以使用守卫函数了吧:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
 1 for {
 2  a <- enterInt(3)
 3  b <- enterInt(4)
 4  c <- enterStr("Result:")
 5 } yield c + (a * b).toString                      //> res3: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;String
 6                                                   //| :Result:;]
 7 for {
 8  a <- enterInt(3)
 9  b <- enterInt(4) if b > 0
10  c <- enterStr("Result:")
11 } yield c + (a * b).toString                      //> res4: Exercises.keylog.KeyLog[String] = [Result:12,Number:3;Number:4;;Strin
12                                                   //| g:Result:;]
13 for {
14  a <- enterInt(3)
15  b <- enterInt(4) if b > 5
16  c <- enterStr("Result:")
17 } yield c + (a * b).toString                      //> res5: Exercises.keylog.KeyLog[String] = [Keypad Locked]

守卫函数按要求对KeyLog状态进行了过滤。

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2015-11-13 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
Python爬虫+颜值打分,5000+图片找到你的Mrs. Right
本项目利用Python爬虫和百度人脸识别API,针对简书交友专栏,爬取用户照片(侵删),并进行打分。 本项目包括以下内容:
罗罗攀
2018/08/10
8230
Python爬虫+颜值打分,5000+图片找到你的Mrs. Right
Python有趣|寻找知乎最美小姐姐
本月将更新八篇Python有趣系列文章。本系列通过多个有趣案例,讲解Python的玩法,其中包含如下内容,一一推进讲解。
罗罗攀
2019/03/15
3K1
Python实现AI人脸识别抖音上颜值高的小姐姐,批量下载视频!
如果一条条去刷确实很耗时间,如果 Python 能帮忙筛选出颜值高的小姐姐那就省了很多事。
一墨编程学习
2019/06/25
2K0
Python实现AI人脸识别抖音上颜值高的小姐姐,批量下载视频!
Python分析101位《创造营2020》小姐姐,谁才是你心中的颜值担当?
【导语】:今天我们来聊一聊《创造营2020》的101位选手小姐姐。Python技术部分请看第二部分。公众号后台,回复关键字“创造营”获取完整数据。
CDA数据分析师
2020/05/22
9460
你喜欢的女主播颜值多少分,今天带你测试虎牙直播女主播的颜值
随着现在直播的兴起,主播这个职业逐渐走入人们的视野。现在各大平台都有当家花旦、一哥、一姐等称号。其实人气是一方面,但是颜值才是硬实力。
松鼠爱吃饼干
2020/09/15
8220
你喜欢的女主播颜值多少分,今天带你测试虎牙直播女主播的颜值
python爬虫--看看虎牙女主播中谁颜值最高
网页链接:https://www.huya.com/g/4079 这里的主要步骤其实还是和我们之前分析的一样,如下图所示:
萌萌哒的瓤瓤
2020/08/26
9110
python爬虫--看看虎牙女主播中谁颜值最高
用Python寻找知乎最美小姐姐
导读:最近知乎老是给我推送两个问答,一个是「长得好看是种什么体验?」,另一个是「女朋友长得好看是怎样的体验?」。
IT阅读排行榜
2019/04/24
1.2K0
用Python寻找知乎最美小姐姐
知乎大神爬取高颜值美女(Python爬虫+人脸检测+颜值检测)
这是一篇来自知乎大神的技术文章 ---- 写在前面: 本文作者:邓卓 原文链接:本文转发修改已取得原作者授权 https://zhuanlan.zhihu.com/p/34425618 声明:文中所有文字、图片以及相关外链中直接或间接、明示或暗示涉及性别、颜值分数等信息全部由相关人脸检测接口给出。无任何客观性,仅供参考。 ---- 1 数据源 知乎话题『美女』下所有问题中回答所出现的图片 2 抓取工具 Python 3,并使用第三方库 Requests、lxml、AipFace,代码共 100 + 行 3
小小詹同学
2018/04/13
2.8K0
知乎大神爬取高颜值美女(Python爬虫+人脸检测+颜值检测)
知乎大神爬取高颜值美女(Python爬虫+人脸检测+颜值检测)
这是一篇来自知乎大神的技术文章
小詹同学
2018/04/13
2.7K0
知乎大神爬取高颜值美女(Python爬虫+人脸检测+颜值检测)
用 Python 写一个颜值测试小工具
我们知道现在有一些利用照片来测试颜值的网站或软件,其实使用 Python 就可以实现这一功能,本文我们使用 Python 来写一个颜值测试小工具。
Python小二
2020/08/18
7170
用 Python 写一个颜值测试小工具
微博网红都长什么样子?
在之前的分享中,我们已经学会了简书和知乎小姐姐的爬虫。今天罗罗攀把魔爪伸向了微博网红们,我们找找谁是最美网红。今天的流程如下:
龙哥
2019/07/15
1.2K0
微博网红都长什么样子?
利用百度人脸识别API实现一款简单的Python颜值打分
百度开源的人脸识别接口,通过上传人像图片可以返回颜值打分,年龄等信息;今天我们使用这个接口实现一款Python颜值打分神器
松鼠爱吃饼干
2021/09/02
8150
Python有趣|微博网红大比拼
在之前的分享中,我们已经学会了简书和知乎小姐姐的爬虫。今天罗罗攀把魔爪伸向了微博网红们,我们找找谁是最美网红。今天的流程如下:
罗罗攀
2019/05/15
5630
知乎美女挖掘指南--Python实现自动化图片抓取、颜值评分
声明:文中所有文字、图片以及相关外链中直接或间接、明示或暗示涉及性别、颜值分数等信息全部由相关人脸检测接口给出。无任何客观性,仅供参考。 1 数据源 知乎 话题『美女』下所有问题中回答所出现的图片 2 抓取工具 Python 3,并使用第三方库 Requests、lxml、AipFace,代码共 100 + 行 3 必要环境 Mac / Linux / Windows (Linux 没测过,理论上可以。Windows 之前较多反应出现异常,后查是 windows 对本地文件名中的字符做了限制,已使用正则
小小科
2018/05/04
1.3K0
知乎美女挖掘指南--Python实现自动化图片抓取、颜值评分
xpath爬取美女图片
尝试了一下用xpath爬取图集谷上面的美女图片,这次选择的是阿朱小姐姐,下面详细介绍如何爬取该网站中阿朱小姐姐的全部套图
全栈程序员站长
2022/09/18
1.1K0
xpath爬取美女图片
爬取百度贴吧的美图、感觉是时候要和年轻人接触接触了
听说现在00后和10后都特别喜欢玩QQ和百度贴吧,作为一个已经不玩qq很多年的我,感觉是时候要和年轻人接触接触了
润森
2022/08/18
2750
爬取百度贴吧的美图、感觉是时候要和年轻人接触接触了
抖音上好看的小姐姐,Python给你都下载了
如果一条条去刷确实很耗时间,如果 Python 能帮忙筛选出颜值高的小姐姐那就省了很多事。
Python数据科学
2019/06/14
1.2K0
抖音上好看的小姐姐,Python给你都下载了
PaddlePaddle实现人脸识别系统一——人脸数据集的获取
开发人脸识别系统,人脸数据集是必须的。所以在我们开发这套人脸识别系统的准备工作就是获取人脸数据集。本章将从公开的数据集到自制人脸数据集介绍,为我们之后开发人脸识别系统做好准备。
夜雨飘零
2020/05/01
3.8K0
Python爬虫-爬取彼岸图库图片案例
说明 不得使用本软件发布违反国家法律的非法广告信息,如色情,赌博等,其造成的一切后果与本作者无关 请自觉营造和谐良性的网络营销环境 违法行为一经发现 ,本作者有权终止服务并追究法律责任 本工具仅用于测试学习使用 本网站有部分内容来自互联网,如无意中侵犯了哪个媒体 、公司 、企业或个人等的知识产权,请来电或致函告之,本网站将在规定时间内给予删除等相关处理,若有涉及版权费等问题,请及时提供相关证明等材料并与我们联系,通过友好协商公平公正原则处理纠纷。 import re import reques
Reset
2022/12/27
6920
亚某逊验证码识别-使用百度OCR
最近在抓取亚某逊的时候, 除了随机请求头之外, 还有时不时出现的验证码页面, 原来换个ip还可以, 但是时间长了, 出现的越来越频繁, 所以这次就来彻底解决这个验证码的问题
不止于python
2022/05/31
7130
亚某逊验证码识别-使用百度OCR
推荐阅读
相关推荐
Python爬虫+颜值打分,5000+图片找到你的Mrs. Right
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档