http://blog.csdn.net/duankaifei/article/details/41898641
我们知道Spark平台是用Scala进行开发的，但是使用Spark的时候最流行的语言却不是Java和Scala，而是Python。原因当然是因为Python写代码效率更高，但是Scala是跑在JVM之上的，JVM和Python之间又是如何进行交互的呢？
PSSH提供OpenSSH和相关工具的并行版本。包括pssh，pscp，prsync，pnuke和pslurp。该项目包括psshlib，可以在自定义应用程序中使用。 pssh是python写的可以并发在多台机器上批量执行命令的工具，它的用法可以媲美ansible的一些简单用法，执行起来速度比ansible快它支持文件并行复制，远程命令执行，杀掉远程主机上的进程等等。杀手锏是文件并行复制，，当进行再远程主机批量上传下载的时候，最好使用它。 项目地址: https://code.google.com/archive/p/parallel-ssh/
paramiko是用python语言写的一个模块，遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的连接。
Fabric是一个Python库和命令行工具，旨在为应用部署和系统管理任务的SSH的流水线式操作，使之更加高效和方便。Fabric提供了一套基本的执行本地和远程shell命令、上传和下载文件的操作，包括一些辅助函数，例如驱动正在运行的用户输入或者放弃执行。
这阵子组内流行使用 Django 写管理端程序。大家习惯了在 Windows 上使用 PyCharm 等 IDE 快速方便地进行开发，但是由于管理端使用了一些公司的公共组件，而这些组件又只提供了 Linux 上的 Python 接口，因此必须在 Linux 上运行 Django 程序。值得庆幸的是，大多数的 IDE 都提供了远程调试功能， PyCharm 也可以经过简单配置进行远程调试。
【GaintPandaCV导读】本文主要分享了python语言的使用vscode在远程连接服务器的debug，可以通过launch.json来传入python脚本的参数，这样就能够在该情况下用vscode调试，操作跟vscode在本地调试一样
EDRaser是一款功能强大的数据清理工具，该工具基于Python开发，并提供了两种操作模式（即手动和自动模式），可以帮助广大研究人员远程删除目标计算机上的访问日志、Windows事件日志、数据库和其他文件。
代码的运行依赖一整套的运行环境，如微服务之间依赖haproxy的调用，每次调试时，都要将代码部署到远程开发环境，每次修改后都要手动上传代码，并在远程服务器上调试。 代码修改后，只能在本地开发，如果想要切换设备，需要将代码提交到git，然后并不是每次修改的，都会提交到git，或者手动拷贝代码。 本地开发使用的Windows或者Mac o，而服务运行环境则是Linux，每次在本地开发完成的代码，上传到服务器后有各种各样的问题，开发环境跟运行环境无法保证一致给部署和调试带来困难。
paramiko是用python写的一个模块，遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的连接。利用该模块，可以方便的进行ssh连接和sftp协议进行sftp文件传输以及远程命令执行。 通过安装包安装： wget http://ftp.dlitz.net/pub/dlitz/crypto/pycrypto/pycrypto-2.6.tar.gz wget http://www.lag.net/paramiko/download/paramiko-1.7.7.1.tar.gz tar -zxv
自己尝试在本地搭建了 Django 项目后，想部署到自己云服务器上，经常多次尝试和多次踩坑（捂脸），总结如下： 环境：ubuntu14, django2.0, apache2。 1.首先安装需要的库包，在 ubuntu 下执行如下指令，为了能顺利安装建议使用 root 用户登录 Ubuntu 或在 apt-get 前加上 sudo ： 安装 Apache2 apt-get update #获取更新列表 apt-get install apache2 #安装 Apache2 apt-g
Impacket 工具包是红队人员内网横向使用频率最多的工具包之一，而Impacket 是一个标准 Python 类库，用于对 SMB1-3 或 IPv4 / IPv6 上的 TCP、UDP、ICMP、IGMP，ARP，IPv4，IPv6，SMB，MSRPC，NTLM，Kerberos，WMI，LDAP 等协议进行低级编程访问。在 impacket 工具包中用到最多的协议就是 smb 协议，SMB 是一种网络协议，也称为服务器消息块协议，它被用于在客户端和服务器之间进行通信，它 还可以用来共享文件，打印机和其他一些网络资源。其次就是 MSRPC，MSRPC 或 Microsoft 远程过程调用是 DCE / RPC 的修改版本，它是由 Microsoft 创建的，用于在 Windows 中无缝创建客户端/服务器模型，Windows Server 域协议完全基于 MSRPC。
Pyramid是一款由多个Python脚本和模块依赖组成的EDR绕过工具，该工具专为红队研究人员设计，可以帮助广大研究人员通过利用Python的一些规避属性并尝试让EDR将其视为合法的Python应用程序，来实现红队渗透任务。
BlueKeep是一个软件安全漏洞，它影响使用旧版Microsoft Windows 操作系统的计算机 ; Windows 8和Windows 10不受影响。据说这个漏洞可以被用来启动自我复制的蠕虫 恶意软件。与勒索软件感染相关的2017年WannaCry攻击具有破坏性，这种攻击关闭了全世界的计算机。
第一季要开始啦，先来了解下这一季都有哪些可以回顾和用得上的小技能。从python到python web，其实还有更多选择，比如爬虫、大数据分析、人工智能、语音识别...这些都需要有python语言基础。
推荐阅读：https://blog.csdn.net/wangzuxi/article/details/40377467
关于Tunna Tunna是一个由多种工具组成的工具箱，Tunna可以通过HTTP来封装和传输任何TCP流量，值得一提的是，Tunna的所有流量支持绕过部署了完整防火墙系统的网络环境中的任何网络安全限制。毫无疑问，该工具对红队和蓝队研究人员的渗透测试与安全研究活动将非常有用。 简而言之，Tunna就是一个可以通过HTTP来隧道TCP连接的强大工具。 工具运行机制 在一个完全防火墙（入站和出站连接受限-Web服务器端口除外）环境中，Webshell可以用来连接到远程主机上的任何服务，这种连接使用的
在PyCharm的Project Interpretor中安装包总是失败，如下图所示：
Perun是一款主要适用于乙方安服、渗透测试人员和甲方RedTeam红队人员的网络资产漏洞扫描器/扫描框架，它主要适用于内网环境，加载漏洞检测Vuln模块后能够快速发现安全问题，并根据需要生成报表，以方便安全人员对授权项目完成测试工作。
在 使用 Nginx 和 Gunicorn 部署 Django 博客 中，我们通过手工方式将代码部署到了服务器。整个过程涉及到十几条命令，输了 N 个字符。一旦我们本地的代码有更新，整个过程又得重复来一遍，这将变得非常繁琐。 使用 Fabric 可以在服务器中自动执行命令。因为整个代码部署过程都是相同的，只要我们用 Fabric 写好部署脚本，以后就可以通过运行脚本自动完成部署了。 安装 Fabric Fabric 目前仅支持 Python2，如果你的系统中只有 Python3 版本，请先安装一个 Pyth
回想我年轻的时候，在做一个项目时，需要计算斐波那契数列第 n 项的值。但是我只会使用递归来实现。众所周知，递归算法计算斐波那契数列的效率极差，速度极慢。
日常工作、学习中可能都会有小型工作站或者是服务器（云服务器）供大家使用，而且使用Python的频率也挺高的，那么通常都会有可能个人电脑性能有限、存储空间或者内存有限的情形，那么我们Jupyter notebook就能够发挥很大的作用，特别是在公司、学校、或者单位局域网的环境下，远程的延迟相对较小，使用Jupyter来做Python数据处理和绘图实在是不错的选择。远程端负责计算，个人电脑仅仅是一个编辑器的作用。对于一些云服务器，可能相应的端口管理会更加严格一些，但通过设置远程使用Jupyter基本都没有问题。其实，本文所提及的远程使用jupyter主要集中于Python的配置、安装、使用。各取所需，仅仅做简单推介，不做深入的探讨。后文以Kaggle的气象聚类分析为例，实操一下如何远程Jupyter notebook使用Python的库来计算和绘图。
http://jupyter-notebook.readthedocs.io/en/latest/public_server.html
描述: 由于docker安装后是默认不允许远程访问的，所以很多小白可能就直接搜索网上的文章开启dcoker远程访问，然后照着操作。虽然这样可以远程访问了，但是直接暴露在公网上的2375端口是非常危险的，导致所有人都可以远程操作这台主机上的Docker。
最近有个监控需求，需要远程执行集群每个节点上的脚本，并获取脚本执行结果，为了安全起见不需要账号密码登陆节点主机，要求只需要调用远程脚本模块的方法就能实现。 总结下python进行远程调用脚本方法： 登陆主机执行脚本，python模块支持如 pssh、pexpect、paramiko、ansible 以远程方法调用（不需要登陆主机），python模块 rpyc，支持分布式 socket 方式，稍显复杂，需要熟悉网络协议，起点比较高 rpyc支持远程调用、分布式计算，以较少代码量实现复杂socket编程，本文主
本文旨在说明 spring-boot-starter-grpc 框架与 Python 之间跨语言 RPC 调用的友好实现。阅读本文前，请详细阅读 wiki文档，以便了解 spring-boot-starter-grpc 的工作原理。
django安装了，但是找不到，在控制台执行import django也不会报错。 此时python解释器在linux的anaconda中。
Fabric是基于Python(2.5-2.7)库和命令行来实现SSH远程应用部署及系统管理的工具，使用它，在批量管理远程主机时，不需要一台一台的输入密码登陆，可以把所以主机的用户名和密码写在一个文件里面来操作，下文中有具体实例。
Robot Framework的四层结构已经极大的提高了它的扩展性。我们可以使用它丰富的扩展库来完成大部分测试工作。可是碰到下面两种情况，仅靠四层结构就不好使了：
最近一直在开发自动化运维发布平台，底层命令行、文件通道主要基于 paramiko 模块，使用过程中遇到各种各样的问题，本文主要用于收集问题及解决记录，以备后续使用。 一、Error reading S
安装：pip install Paramiko paramiko是用python语言写的一个模块，遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的连接。 使用paramiko可以很好的解决以下问题： 需要使用windows客户端， 远程连接到Linux服务器，查看上面的日志状态，批量配置远程服务器，文件上传，文件下载等 "paramiko" is a combination of the esperanto words for "paranoid" and "friend". it's a module for python 2.5+ that implements the SSH2 protocol for secure (encrypted and authenticated) connections to remote machines. unlike SSL (aka TLS), SSH2 protocol does not require hierarchical certificates signed by a powerful central authority. you may know SSH2 as the protocol that replaced telnet and rsh for secure access to remote shells, but the protocol also includes the ability to open arbitrary channels to remote services across the encrypted tunnel (this is how sftp works, for example). it is written entirely in python (no C or platform-dependent code) and is released under the GNU LGPL (lesser GPL). the package and its API is fairly well documented in the "doc/" folder that should have come with this archive. Requirements ------------ - python 2.5 or better <http://www.python.org/> - pycrypto 2.1 or better <https://www.dlitz.net/software/pycrypto/> If you have setuptools, you can build and install paramiko and all its dependencies with this command (as root):: easy_install ./ Portability ----------- i code and test this library on Linux and MacOS X. for that reason, i'm pretty sure that it works for all posix platforms, including MacOS. it should also work on Windows, though i don't test it as frequently there. if you run into Windows problems, send me a patch: portability is important to me. some python distributions don't include the utf-8 string encodings, for reasons of space (misdirected as that is). if your distribution is missing encodings, you'll see an error like this:: LookupError: no codec search functions registered: can't find encoding this means you need to copy string encodings over from a working system. (it probably only happens on embedded systems, not normal python installs.) Valeriy Pogrebitskiy says th
Fabric is a Python (2.5-2.7) library and command-line tool for streamlining the use of SSH for application deployment or systems administration tasks.
刚开始学习编程的同学可能经常会问：“我学了这个干什么用？买菜的时候掏出电脑来编个程序算算多少钱？”
XShell是用来连接远程Linux很好的工具，在连接之后并运行好需要运行的程序后，往往需要关闭XShell，但是直接运行比如运行python crawler.py运行一个Python爬虫程序后，并直接关闭XShell往往会同时杀掉正在运行的爬虫程序，因此需要使用sudo nohup command &来将运行程序添加到进程中，比如执行sudo nohup python3 crawler.py &就会将运行的爬虫程序添加到系统进程，会输出一个进程号，比如：
Ansible 简单的说是一个配置管理系统(configuration management system)。你只需要可以使用 ssh 访问你的服务器或设备就行。它也不同于其他工具，因为它使用推送的方式，而不是像 puppet 等 那样使用拉取安装agent的方式。你可以将代码部署到任意数量的服务器上。
批量创建文件夹 sudo mkdir -p /data/{backup,code,logs,server,soft,virtual} backup 存放历史版本的代码 code 放置预备上线的代码 logs 放置日志文件 script 存放自动化脚本 server 放置服务器软件 + 预备上线的代码(重要) soft 存放软件安装包 virtual 放置虚拟环境 安装软件过程,自动确认选项 -y sudo apt install python-virtualenv -y 按照当前时间, 备份旧代码 mv
现在WPS和百度网盘都提供了PDF转Word的功能，但是需要充值会员。网上也有其他网站可以把PDF转成Word的，可是有一定限制。还有一些开源软件，效果就达不到要求了。经过了一番调查，发现真正完成PDF转Word的是一个来自Soliddocuments公司的程序，在smallpdf、adobe acrobat dc等网站上都有提到。
建立一个SSHClient对象以后，除了执行命令，还可以开启一个sftp的session，用于传输文件、创建文件夹等等。
本周（2024年01月15号），悬镜供应链安全实验室在Pypi官方仓库（https://pypi.org/）中捕获1起Py包投毒事件，投毒者利用包名错误拼写(typo-squatting)的攻击方式来仿冒谷歌开源的tensorflow机器/深度学习框架,投毒攻击目标锁定AI开发者。
在CentOS6.3下安装fabric的时候，总是安装不成功，在执行fab命令的时候，总是会抛出错误。 Traceback (most recent call last): File "/usr/bin/fab", line 5, in <module> from pkg_resources import load_entry_point File "/usr/lib/Python2.6/site-packages/pkg_resources.py", line 2655, in <module> working_set.require(__requires__) File "/usr/lib/python2.6/site-packages/pkg_resources.py", line 648, in require needed = self.resolve(parse_requirements(requirements)) File "/usr/lib/python2.6/site-packages/pkg_resources.py", line 546, in resolve raise DistributionNotFound(req) pkg_resources.DistributionNotFound: paramiko>=1.10
本章是前面某些知识点的延续。特别的，本章以实例详细的探讨了异步编程和分布式计算。本章关注Celery，一个复杂的用于构建分布应用的Python框架。最后，对比了Celery的对手：Pyro和Python-RQ。 此时，你应该已经明白了并行、分布和异步编程的基本含义。如果没有的话，最好再学习下前面几章。 搭建多机环境 学习Celery和其它Python包之前，先来搭建测试环境。我们开发的是分布应用，因此需要多机环境。 可以使用至少两台联网机器的读者可以跳过这部分。其余读者，请继续阅读。对于后者，仍然有免费或便
运行结果： Hello world! Done. fab -f test.py hello (非默认fabfile.py需要指定)
Certutil是Windows自带的命令行工具，用于管理Windows证书并作为证书服务的一部分安装。Certutil提供了从网络中下载文件的功能，测试人员可以在远程主机上执行Certutil命令，控制其下载预先部署在可控服务器上的恶意文件，如攻击载荷等。
以前一直用rsync同步代码到服务器，这种山寨方法用一次两次还可，每天部署10次就麻烦了，最近抽空研究了一下Fabric，发现这个东西部署起来简直太爽了。 Fabric是一个用Python开发的部署工具，最大特点是不用登录远程服务器，在本地运行远程命令，几行Python脚本就可以轻松部署。 花10分钟写了一个部署脚本fabfile.py（名字不能变），放到工程目录下： #!/usr/bin/env python # -*- coding: utf-8 -*- from datetime import da
https://www.xp.cn/phpstudy-linux/install.html
以前一直用rsync同步代码到服务器，这种山寨方法用一次两次还可，每天部署10次就麻烦了，最近抽空研究了一下Fabric，发现这个东西部署起来简直太爽了。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
