首页
学习
活动
专区
圈层
工具
发布

“小而美”的方向总结——记LLM入坑一年感悟

在年底换了新的业务方向后,整理汇报材料也占据了一部分时间,虽然逐步摆脱脏活累活,但却比之前更加繁忙,需要花费更多时间沟通对齐以及向上汇报。...在scaling law逐步放缓边际效应递减的今天,深入的研究能力其实变得越来越重要,可以考虑主动去寻找 “小而美” 的方向。...结合入坑后阅读的大量文献,赛博酱系统地将了解到的 “小而美” 方向做了一个总结,包括“数据研究深化、高效架构、训练动力学、模型可解释性以及推理能力”等五方面,希望与大家一同探讨。...舍入与截断(RoundClip):将权重除以缩放因子后进行四舍五入,并截断到 区间。 其中 。 3....公式启示: 梯度的更新方向主要由 项主导,导致“富者越富”的正反馈循环,最终形成稀疏的注意力分布。

38210
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    内网渗透技术-零基础方向

    192.168.206.101 listenport=3333 connectaddress=192.168.206.100 connectport=3389 此工具适用于,有一台双网卡服务器,你可以通过它进行内网通信...p2 1234 1、编辑配置文件/etc/sysctl.conf的net.ipv4.ip_forward = 1 2、关闭服务 service iptables stop 3、配置规则 需要访问的内网地址...:192.168.206.101 内网边界web服务器:192.168.206.129 iptables -t nat -A PREROUTING --dst 192.168.206.129 -p tcp...darksn0w师傅的推:ew_port_socket.zip 基于http的转发与socket代理(低权限下的渗透) 如果目标是在dmz里面,数据除了web其他出不来,便可以利用http进行 1、端口转发...p=981 内网文件传输 windows下文件传输 1、powershell文件下载 powershell突破限制执行:powershell -ExecutionPolicy Bypass -File

    2.3K30

    FRP 0.61.1 全新入坑指南-HTTPS访问内网

    在拥有公网服务器的情况下,利用frp,我们可以便捷地将内网设备实现公网访问。本位为大家带来最新版frp部署指南,和常见的上手姿势。...准备 公网服务器(建议使用轻量服务器) 本地Linux或者Windows主机。 示意图 如上图,用户想要外网访问内网的设备。需要通过公网服务器作为跳板。...客户端 同样,我们只需配置客户端文件frpc.toml 必配参数 serverAddr = "192.168.6.66" #你的公网服务器IP serverPort = 7000 #公网端口,一定要一致...添加一个或多个节点 如,我想通过公网访问内网(192.168.50.88)主机的22 3306端口。添加下面配置。...如,在内网中,我在80端口部署了一个web网页。通过内网IP访问。如何通过域名访问呢?

    2.9K10

    今后学习方向与内容

    云计算与分布式系统 内容方向:云平台开发(如阿里云、华为云、腾讯云)、分布式系统原理、微服务架构、虚拟化、容器技术(Docker、Kubernetes)。...网络安全与信息安全 内容方向:渗透测试、网络攻防、加密解密、系统安全分析、漏洞挖掘、隐私保护。 应用领域:政府、金融、电商、医疗、互联网企业。...前端、移动与新型交互体验 内容方向:Web前端(React、Vue)、APP开发(Android/iOS)、人机交互、虚拟现实/增强现实(VR/AR)、UI/UX。...高性能计算与数字芯片 内容方向:GPU编程(CUDA、OpenCL)、芯片设计(FPGA、ARM)、国产信创(“自研芯片”)、计算加速器。 应用领域:科研、高端制造、云服务、自动驾驶。...自动化与机器人 内容方向:机器人控制算法、传感器融合、自动化流程、工业机械臂开发。 应用领域:制造业、物流、医疗、服务业。 推荐语言:C/C++、Python、ROS 8.

    58110

    【Rust与AI】概览和方向

    本系列主要介绍Rust与AI的那些天作之合(开源项目),我们会以开源项目代码阅读的方式推进,以Rust为主,同时科普AI相关知识,目的是让更多非算法、非Rust的程序员进一步学习Rust和AI相关知识。...本篇是系列第一篇,主要介绍Rust和AI各自的特点与发展近况,以及它俩的遇见会碰撞出怎样的火花。我们热爱AI,我们喜欢Rust语言,仅此而已。...虽然一开始与编译器作斗争这件事可能让人抓狂,但比起用gdb去分析dump应该要好上很多吧。...这个方向是最自然、最值得关注的方向,尤其是端侧。Server端由于GPU的广泛应用,导致现在CUDA+C/CPP几乎成了垄断。...对使用者来说,迁移是没必要的,除非不得不这样做,比如在端侧训练,也许对Rust来说是一个不错的方向。 其他 前面说的是正向的,这里简单谈一下可能面临的冲击。

    1.1K10

    【Rust与AI】概览和方向

    本系列主要介绍Rust与AI的那些天作之合(开源项目),我们会以开源项目代码阅读的方式推进,以Rust为主,同时科普AI相关知识,目的是让更多非算法、非Rust的程序员进一步学习Rust和AI相关知识。...本篇是系列第一篇,主要介绍Rust和AI各自的特点与发展近况,以及它俩的遇见会碰撞出怎样的火花。我们热爱AI,我们喜欢Rust语言,仅此而已。...虽然一开始与编译器作斗争这件事可能让人抓狂,但比起用gdb去分析dump应该要好上很多吧。...这个方向是最自然、最值得关注的方向,尤其是端侧。Server端由于GPU的广泛应用,导致现在CUDA+C/CPP几乎成了垄断。...对使用者来说,迁移是没必要的,除非不得不这样做,比如在端侧训练,也许对Rust来说是一个不错的方向。 其他 前面说的是正向的,这里简单谈一下可能面临的冲击。

    89710

    内网IP与公网IP:划分、区别与应用

    内网IP与公网IP:划分、区别与应用在计算机网络的世界里,IP地址作为设备的唯一标识符,扮演着至关重要的角色。IP地址主要分为两大类:内网IP(也称为私有IP)和公网IP(也称为公共IP)。...一、内网IP与公网IP的划分内网IP(私有IP) 内网IP是在局域网(LAN)或私有网络中使用的IP地址。这些地址由路由器或网络设备分配给局域网内的设备,用于内部通信。...NAT技术可以将内网IP地址映射为公网IP地址,以实现内部设备与外部网络的连接。这种机制不仅节省了公网IP资源,还提高了网络的安全性。...二、内网IP与公网IP的区别唯一性与访问性公网IP:全球唯一,可以直接从互联网访问,具有全球可访问性。内网IP:在私有地址范围内,不可直接从外部访问,仅在局域网内有效。...三、内网IP与公网IP的应用内网IP的应用局域网内部通信:内网IP用于局域网内的设备之间的通信和连接。NAT技术:通过NAT技术,内网设备可以访问互联网,同时节省公网IP资源。

    3.1K00

    IPv4内网与公网地址范围

    内网IPv4地址范围内网地址(也称为私有地址)是专为内部网络使用的IP地址,不会在互联网上路由。这些地址范围由互联网号码分配机构(IANA)指定,用于避免与公网IP地址冲突。...内网地址范围如下:10.0.0.0/8 范围范围:10.0.0.0 到 10.255.255.255用途:通常用于大型组织或企业的内部网络。特点:由于地址范围较大,可以容纳大量的设备。...公网IPv4地址范围公网IP地址是全球唯一的IP地址,用于在互联网上进行通信。IPv4地址分为五类(A、B、C、D、E),但只有A、B、C类用于公网分配,D类用于多播,E类用于实验和研究。...以下是公网IPv4地址范围的详细说明:Class A(A类)范围:1.0.0.0 到 126.255.255.255特点:第一个字节用于网络标识,其余三个字节用于主机标识。...注意:127.0.0.0/8 是保留用于环回(Loopback)测试的地址,不属于公网地址。

    5.2K10

    公网IP与内网穿透与端口映射区别

    公网IP(Public IP)公网IP是全球互联网上可路由的IP地址,用于标识网络中的设备。这些IP地址是全球唯一的,可以用来访问互联网上的资源。...公网IP通常由互联网服务提供商(ISP)分配给网络中的设备,例如家庭路由器、服务器或计算机。公网IP是公开可访问的,因此可以用来托管服务器、提供网络服务,或者访问互联网上的资源。...内网穿透(NAT穿透):内网穿透是一种技术,允许从外部网络访问内部网络中的设备,即使这些设备位于路由器或防火墙后面。...例如,将外部访问者的请求从公网IP的某个端口映射到内部服务器的端口,使服务器能够接受来自外部的请求。总结公网IP是用于在互联网上唯一标识设备的地址。...内网穿透是一种技术,用于允许外部网络访问内部网络中的设备。端口映射是内网穿透的一种常见实现方式,它允许将外部请求路由到内部设备的特定端口。

    1.7K21

    3月系统复习入职,确定方向比努力更重要

    k 层节点元素 头条2面 - 项目专项 Native、H5、RN页面混合跳转时,页面清栈的桥实现 页面混编框架的设计与难点 RN 通用容器的设计 用户行为监控方案设计 JS 错误治理方案 RN 页面对用户行为的监控与...说下对线程池的理解,以及创建线程池的几个关键参数 Handler 机制又问了一遍 介绍下 Binder 机制,与内存共享机制有什么区别?...因此,不妨先研究下想要应聘的机构,深入了解其工作规范以调整回答问题时的方向和重点。 一份顺眼的简历 如果你想增加入选的机会,那还得花点心思在简历上。...其实职业规划是会反映出你和公司今后发展方向的匹配度,也会侧面反映你的个人能力。 针对性地“准备”好你的职业规划,让企业看到你并不是胡乱海投,同时也是为自己厘清方向。...参加面试的小伙伴一定要根据自己的情况做好职业规划,明确发展方向,不仅可以提高面试成功的概率,更是对自己未来负责。 冲击大厂需要储备哪些技能?

    62800

    一句话打通内网!内网穿透快解析正式入驻腾讯 WorkBuddy

    一、前言WorkBuddy 是腾讯出品的 AI 办公平台,快解析是北京金万维研发的内网穿透工具。近日,快解析正式入驻腾讯 WorkBuddy 智能办公平台。...对有内网穿透需求的用户来说,这无疑是一大利好消息。...二、功能无需公网IP、无需端口映射,也无需手动下载安装快解析,更无需人工添加端口,只需在Workbuddy 中对“快解析专家”说一句话,就能把您的内网网页服务映射到外网,实现本地服务发布、远程访问与跨网协作...若想在外网也能访问该系统,可以借助 Workbuddy 中的“快解析”功能实现外网登录与访问。...点击立即注册后不需要其他操作,在几分钟后快解析即可自动为您生成一个对外的访问链接通过这个链接就可以在外网访问您内网的网页应用了

    13910

    移动办公时如何使用frp内网穿透+teamviewer方式快速连入家中内网主机

    移动办公时如何使用frp内网穿透+teamviewer方式快速连入家中内网主机 之前有写过腾讯云主机上部署FRP+Teamviewer穿透内网进行远程运维 本文基于该文章做了进一步优化 一、场景描述...将内网Win7虚拟机(192.168.31.239)的Teamviewer(端口为5938)映射到了公网的腾讯云服务器 frpc与frps配置部分截图 (图片可点击放大查看) (图片可点击放大查看...) 这时如果需要在外办公的笔记本想通过Teamviewer访问家中内网的Win7虚拟机 需要云主机firewalld开放5938端口 需要输入命令 firewall-cmd --permanent -...比如我在外办公的笔记本SSH登录一下云服务器执行个脚本就自动加白呢,这样是不是更方便 通过不断修改与反复测试脚本,最终实现了这一效果 脚本如下 [root@qcloud ~]# vim teamviewer_add_loginIP.sh...IP,即可连入家中Win7虚拟机 耗时10秒不到

    2.2K20

    位置与标识分离——入向流量优化

    不过大二层网络主机经常要跨站点漂移,而且IP地址还不能变,那么按理来说这时公网应该把与这台主机的相关的流量路由到漂移后所在站点的出口路由器上。...可是,现有的公网路由器是察觉不到的这些的,除非这台主机在公网上发布了32位的路由,迁移后导致全网的重收敛,不过这根本是不现实的。...因此主机跨站点漂移后,公网用户的访问往往要先到达原来主机所在站点的路由器,再通过DC间的L2 Tunnel传输到主机漂移后所在的站点,引发了入站流量的迂回,或者说是出入站流量的不对称。...上述几种方式都和网络虚拟化搭不上边儿,而LISP作为另一种入向流量优化方案,则体现了正宗的网络虚拟化思想。...其中xTR表示集ITR与ETR为一体的LISP路由器。 ?

    1.5K70

    栈的压入与弹出序列校验

    弹出序列满足条件 如下图所示,它的压入过程为: 取出弹出序列的第1个元素,维护一个已取索引,在压入序列中从已取索引位置开始寻找与之相等的元素,将它之前的数字和其本身依次入栈,每取1个元素就将索引自增1次...取出弹出序列的第2个元素,在压入序列中从已取索引位置开始寻找与之相等的元素,将它之前的数字和其本身依次入栈。 此时,栈顶元素与弹出序列的第2个元素相等,将栈顶元素出栈。...取出弹出序列的第3个元素,此时,压入序列的元素已经被取完。我们继续判断 辅助栈中的元素是否与弹出序列的元素相等。...该弹出序列属于压入序列的一个弹出顺序 image-20220914102128919 弹出序列不满足条件 接下来,我们来分析下它不是压入序列的弹出顺序的情况,它的压入过程与满足条件时一样,唯独不同的是...new Stack(); // 下一个弹出序列存在则执行进一步的判断 while (nextPopIndex < popupSequence.length) { // 下一个弹出序列的元素与栈顶元素不等则入栈

    57220

    腾讯云国际站:CVM更换公网IP后网站打不开,DNS和安全组怎么查

    腾讯云CVM更换公网IP时,内网IP不会变化,这恰好能辅助判断问题出在外部网络还是服务器内部:内网访问正常、外网不通,大概率是安全组或DNS缓存没有跟着切换。...腾讯云安全组默认出方向放行、入方向拦截,且不会自动为新IP添加ICMP放行规则,所以ping不通很可能只是安全组策略问题,不代表IP未生效。...腾讯云安全组是有状态的,出方向默认放行不意味着入方向会跟随新公网IP自动更新;主动访问80/443仍需要显式放行。...如果原先只对旧IP或某IP段放行,新IP的主动入方向会被直接丢弃。排查时先别改Nginx,用ping 新IP验证网络链路;IP不通就优先检查安全组,而不是应用层。...若 listen 写死了旧公网 IP,建议改成 0.0.0.0 或内网 IP,减少后续 IP 变动风险。同时确认 SSL 证书绑定域名与访问域名一致,否则浏览器警告会干扰判断。

    22200
    领券