作为一种便捷地收集网上信息并从中抽取出可用信息的方式,网络爬虫技术变得越来越有用。使用Python这样的简单编程语言,你可以使用少量编程技能就可以爬取复杂的网站。《用Python写网络爬虫》作为使用Python来爬取网络数据的杰出指南,讲解了从静态页面爬取数据的方法以及使用缓存来管理服务器负载的方法。此外,本书还介绍了如何使用AJAX URL和Firebug扩展来爬取数据,以及有关爬取技术的更多真相,比如使用浏览器渲染、管理cookie、通过提交表单从受验证码保护的复杂网站中抽取数据等。本书使用Scrapy创建了一个高级网络爬虫,并对一些真实的网站进行了爬取。
上传时间: 2022-06-16
上传用户:xsr1983
随着Internet的飞速发展,网络聊天以其操作简单、方便快捷、私密性好等优点已经迅速发展成为最普遍的网络交流方式之一,越来越受到人们的青睐,丰富了人们的网上生活。开发并实现具有自身特色的网络聊天系统具有实际应用价值。本网络聊天系统基于Java应用程序设计,以Client/Server为开发模式,以Eclipse为开发环境,以MySQL为后台数据库,利用JDBC连接数据库。系统主要包括服务器模块和客户端模块,服务器模块能够对客户端发来的用户信息进行匹配、读取和转发;客户端模块能够进行注册、登录、聊天和文件传输。系统不但实现了点到点的聊天,还利用Java提供的Socket类和多线程功能,在单个程序中同时运行多个不同进程,从而实现多点对多点的聊天。总之,该聊天系统具有开放性,实时性,多话题交错等特点,方便了人们网上交流。随着互联网的快速发展,网络聊天软件以它的实时性、高效率和低成本的特质充当了信息交流的媒介,并逐渐成为网络商圈和生活商圈中不可或缺的组成部分1]。网络聊天工具实现了“沟通无极限”,它打破了办公室里上级与下级直接的等级限制,也打破了长辈与晚辈之间的时间限制,也打破了异地之间的距离限制。同时人们对于网络聊天工具的友好的界面和快捷的操作方式也越来越高。大家都知道,网络上最常用的交流工具是腾讯QQ,QQ来源于OICQ(open icq),ICQ是"I seek you"的简称,是“我找你”的意思。QQ引用了ICQ的功能即即时通信,我们只要将对方加为好友,不管对方是否在线,我们都可以向对方发送信息,无论对方在哪里,只要登陆QQ,他就能够看到我们给他发的信息,我们就能够随时随地的和对方进行信息交流2随着网络聊天工具的不断完善,它的功能越来越多样化,由最初的文字交流发展成现在的视频、语音交流,同时也提供了文件的发送和共享功能。其中不难发现,现在的网络聊天已经不再是一个简单的沟通工具,而是一个信息资讯、交流互动、娱乐的工具。随着技术的发展,网络聊天工具具有即时性、高效性、安全性、功能上较强的延展性,能够提供方便、快捷的交流[11本系统主要分析了网络聊天系统应该具备的功能、运行方式和实现方式,开发出一个基于Socket的网络聊天工具。该系统主要实现功能包括:注册、登录、聊天和文件的传输
上传时间: 2022-06-18
上传用户:zhanglei193
随着近年来传动系统的发展,多电机传动已被越来越广泛地应用于各种领域中。为了提高多电机传动系统的动态和稳态性能,以及满足一些特定系统对于多电机精确同步的要求,多电机同步控制方法的研究也变得越来越重要。目前,有许多方法用来研究多电机同步控制策略,本文采用的是偏差耦合控制方法,利用模糊PID作为速度同步补偿器的控制算法,使用遗传算法来整定PID的参数范围,解决了多电机同步控制系统中多电机速度的同步控制问题。本文首先分析了多电机同步控制的原理及其特点,根据偏差耦合控制策略的优点,确立了基于模糊PID补偿器的多电机同步控制策略,提出了模糊PID补偿器的设计方法。其次,利用罗克韦尔实验室现有的设备,构造了一个与生产现场类似的试验环境,设计了电机同步控制系统的实验平台。在单个永磁同步电动机调速系统的基础上,实现了多电机同步控制。基于实验平台,分别对硬件和软件部分进行了设计,其中包括控制系统网络的组建和硬件连线的设计和对运动控制模块进行组态以及运动控制梯形图的编制。根据本文设计的多电机同步控制方法在保证系统具有优良抗干扰性能的同时,使系统获得了较好的跟随性能及同步跟踪精度。经过Matlab的仿真以及实验结果说明了本文设计的控制算法的有效性和实用性。最后,总结了所做的研究工作,并对多电机同步控制系统中存在的其它问题进行了简单的分析,以及对未来研究方向进行了阐述。关键词:多电机同步控制;:模糊PID;遗传算法;永磁同步电动机;偏差耦合控制
标签: 模糊PID补偿器
上传时间: 2022-06-18
上传用户:zhaiyawei
1)针对loT组寻呼的连接场景,在下一代移动通信网络中应用NB-IOT技术的基础之上,将网络优化的重点放到尽可能地保证1oT设备的随机接入性能上。为此,本文提出一种基于时隙散射的1oT组寻呼随机接入优化策略。首先为1oT组寻呼的连接场景建立基于排队论的数学模型:接着通过数学公式推导山初始状态时散射到各个时隙的1oT设备数,从而得出具体的时隙散射算法。系统仿真结果表明,本文提出的方案在1oT设备数增加时,依然能够有效地保证1oT设备的随机接入性能。2)针对具有特定功能的10T混合连接场景,将网络优化的重点放到保证时延敏感度高的业务的随机接入性能上。为此,本文提出一种基于前导码组合的随机接入优化方案。主要的思想是用不同的前导码组合来表征不同业务的优先级,从而避免了静态或半静态前导码分配方案的缺点。本文给出了组合两个前导码的具体方案并推导出相应的不同优先级业务的接入性能公式,通过系统仿真可以得到,本文提出的方案在保证低优先级业务吞吐量的同时能够有效地保证了高优先级业务的时延需求。与此同时,本文提出的方案适用于具有不同时延敏感度的H2H与loT混合连接场景3)针对海量连接的1oT业务连接场景,在未来5G移动通信系统的服务定制化平台下,将网络优化的重点放到提高系统资源利用率上。本文根据1oT包小而多的特点,提出聚合策略,并给出具体的包聚合逻辑。针对多小站交叉覆盖的区域,提出基于1oT流量聚合的资源分配机制。实验仿真表明,针对1oT小包的聚合模块能够有效地节省系统资源,提高系统的资源利用率。
上传时间: 2022-06-19
上传用户:默默
在无线电测量中",经常碰到的问题是对网络的阻抗和传输特性的测量。这里所说的传输特性,主要是指:增益和衰减、幅频特性、相位特性和时延特性。最初,这些网络参数的测量采用的是点频测量的方法,即在固定频率点上逐点进行测量,测量较为简单,因此对测量设备的性能要求不是很高。随着系统及元器件逐步向宽频带方向发展,常常需要在所要求的宽频带内多个频率点上进行测量才能了解被测器件的宽频带特性。早期的测量设备不仅只能做点频测量,而且每个频率点测量所消耗的时间也比较长,这样在测量宽频带器件时就显得非常繁琐,工作效率低,并且常常会因为测量频率点选取的疏密不同而影响测量结果,特别是对于某些特性曲线的锐变部分以及个别失常点,很可能会由于测量频率点选取不到而使得测量结果不能反映真实结果。基于上述原因,扫频测量技术得以出现并飞速发展。在扫频测量中,用扫频信号--个频率随时间按一定规律,在一定频率范围内扫动的信号代替以往使用的固定频率信号,可以对被测网络进行快速、定性或定量的动态测量,给出被测网络的阻抗特性和传输特性的实时测量结果。随着电子计算机技术和微电子学的发展,微处理器在扫频测量装置中逐渐被采用,使扫频测量可以达到更高的则量精确度
上传时间: 2022-06-19
上传用户:XuVshu
PCB电路如微带电路有较为显著的介质和辐射损耗,而传统金属波导虽然损耗低、信号干扰小,但其结构很难做到小型化和集成。因此这两种结构不适用于要求低功耗且空间尺寸受限的移动终端。采用基片集成波导(SIW)可同时降低损耗和增加可集成性,其兼备了金属波导和平面电路的优良属性,是未来5G毫米波终端应用场景最佳的选项之一。本文的主要内容包括:对SIw、波柬扫描阵、缝隙天线阵和Butler知阵多波束馈电网络等基本原理进行了简要的回顾。此四方面的知识是本文所有设计的理论支撑。系统梳理了siw.缝隙天线阵的设计步骤和Butler矩阵馈电网络的分析方法。提出了将4 x4 Butler矩阵多波束馈电网络用于木来5G终端天线的设计以实现多波束宽角度高增益信号覆盖、本文选择采用了多被束方案,并结合了sG移动终端设计了适用于5G终端的4x4 Buter矩阵多波束馈电网络和缝隙天线阵,加工测试表明多波束方案基本可满足未来5G终端天线的要求。在传统4x4 Butler的基础上,提出和设计了一款改进型的4x4 SIW Butler矩阵。从理论上验证了方案的可行性且推导了各个器件须满足的条件。新设计的Butler矩阵其核心是将移相器归入到3dB定向耦合器的设计中。仿真和测试结果表明,改进型的4x4 SIW Butler矩阵不仅拥有更好的输出幅相平坦度还具有比传统4x4 SIW Butler矩阵更高的设计灵活性。设计了一款3x3 SIw Butler矩阵。首先给出了该款矩阵的设计思路来源,然后从原理上验证了此矩阵设计的可行性和详细地推导出了3x3 Butler短阵的结构和器件参数。仿真和结果表明,该型Butler矩阵比4×4 SIW Butler矩阵尺寸更小、结构更简单,但具有和4×4 SIW Buter矩阵相当的增益值和波束覆盖范围。
上传时间: 2022-06-20
上传用户:
本书系统地论述了人工神经网络的主要理论和设计基础,给出了大量应用实例,旨在使读者了解神经网络的发展背景和研究对象,理解和熟悉其基本原理和主要应用,掌握其结构模型和基本设计方法,为以后的深入研究和应用开发打下基础。作者连续11年为电气信息类专业研究生及本科高年级学生开设“人工神经网络理论与应用”课程,2002年在多次修改讲义和多项科研成果基础上形成本书的第一版。本书第二版对原书约1/3的内容进行了更新,对保留内容进行了修改。取材注意内容的典型性和先进性,编排注意内容的逻辑性,阐述注重物理概念的清晰性,举例与思考练习的安排注意了内容的实践性,常用神经网络及算法的介绍着重于实用性。
标签: 人工神经网络
上传时间: 2022-06-21
上传用户:qingfengchizhu
首先,论文研究的室内导航是基于手动配置或者自动化程序构建的owM网络,而不是现有商场的WiFi热点,增加了网络的可控性,同时导航系统也可以更好的利用网络的特点。OwM网络节点由OpenWrt系统的路由器构成,OpenWrt系统可编程,因此整个网络可以按照需求自定义功能。其次,导航系统以店铺邻接关系数据库作为简单的室内地图数据,店铺管理人员通过导航软件录入店铺邻接关系,通过分布式数据库的同步,得到完整店铺邻接关系数据,即简易室内地图,有效地解决室内地图缺少的问题。这种获得室内地图的方法,相比其他方法更简单,成本更低。最后,店铺邻接关系数据库又是基于OwM网络的分布式数据库,作为简单的室内地图数据,有效的避免了集中式数据库组织上的缺点,提高了系统的可靠性。Mesh网络具有自组织、多跳的特点,但是数据访问时间长。基于owM网络的室内导航,结合了Mesh网络和分布式数据库的优点,既实现网络自组织、多跳功能,同时缩短了数据库访问时间,降低了数据传输的代价。基于OWM网络的室内导航系统有效地结合了OpenWrt.Mesh网络和分布式数据库的优点,后续可以采用聚类算法缩减顶点个数,缩短导航时间,网络节点连接方式可以考虑网桥,实现全网通信。关键词:室内导航;OpenWrt;OwM网络;分布式数据库
上传时间: 2022-06-23
上传用户:得之我幸78
摘要:介绍在Linux操作系统环境下Socket网络编程的原理、流程和最终实现。编程采用客户端/服务器模式。提出解决多个客户端连接服务器时无法处理I/0多路复用问题的方法。提出通过最小化报文传输来减少传输时廷,为Bandwidth Delay Product调节TCP窗口,实现充分利用带宽提高Linux的Socket性能。在实际网络传输环境复杂多变的情况下,达到优化网络传输性能的目的。关键词:linux;性能优化;Socket;select()1引言随着Internet的日益发展和普及,网络在嵌入式系统中应用非常广泛,越来越多的嵌入式设备采用Linux操作系统。Linux是一个源代码公开的免费操作系统,具有强移植性",所以对基于Linux的Socket网络编程的研究越来越重要。2Socket简介在Linux中的网络编程通过Socket接口进行,是一种特殊的I/O,也是一种特殊的文件描述符。Socket是使用标准Linux文件符(file descriptor)和其他程序通信的方式。这里Socket 编程采用客户/服务器模式如图1所示。
上传时间: 2022-06-23
上传用户:
木书以神经网络结构为主线,以学习算法为副线,详细介绍了神经网络结构和算法步骤,并给出实例和练习,目的是使读者易看懂,能动手,会应用。主要内容包括:人工神经网络简介、单层前向网络及LMS学习算法、多层前向网络及BP学习算法、支持向量机及其学习算法、 Hopfield神经网络与联想记忆、随机神经网络及模拟退火算法、竞争神经网络和协同神经网络。每章均给出了基于 MATLAB的仿真实例以及练习。
标签: 人工神经网络
上传时间: 2022-07-12
上传用户: