论网络爬虫技术在经营管理中应用和实践

　　

提起网络爬虫，有些人联想到了抢票软件、薅羊毛、黑客甚至网络违法犯罪等，从技术方面来看，网络爬虫确实是黑客用于网络攻击的手段，黑客可利用网络爬虫分析网站技术结构，查找网站漏洞，爬取商业资料，开发自动化工具对网站发起攻击，不仅影响网站的正常使用，还可能会造成用户信息泄露，网站被挂马，数据丢失等后果，破坏力相当大。但另一方面网络爬虫却是一种正常不过的信息网络技术，经过多年发展，具有非常成熟完备的框架，功能十分强大，广泛用于软件自动化测试、搜索引擎、区块链、数据分析等领域，是软件工程师、软件测试人员、网络安全技术人员必备的技能。

随着企业信息化建设的推进，信息系统被开发，信息系统应覆盖了企业的经营管理的方方面面，然而有些企业缺少顶层设计，在建设信息系统时未考虑数据共享、功能整合等问题，形成较多信息孤岛，用户在使用这些信息系统时要分别登录，获取信息，再手工汇总所需数据，非常不便。即使系统设计得再好，功能开发得再完善，也难免有些个性化的需求不能得到满足，再则企业除了内部数据，也需从外部获取数据，在无法取得数据接口的情况下只能采取手工获取，耗费大量时间精力，效率十分低下，未发挥信息系统自动化、高效率的优势。 网络爬虫技术不受限于系统固有功能，灵活强大，非常适合不同信息系统之间的数据采集，是解决这些问题的有效手段。

本文论述网络爬虫技术原理，并以爬取某网上订烟系统订单导入企业内部系统的技术实现过程为例，探讨网络爬虫技术在企业经营管理发挥的作用。

订阅方式：
①在线订阅（推荐）：www.sdchem.net.cn
②邮局订阅：邮发代号24-109

投稿方式：
①在线投稿（推荐）：www.sdchem.net.cn
　　作者只需要简单注册获得用户名和密码后，就可随时进行投稿、查稿，全程跟踪稿件的发表过程，使您的论文发表更加方便、快捷、透明、高效。
②邮箱投稿：sdhgtg@163.com sdhg@sdchem.net
　　若“在线投稿”不成功，可使用邮箱投稿，投稿邮件主题：第一作者名字/稿件题目。
投稿时请注意以下事项：
　　①文前应有中英文“题目”、“作者姓名”、“单位”、“邮编”、“摘要”、“关键词”；
　　②作者简介包括：姓名、出生年、性别、民族、籍贯或出生地、工作单位、职务或职称、学位、研究方向；
　　③论文末应附“参考文献”，执行国标GB/T7714-2005标准，“参考文献”序号应与论文中出现的顺序相符；
　　④注明作者的联系方式，包括电话、E-mail、详细的通讯地址、邮编，以便联系并邮寄杂志。
　　 　                                                                                   山东化工稿件修改细则