特色: 1.前端纯HTML+JS+JSON(链接统计除外),后端python生成标准JSON 2.自带30几个常用网站采集规则 3.多线程抓取,30+网站5秒内采集完毕 4.相同网站放在一个框架内,可局部刷新和滚动 5.更新时间显示(按采集页的自带更新时间或按时间排序的第一条时间采集,没有的为采集完成时间) 6.内容链接防盗链,链接通过base64+字符逆序+大小写反转+base64实现加密(更换大小写转换顺序或增加数字替换可实现不同密码加密) 7.内容链接点击统计 8.部分内容鼠标悬停提示(如appstore排行有更新内容、时间、版本号) 安装: 1.python3 caiji.py采集(保持后台运行请用screen或nohup) 2.打开首页访问 注: caiji.py为后端采集程序,其余为前端需在同一目录 相应设置修改请查看源码中的注释 admin.php为第三方数据库管理程序,用于内容链接统计查看(默认密码admin,请在文件中修改) 点击统计数据库log.db会在首次访问内容链接时生成,如未建立请保证主目录可写 为了安全,后端程序caiji.
2023-09-10 12:48:56 8.85MB 软件/插件
1
近日,加拿大滑铁卢大学的研究人员开发了一种计算机视觉和人工智能辅助的冬季道路状况监测系统,使用低成本、非专用的硬件(如机器视觉相机和温度传感器)实时收集处理和传送道路状况数据。与现有解决方案相比,该系统可安装在各种车辆上,对道路状况进行更客观的评估,并且路况监控的时空覆盖范围更广。
2023-06-09 12:22:39 84KB 图像识别 机器视觉 文章 技术应用
1
爬取携程网(www.ctrip.com)与南京(可选择感兴趣的城市)相关的游记数据,南京游记列表页面链接如下:http://you.ctrip.com/travels/nanjing9.html。通过列表中的游记标题链接可以打开详细内容页面(见图11-21),采集页面头部的行程单数据存储到列表、字典或文件中,包括游玩天数、游玩时间、人均花费、同游对象、玩法、游玩景点等。获取前50页列表的游记数据后,对数据做适当分析,如计算平均花费、游玩时间在给予分最多、游玩景点的排序等。
2023-05-16 09:14:01 304KB python matplotlib 爬虫 数据处理
1
首页 1.商品分类;根据商品的分类,可以更快找出心仪的商品 2.广告窗口;广告轮播 3.活动页面;显示当前的活动,活动时间活动内容,快捷进入活动页面 4.商品展示;展示现有商品 二疯狂排行 1.为客户推出商品的排名 三兑换中心 1.我的积分;显示我还有多少积分,还有多少天这些积分会过期。 2.限时兑换;显示当前时间段可以兑换的所有物品 四我的订单 1.订单查询;输入手机号可以查询订单信息 2.对订单当前的状态进行查看 五个人中心 1.显示用户头像名称 2.查看总会员分 3.显示用户订单的状态 4.签到;每日签到,可以领取会员分 5.我的服务;可以查询商城信息,意见反馈,质询客服,查看隐私协议 六商品详情 1.显示商品的名称和兑换所需的积分 2.对商品进行购买,或添加购物车和收藏 3.显示商品介绍 4.显示商品的规格 5.显示商品的售后服务
2023-04-18 13:40:19 130.81MB 小程序 软件/插件
1
本软件可以采集快手热门视频,同时在当前软件目录并进行批量下载
2023-02-28 11:33:35 329KB 快手 短视频 批量
1
Popular Movies This is an Android app that fetches provides movie data from themoviedb. It was built for educational purposes as part of Udacity's Android Nanodegree Program. Features Implements Content Providers and SQLite Syncs with the REST API in a battery-friendly. Makes use of various libraries for decent UX. Animations, transitions and content-based material color palletes. Constraint Layouts, parallaxing. Screenshots Libraries Used Butterknife - Bind Android views and callbacks
2023-01-13 01:53:38 4.74MB Android代码
1
FindSonngs 前些天偶然听到了某首歌, 发现挺好听的,然后打开歌曲评论,发现评论数竟然高达80多万,紧接着我又看了下歌曲的发行日期,17年的,看到这就不能忍了,像我这种音乐达人(自恋一会大笑)怎么能不知道这种好歌呢! ! ! 然后刚好最近考完试,于是决定写个类似的爬虫程序来爬取高评论数歌曲,好了,废话不多说,下面开始介绍下程序吧。 主要功能是:以某首歌为入口,爬取歌曲关联歌单,然后分别遍历对应歌单中歌曲,同样也可再提取对应歌曲的歌单,往复进行。最后关键的是能够提取到每首歌曲的评论以及数目,不过这里的主要目的是评论数目大于15万的则记录下来。 针对的是手机酷狗app(为啥不是别的我就懒得说了,没有啥原因),然后是Fiddler对手机抓包,抓包过程我就省略了。 抓包研究一会后,发现每首歌曲关键的地方是它对应的Hash值,通过这个Hash可以获取到诸多信息,比如评论,关联歌单信息等等。
2023-01-11 10:11:35 90KB crawler kugou discover-music Java
1
python分析世界杯夺冠热门,利用python可视化方法实现
2022-12-31 17:35:15 770KB 机器学习
1
对B站视频的标题,播放量,弹幕量以及收藏量,视频分类等数据进行分析。我们采用爬虫对B站的热门视频弹幕进行爬取并保存为csv文件,导入数据库中,通过flask项目中的python代码进行数据库连接进行前后端交互功能的实现,通过layui框架进行系统前端页面的功能实现,通过knn分类算法以及k均值聚类算法对爬取的数据进行分析,最后通过前端页面对数据进行可视化展示。主要选取首页热门排行榜单中的热门视频的一些基本信息,并对获取的数据进行数据清理,数据分析并实现数据可视化展示。整体项目主要基于flask框架实现,项目设计前后端交互,基于观众对视频的点赞、投币、收藏等信息选取特征值,设计算法对数据进行更深层次的分析。
2022-11-24 20:18:37 662.88MB flaskpython数据可
1
短视频上热门专用软件.apk,视频剪辑,短视频素材、短视频文案库、短视频配音软件,短视频搬运软件、视频去重消重软件、短视频超级混剪软件、抖音、快手短视频必备工具。 搞笑段子素材、自媒体视频素材、成品视频素材、高清励志视频素材、高清无水印短视频素材库。
1