简单爬取小说

import urllib.request import re #爬取小说是最基础的爬虫,学会思路就能去做一些高级爬虫,思路一样,只是用的库或者JS或者异步等问题不同而已 url = "https://www.qb5200.tw/xiaoshuo/36/36143/"#爬取的小说网址 with urllib.request.urlopen(url) as doc: html = doc.read()#读取网页 html = html.decode("gbk")#解码
分类: 其他 发布时间: 05-25 23:01 阅读次数: 0

THUSC2019 游记

非常抱歉,这篇文章鸽了
分类: 其他 发布时间: 05-25 23:01 阅读次数: 0

Tensorflow without a phd master 1——Jetson nano初体验5

目录 Tensorflow without a phd master 1 1. tensorflow-mnist-tutorial 1.1 概述 1.2 准备:安装 TensorFlow,获取示例代码 1.3 单层神经网络 1.4 理论:梯度下降 1.5 添加更多的隐层 1.6 改进 1.6.1 RuLU激活函数(Rectified Linear Unit) 1.6.2 优化器(Optimizer) 1.6.3 随机初始化(Random initialisations) 1.7 降低学习率(l
分类: 其他 发布时间: 05-25 23:01 阅读次数: 0

redis详细配置

1 ##redis配置详解 2 3 # Redis configuration file example. 4 # 5 # Note that in order to read the configuration file, Redis must be 6 # started with the file path as first argument: 7 # 8 # ./redis-server /path/to/redis.conf
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

数据挖掘之产品预测任务

一、实验目的 1. 学会利用决策树、KNN与Navie Bayes完成预测任务 二、实验工具 1. Anaconda 2. sklearn 3. Pandas 三、实验内容 产品预测任务 1.任务描述 本次比赛主要是一个对进出口交易记录数据进行产品判别的任务。本次任务有 19046 条数据记录,其中的 18279 条记录是有类别属性的,可作为分析时的训练样本,而任务目标是对 767 条测试数据(即验证样本)进行判别(本实验采用其中的20个样本)。 1) 数据描述 已分类的训练样本提供在比赛题目
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

python学习第一天 随手记

接口测试 在接口测试中,首先要有一个接口文档,文档中包括接口地址,请求方式,请 求参数,返回参数等接口信息。 get请求可以直接在请求地址后面拼接请求参数,第一个参数使用?关联,后面 参数使用&关联 postman使用 postman选择请求方式,填写请求地址,在Body填写key value即请求参数与参数值 raw填写json格式的请求参数 若接口需要登录后调用,则在header中添加cookie信息 session与cookie的区别 session保存在服务器端 cookie保存在客户
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

spring-cloud-sleuth学习入口

https://spring.io/projects/spring-cloud-sleuth https://cloud.spring.io/spring-cloud-sleuth/spring-cloud-sleuth.html code: https://github.com/pascal19821003/micserver2019 如有技术问题,可以一起讨论,个人微信: 138:) 1725:)2511
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

cread and close

可以通过open或openat函数创建新的文件,当然,也有专门用来创建文件的函数creat #include <fcntl.h> int creat(const char *path, mode_t mode); 返回值:成功,返回为只写打开的文件描述符;出错,返回-1 注:   ①等效于:open(patn, O_WRONLY|O_CREAT|O_TRUNC, mode)   ②该函数的不足在于只能以写的方式打开创建的文件,如果想要读这个新创建的文件就要close,再使用open打开。 调用
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

gcc编译中文字符串后,windows控制台输出乱码

一直写单片机程序,上位机程序一点都不会,^-^! 现在写了个简单的C程序,结果还遇到一堆问题…… #include<stdio.h> //printf()的头文件 #include<stdlib.h>//system()的头文件 int main(void) { printf("nihao,\n"); system("pause");//防止控制台闪退 printf("你的名字: \n"); system("pause");//防止控制台闪退
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

本文主要研究一下Elasticsearch的JvmStats

本文主要研究一下Elasticsearch的JvmStats JvmStats elasticsearch-7.0.1/server/src/main/java/org/elasticsearch/monitor/jvm/JvmStats.java public class JvmStats implements Writeable, ToXContentFragment { private static final RuntimeMXBean runtimeMXBean; private s
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

E. Minimum Array(贪心)

题目链接:https://codeforces.com/problemset/problem/1157/E 题目大意: 首先输入一个n,然后输入a数组,有n个数。然后输入b数组,也有n个数。然后你可以对b数组进行排序,使得(a[i]+b[i])%n从1~n的字典序最小。 具体思路: 通过分析数据范围,我们可以知道两个数相加凑出来n是最合理的,对于当前的数t1,我们要找的是 n-t1 ,如果没有就找n-t2,如果到n还没有,就从0开始凑。 (貌似set自带的二分好像比普通的lower_bound
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

初识PIXI.js

由于项目需要接触到PIXI这个框架,故开始了一顿打头操作 由于目前PIXI的文档还是很少,而且大多数是英文文档这里提供几个PIXI的demo和文档 demo: http://47.99.120.179/pixi/v4/#/demos-basic/container.js API:http://pixijs.download/release/docs/index.html 中文文档:https://www.bookstack.cn/read/LearningPixi/introduction 按
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

npm构建vue项目

环境搭建 我们需要先从node.js官网安装node,安装过程很简单,一路“下一步”就可以了(傻瓜式安装)。 安装完成之后,打开命令行工具(Mac打开终端),输入 node -v,如图,如果出现相应的版本号,则说明安装成功。 node -v 那么此时你发现你不仅拥有了node环境而且还有了npm包管理器,岂不快哉! 安装vue-cli脚手架构建工具 在命令行中运行命令 npm install vue-cli -g ,然后等待安装完成。(这里不建议使用cnpm,据说使用cnpm安装有几率会出现一
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

Java 待学习知识

Java 工厂模式和策略模式 Java 面向对象与面向接口的设计模式 Java 六大设计原则 - 单一职责原则  设计模式之禅
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

crawlSpider,分布式爬虫,增量式爬虫

一 . crawlSpider   1. 上次了一种爬取全站数据是基于Scrapy框架中的Spider的递归爬取进行实现(Requests模块递归回调parse方法).   2. 现在在讲介绍一种比较好用的方法:基于CrawlSpider的自动爬取进行实现(更加的简洁高效).   crawlSpider的简介   CrawlSpider其实是Spider的一个子类,除了继承到Spider的特性和功能外,还派生除了其自己独有的更加强大的特性和功能。 其中最显著的功能就是”LinkExtracto
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

修改apache的网站根目录

花了两个小时,一直在重复,最后想放弃的时候瞥见了一句英文。。。 环境:1、ubuntu18 2、apache2 1、在/etc/apache2/apache2.conf中 有这么一段代码 # Sets the default security model of the Apache2 HTTPD server. It does # not allow access to the root filesystem outside of /usr/share and /var/www
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

项目Beta冲刺(3/7)(追光的人)(2019.5.25)

所属课程 软件工程1916 作业要求 Beta冲刺博客汇总 团队名称 追光的人 作业目标 描述Beta冲刺每日的scrum和PM报告两部分 队员学号 队员博客 221600219 小墨 https://www.cnblogs.com/hengyumo/ 221600240 真·大能猫 https://www.cnblogs.com/PowerfulPanda/ 221600212 kilig https://www.cnblogs.com/kilig98/ 221600414 codingka
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

爬取豆瓣top250

#xpath #第一种方法 可在开发者工具中找到标签,右键copy xpath,有时需去掉tbody标签 #第二种方法 简单学习xpath,自己书写,掌握基本语法即可,简单的层级关系 #先将csv文件以记事本打开,更改编码为ASNI,保存,再用excel打开即可 import urllib.request import urllib.parse import csv from lxml import etree #需要cmd pip install lxml
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

App性能测试点总结

一、内存 测试范围 1. 空闲状态下的应用内存消耗情况 2. 中等规格状态下的应用内存消耗情况 3. 满规格状态下的应用内存消耗情况 4. 应用内存峰值情况 5. 应用内存泄露情况 6. 应用是否常驻内存 7. 压力测试后的内存使用情况 测试方法 1. 第三方工具emmage,GT,itest,wetest 2. 使用 android 提供的 adb shell dumpsys meminfo |grep packagename >/address/mem.txt 来获取 3. 使用 andr
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0

TensorFlow——tensorflow编程基础

0.tensorflow中的模型运行基础 tensorflow的运行机制属于定义和运行相分离,在操作层面可以抽象成两种:模型构建和模型运行。 在模型构建中的常见概念:   张量(tensor):数据,即某一类型的多为数组   变量(Variable):常用于定义模型中的参数,是通过不断训练得到的值   占位符(placeholder):输入变量的载体,也可以理解成模型的参数   图中的节点操作(operation,op):即一个op获得0个或多个tensor,执行得到,输出得到的tensor
分类: 其他 发布时间: 05-25 22:44 阅读次数: 0