localtime

localtime相关知识

• 6.Java8新特性 - 时间与日期API

  一、时间日期类Java 8 在 java.time 包下提供了很多新的 API。以下为两个比较重要的 API：Local(本地) − 简化了日期时间的处理，没有时区的问题。Zoned(时区) − 通过制定的时区处理日期时间。二、本地化时间日期 APILocalDate、LocalTime 和 LocalDateTime 类可以处理没有时区问题的情况获取本地时间LocalDate localDate = LocalDate.now(); LocalDateTime localDateTime = LocalDateTime.now(); LocalTime localTime = LocalTime.now(); System.out.println(localDate); System.out.println(localDateTime); System.out.println(localTime);//输出:&nbs
• 如何设置Pod时区？

  在kubernetes集群中运行的容器默认会使用格林威治时间，即北京时间为12点时，容器时间为4点，而有些分布式系统对于时间是极为敏感的，时间误差是不允许出现的。为了保持容器时间与宿主机时间同步，可以使用hostPath的方式将宿主机上的时区文件挂载到容器中。比如当前宿主机的时区为Asia/Shanghai,那么/etc/localtime会链接到/usr/share/zoneinfo/Asia/Shanghai[root@localhost ~]# ll /etc/localtime lrwxrwxrwx. 1 root root 35 Jul 12 14:26 /etc/localtime -> ../usr/share/zoneinfo/Asia/Shanghai如果需要系统修改时区，那么只需要将时区文件覆盖到/etc/localtime,如cp 
• MySQL 获得当前日期时间的函数小结

             1.1 获得当前日期+时间（date + time）函数：now() mysql> select now(); +---------------------+ | now() | +---------------------+ | 2008-08-08 22:20:46 | +---------------------+ 除了 now() 函数能获得当前的日期时间外，MySQL 中还有下面的函数： current_timestamp() ,current_timestamp ,localtime() ,localtime ,localtimestamp -- (v4.0.6) ,localtimestamp() -- (v4.0.6) 这些日期时间函数，都等同于 now()。鉴于 now() 函数简短易记，建议总是使用 now() 来替代上面列出的函数。 1.2 获得当前日期+时间（date + time）函数：sysd
• 基于docker部署的微服务架构（五）： docker环境下的zookeeper和kafka部署

  kafka简单介绍Kafka 是 LinkedIn  开源的一种高吞吐量的分布式发布订阅消息系统，kafka的诞生就是为了处理海量日志数据，所以kafka处理消息的效率非常高，即使是非常普通的硬件也可以支持每秒数百万的消息。kafka 天然支持集群负载均衡，使用 zookeeper 进行分布式协调管理。不支持事务，有一定概率丢失消息。kafka 的特点，决定了使用场景：日志中间件。下载docker镜像zookeeker: docker pull zookeeper:latest  kafka: docker pull wurstmeister/kafka:latest创建并启动容器先启动zookeeper:docker run -d --name zookeeper --publish 2181:2181 \ --volume /etc/localtime:/etc/localtime \ zook

localtime相关课程

• 强力Django+ 杀手级xadmin开发在线教育网站 （全新开发） Django＋xadmin一套通用的技术组合拳，助你解决大部分Python类网站后端问题

  中级 1442人正在学习

• Python操作三大主流数据库 实战网易新闻客户端（2021 年最新版） 零基础快速进阶，专为只懂Python语法的同学设计

  入门 170人正在学习

• Swoole入门到实战打造高性能赛事直播平台 swoole创始人推荐课程，借助Swoole打造高性能直播平台，进阶PHP中高级工程师

  中级 2228人正在学习

localtime相关教程

• 5.3 LocalDateTime 相关类的使用 import java.time.LocalDate;import java.time.LocalDateTime;import java.time.LocalTime;/** * @author colorful@TaleLin */public class LocalDateTimeDemo1 { public static void main(String[] args) { // 获取当前日期 LocalDate localDate = LocalDate.now(); // 获取当前时间 LocalTime localTime = LocalTime.now(); // 获取当前日期和时间 LocalDateTime localDateTime = LocalDateTime.now(); // 打印 System.out.println(localDate); System.out.println(localTime); System.out.println(localDateTime); }}运行结果：2020-06-1014:17:48.6182942020-06-10T14:17:48.618421在实际开发中，LocalDateTime 相较于 LocalDate 和 LocalTime 更加常用。本地日期和时间通过 now() 获取到的总是以当前默认时区返回的。另外，可以使用 of() 方法来设置当前日期和时间：// 2020-9-30LocalDate date = LocalDate.of(2020, 9, 30);// 14:15:10LocalTime time = LocalTime.of(14, 15, 10);// 将date和time组合成一个LocalDateTimeLocalDateTime dateTime1 = LocalDateTime.of(date, time);// 设置 年、月、日、时、分、秒LocalDateTime dateTime2 = LocalDateTime.of(2020, 10, 21, 14, 14);
• 5.2 新 API 概述 新的日期时间 API 吸取了 Joda-Time 的精华，提供了更优秀易用的 API，位于 java.time 包中，包含了 LocalTime（本地时间）、LocalDate（本地日期）、LocalDateTime（本地日期时间）、ZonedDateTime（带时区的日期时间）和 Duration（时间间隔）类。而 java.util.Date 类下面增加了 toInstant() 方法，用于把 Date 转换为新的类型。这些 API 大大简化了日期时间的运算。对偏移性的不合理设计也有修正：月份使用 1~12 表示 1 月 到 12 月，星期使用 1 ~ 7 表示星期一到星期天。另外，使用了新的 DateTimeFormatter 来取代旧的 SimpleDateFormat。
• 2. 基于 Scrapy 框架的头条热点新闻数据爬取 还是按照我们以前的套路来进行，第一步是使用 startproject 命令创建热点新闻项目：[root@server ~]# cd scrapy-test/[root@server scrapy-test]# pyenv activate scrapy-testpyenv-virtualenv: prompt changing will be removed from future release. configure `export PYENV_VIRTUALENV_DISABLE_PROMPT=1' to simulate the behavior.(scrapy-test) [root@server scrapy-test]# scrapy startproject toutiao_hotnewsNew Scrapy project 'toutiao_hotnews', using template directory '/root/.pyenv/versions/3.8.1/envs/scrapy-test/lib/python3.8/site-packages/scrapy/templates/project', created in: /root/scrapy-test/toutiao_hotnewsYou can start your first spider with: cd toutiao_hotnews scrapy genspider example example.com(scrapy-test) [root@server scrapy-test]#接着，根据我们要抓取的新闻数据字段，先定义好 Item：import scrapyclass ToutiaoHotnewsItem(scrapy.Item): # define the fields for your item here like: # name = scrapy.Field() title = scrapy.Field() abstract = scrapy.Field() source = scrapy.Field() source_url = scrapy.Field() comments_count = scrapy.Field() behot_time = scrapy.Field()有了 Item 之后，我们需要新建一个 Spider，可以使用 genspider 命令生成，也可以手工编写一个 Python 文件，代码内容如下：# 代码位置：toutiao_hotnews/toutiao_hotnews/spiders/hotnews.pyimport copyimport hashlibfrom urllib.parse import urlencodeimport jsonimport timefrom scrapy import Request, Spiderfrom toutiao_hotnews.items import ToutiaoHotnewsItemhotnews_url = "https://www.toutiao.com/api/pc/feed/?"params = { 'category': 'news_hot', 'utm_source': 'toutiao', 'widen': 1, 'max_behot_time': '', 'max_behot_time_tmp': '', 'as': '', 'cp': ''}headers = { 'referer': 'https://www.toutiao.com/ch/news_hot/', 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.112 Safari/537.36'}cookies = {'tt_webid':'6856365980324382215'} max_behot_time = '0'def get_as_cp(): # 该函数主要是为了获取as和cp参数，程序参考今日头条中的加密js文件：home_4abea46.js zz = {} now = round(time.time()) e = hex(int(now)).upper()[2:] a = hashlib.md5() a.update(str(int(now)).encode('utf-8')) i = a.hexdigest().upper() if len(e) != 8: zz = {'as':'479BB4B7254C150', 'cp':'7E0AC8874BB0985'} return zz n = i[:5] a = i[-5:] r = '' s = '' for i in range(5): s = s + n[i] + e[i] for j in range(5): r = r + e[j + 3] + a[j] zz ={ 'as': 'A1' + s + e[-3:], 'cp': e[0:3] + r + 'E1' } return zzclass HotnewsSpider(Spider): name = 'hotnews' allowed_domains = ['www.toutiao.com'] start_urls = ['http://www.toutiao.com/'] # 记录次数，注意停止 count = 0 def _get_url(self, max_behot_time): new_params = copy.deepcopy(params) zz = get_as_cp() new_params['as'] = zz['as'] new_params['cp'] = zz['cp'] new_params['max_behot_time'] = max_behot_time new_params['max_behot_time_tmp'] = max_behot_time return "{}{}".format(hotnews_url, urlencode(new_params)) def start_requests(self): """ 第一次爬取 """ request_url = self._get_url(max_behot_time) self.logger.info(f"we get the request url : {request_url}") yield Request(request_url, headers=headers, cookies=cookies, callback=self.parse) def parse(self, response): """ 根据得到的结果得到获取下一次请求的结果 """ self.count += 1 datas = json.loads(response.text) data = datas['data'] for d in data: item = ToutiaoHotnewsItem() item['title'] = d['title'] item['abstract'] = d.get('abstract', '') item['source'] = d['source'] item['source_url'] = d['source_url'] item['comments_count'] = d.get('comments_count', 0) item['behot_time'] = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime(d['behot_time'])) self.logger.info(f'得到的item={item}') yield item if self.count < self.settings['REFRESH_COUNT']: max_behot_time = datas['next']['max_behot_time'] self.logger.info("we get the next max_behot_time: {}, and the count is {}".format(max_behot_time, self.count)) yield Request(self._get_url(max_behot_time), headers=headers, cookies=cookies)这里的代码之前一样，第一次构造 Request 请求在 start_requests() 方法中，接下来在根据每次请求结果中获取 max_behot_time 值再进行下一次请求。另外我使用了全局计算变量 count 来模拟刷新的次数，控制请求热点新闻次数，防止无限请求下去。此外，Scrapy logger 在每个 spider 实例中提供了一个可以访问和使用的实例，我们再需要打印日志的地方直接使用 self.logger 即可，它对应日志的配置如下：# 代码位置：toutiao_hotnews/settings.py# 注意设置下下载延时DOWNLOAD_DELAY = 5# ...#是否启动日志记录，默认TrueLOG_ENABLED = True LOG_ENCODING = 'UTF-8'#日志输出文件，如果为NONE，就打印到控制台LOG_FILE = 'toutiao_hotnews.log'#日志级别，默认DEBUGLOG_LEVEL = 'INFO'# 日志日期格式 LOG_DATEFORMAT = "%Y-%m-%d %H:%M:%S"#日志标准输出，默认False，如果True所有标准输出都将写入日志中，比如代码中的print输出也会被写入到LOG_STDOUT = False接下来是 Item Pipelines 部分，这次我们将抓取到的新闻保存到 MySQL 数据库中。此外，我们还有一个需求就是选择当前最新的10条新闻发送到本人邮件，这样每天早上就能定时收到最新的头条新闻，岂不美哉。首先我想给自己的邮件发送 HTML 格式的数据，然后列出最新的10条新闻，因此第一步是是准备好模板热点新闻的模板页面，具体模板页面如下：# 代码位置: toutiao_hotnews/html_template.pyhotnews_template_html = """<!DOCTYPE html><html><head> <title>头条热点新闻一览</title></head><style type="text/css"></style><body><div class="container"><h3 style="margin-bottom: 10px">头条热点新闻一览</h3>$news_list</div></body></html>"""要注意一点，Scrapy 的邮箱功能只能发送文本内容，不能发送 HTML 内容。为了能支持发送 HTML 内容，我继承了原先的 MailSender 类，并对原先的 send() 方法稍做改动：# 代码位置: mail.pyimport logging from email import encoders as Encodersfrom email.mime.base import MIMEBasefrom email.mime.multipart import MIMEMultipartfrom email.mime.nonmultipart import MIMENonMultipartfrom email.mime.text import MIMETextfrom email.utils import COMMASPACE, formatdatefrom scrapy.mail import MailSenderfrom scrapy.utils.misc import arg_to_iterlogger = logging.getLogger(__name__)class HtmlMailSender(MailSender): def send(self, to, subject, body, cc=None, mimetype='text/plain', charset=None, _callback=None): from twisted.internet import reactor #####去掉了与attachs参数相关的判断语句,其余代码不变############# msg = MIMEText(body, 'html', 'utf-8') ########################################################## to = list(arg_to_iter(to)) cc = list(arg_to_iter(cc)) msg['From'] = self.mailfrom msg['To'] = COMMASPACE.join(to) msg['Date'] = formatdate(localtime=True) msg['Subject'] = subject rcpts = to[:] if cc: rcpts.extend(cc) msg['Cc'] = COMMASPACE.join(cc) if charset: msg.set_charset(charset) if _callback: _callback(to=to, subject=subject, body=body, cc=cc, attach=attachs, msg=msg) if self.debug: logger.debug('Debug mail sent OK: To=%(mailto)s Cc=%(mailcc)s ' 'Subject="%(mailsubject)s" Attachs=%(mailattachs)d', {'mailto': to, 'mailcc': cc, 'mailsubject': subject, 'mailattachs': len(attachs)}) return dfd = self._sendmail(rcpts, msg.as_string().encode(charset or 'utf-8')) dfd.addCallbacks( callback=self._sent_ok, errback=self._sent_failed, callbackArgs=[to, cc, subject, len(attachs)], errbackArgs=[to, cc, subject, len(attachs)], ) reactor.addSystemEventTrigger('before', 'shutdown', lambda: dfd) return dfd紧接着就是我们的 pipelines.py 文件中的代码：import loggingfrom string import Templatefrom itemadapter import ItemAdapterimport pymysqlfrom toutiao_hotnews.mail import HtmlMailSenderfrom toutiao_hotnews.items import ToutiaoHotnewsItemfrom toutiao_hotnews.html_template import hotnews_template_htmlfrom toutiao_hotnews import settingsclass ToutiaoHotnewsPipeline: logger = logging.getLogger('pipelines_log') def open_spider(self, spider): # 使用自己的MailSender类 self.mailer = HtmlMailSender().from_settings(spider.settings) # 初始化连接数据库 self.db = pymysql.connect( host=spider.settings.get('MYSQL_HOST', 'localhost'), user=spider.settings.get('MYSQL_USER', 'root'), password=spider.settings.get('MYSQL_PASS', '123456'), port=spider.settings.get('MYSQL_PORT', 3306), db=spider.settings.get('MYSQL_DB_NAME', 'mysql'), charset='utf8' ) self.cursor = self.db.cursor() def process_item(self, item, spider): # 插入sql语句 sql = "insert into toutiao_hotnews(title, abstract, source, source_url, comments_count, behot_time) values (%s, %s, %s, %s, %s, %s)" if item and isinstance(item, ToutiaoHotnewsItem): self.cursor.execute(sql, (item['title'], item['abstract'], item['source'], item['source_url'], item['comments_count'], item['behot_time'])) return item def query_data(self, sql): data = {} try: self.cursor.execute(sql) data = self.cursor.fetchall() except Exception as e: logging.error('database operate error:{}'.format(str(e))) self.db.rollback() return data def close_spider(self, spider): sql = "select title, source_url, behot_time from toutiao_hotnews where 1=1 order by behot_time limit 10" # 获取10条最新的热点新闻 data = self.query_data(sql) news_list = "" # 生成html文本主体 for i in range(len(data)): news_list += "<div><span>{}、<a href=https://www.toutiao.com{}>{} [{}]</a></span></div>".format(i + 1, data[i][1], data[i][0], data[i][2]) msg_content = Template(hotnews_template_html).substitute({"news_list": news_list}) self.db.commit() self.cursor.close() self.db.close() self.logger.info("最后统一发送邮件") # 必须加return，不然会报错 return self.mailer.send(to=["2894577759@qq.com"], subject="这是一个测试", body=msg_content, cc=["2894577759@qq.com"])这里我们会将 MySQL 的配置统一放到 settings.py 文件中，然后使用 spider.settings 来读取响应的信息。其中 open_spider() 方法用于初始化连接数据库，process_item() 方法用于生成 SQL 语句并提交插入动作，最后的 close_spider() 方法用于提交数据库执行动作、关闭数据库连接以及发送统一新闻热点邮件。下面是我们将这个 Pipeline 在 settings.py 中开启以及配置数据库信息、邮件服务器信息，同时也要注意关闭遵守 Robot 协议，这样爬虫才能正常执行。ROBOTSTXT_OBEY = False# 启动对应的pipelineITEM_PIPELINES = { 'toutiao_hotnews.pipelines.ToutiaoHotnewsPipeline': 300,}# 数据库配置MYSQL_HOST = "180.76.152.113"MYSQL_PORT = 9002MYSQL_USER = "store"MYSQL_PASS = "数据库密码"MYSQL_DB_NAME = "ceph_check"# 邮箱配置MAIL_HOST = 'smtp.qq.com'MAIL_PORT = 25MAIL_FROM = '2894577759@qq.com'MAIL_PASS = '你的授权码'MAIL_USER = '2894577759@qq.com'来看看我们这个头条新闻爬虫的爬取效果，视频演示如下：83
• 9-7 单点登录token与JWT介绍 SpringBoot知识体系实战WIKI
• typescript 基础 一句话介绍
• 引用对象的原子更新 刚入行的Java开发者，总会遇到这样那样的坑。资深

localtime相关搜索

label labelfor label标签 lambda lambda表达式 lamda lang last latin latin1 layers layui leave left leftarrow legend length lengths length函数 less

查看更多慕课网实用课程