flower

TensorFlow2.0(10):加载自定义图片数据集到Dataset

ⅰ亾dé卋堺 提交于 2020-04-18 12:18:59
前面的博客中我们说过,在加载数据和预处理数据时使用tf.data.Dataset对象将极大将我们从建模前的数据清理工作中释放出来,那么,怎么将自定义的数据集加载为DataSet对象呢?这对很多新手来说都是一个难题,因为绝大多数案例教学都是以mnist数据集作为例子讲述如何将数据加载到Dataset中,而英文资料对这方面的介绍隐藏得有点深。本文就来捋一捋如何加载自定义的图片数据集实现图片分类,后续将继续介绍如何加载自定义的text、mongodb等数据。 如果你已有数据集,那么,请将所有数据存放在同一目录下,然后将不同类别的图片分门别类地存放在不同的子目录下,目录树如下所示: $ tree flower_photos -L 1 flower_photos ├── daisy ├── dandelion ├── LICENSE.txt ├── roses ├── sunflowers └── tulips 所有的数据都存放在flower_photos目录下,每一个子目录(daisy、dandelion等等)存放的都是一个类别的图片。如果你已有自己的数据集,那就按上面的结构来存放,如果没有,想操作学习一下,你可以通过下面代码下载上述图片数据集: In [ ]: import tensorflow as tf import pathlib data_root_orig = tf .

如何把pyecharts的炫酷延续到PPT里!?

狂风中的少年 提交于 2020-04-16 14:57:14
【推荐阅读】微服务还能火多久?>>> 大家好,我是小z 这几天,群里有些小伙伴被一个奇怪的需求困住: “pyecharts作图既炫酷,又交互。但是,这个炫酷的效果往往只存在于分析师自己的编辑器中,充其量也就是生成一个html文件来嗨一嗨, 有没有什么办法能够嵌入PPT呢? ” “为什么想要嵌入PPT呢?”我有点疑惑。 “对于分析师来说,PPT才是和业务沟通的主战场,当然了,更是装X的主战场。有时候,一张炫酷的图,能让会议室所有的人喊一声牛X!” “有啊!截图放进去呗~”机智如我。 “没有交互功能的pyecharts,是没有灵魂的!” ..... 于是我搜罗了一圈,结果发现,关于如何实现这个需求的内容,要么语焉不详,要么极其麻烦,要么已经过时完全不兼容。 最后,我找到了一个目前相对简便的方法,分享给大家。 这句话有强烈的潜台词:此乃抛砖引玉,旁友们,苟有方法,勿相忘! 这个方法的逻辑其实非常简单,可以说是一道小学应用题: 已知,pyecharts绘制的图形可以保存为html格式,通过网页打开,也能查看html源代码 又已知,有一款ppt插件,可以编辑html文本代码,最终生成对应的可视化效果 求:如何让pyecharts图在ppt中出现? 答:先用pyecharts画图生成html文件,然后查看源代码,把相关的源代码复制到那个PPT插件中,点击运行即可。

13块钱DIY微信小程序远程浇花神器

若如初见. 提交于 2020-04-11 16:33:02
文章目录 前言 1 方案简介 1.1 总体方案 1.2 关于节点功能的考虑 1.3 关于联网方式的考虑 2 详细设计方案及实现 2.1 浇花器硬件设计 2.2 浇花器软件设计 2.3 腾讯云 IoT Explorer 产品及设备处理 2.4 微信小程序 3 成果展示 END 前言 去年7月的时候,公司办了一场王者荣耀大赛,我和同事们也报名参加了。首局比赛就给我们泼了冷水,“深圳湾一号业主”无情摧残了“祖国的花朵”。 作为“祖国的花朵”队的替补射手,我心如刀割。 “为什么这样对祖国的花朵?你们平常不种花的吗?” “没办法啊,你知道深圳湾一号这种房子很大的,每天浇花得走好久。” “哼!总有一天我会让你们明白!” 小能手当时就下了决心,必须要让“深圳湾一号业主”明白,要让他们明白,房子再大也是可以轻松浇花的! ​没过几天,小能手就基于腾讯云物联网开发平台做出来一个浇花器,随时随地打开微信小程序就可以查看盆栽的土壤情况,并且进行远程浇花。这样,长期出差的朋友,以及阳台路程达10分钟的业主们,都得以轻松呵护自己的花花草草。 这篇文章梳理了当时的方案设计和实现,给朋友们做个参考。 腾讯云 IoT Explorer 是腾讯云主推的一站式物联网开发平台,IoT 小能手从设备侧开发、平台功能操作、应用侧开发三个部分来进行学习分享,另外还分享了一些动手实践作品及收录官方发布的产业合作案例

CentOS7安装Logstash7.3从mysql导数据到ES

穿精又带淫゛_ 提交于 2020-02-27 13:08:41
1. 下载 官网: https://www.elastic.co/downloads/logstash 7.3.0链接: https://pan.baidu.com/s/1SnIcXBNjWRBpnZJ1b3NUyA 提取码:lids 2. rz上传到/usr/local并解压 3. 测试 cd /usr/local/logstash-7.3.0 ./bin/logstash -e "" 4. 安装logstash-input-jdbc gem -v yum install gem ./bin/logstash-plugin install logstash-input-jdbc 如果不成功可参考: https://blog.csdn.net/chenguihua5/article/details/90316484 5. 从mysql导入数据到es 下载mysql-connector-java驱动包(也可以从maven库找:repository\mysql\mysql-connector-java) 上传到/usr/local/lib(或者其他位置) 进入config目录设置配置文件 cd config/ 配置mysql查询语句 vim jdbc.sql 例: select * from flower_shop 配置模板 vim template.json 例: {

一文教你如何用Redis构建高性能锁

我的未来我决定 提交于 2020-02-26 23:32:33
前言 在这里粗略的说一下,zk锁性能比redis低的原因:zk中的角色分为leader,flower,每次写请求只能请求leader,leader会把写请求广播到所有flower,如果flower都成功才会提交给leader,其实这里相当于一个2PC的过程。在加锁的时候是一个写请求,当写请求很多时,zk会有很大的压力,最后导致服务器响应很慢。 正题: 什么情况下需要加锁? 当多个线程、用户同时竞争同一个资源时,需要加锁。比如,下订单减库存,抢票,选课,抢红包等。如果在此处没有锁的控制,会导致很严重的问题,下订单减库存的时候不加锁,会导致商品超卖;抢票的时候不加锁,会导致两个人抢到同一个位置;选课的时候没有锁的控制,导致选课成功的人数大于教室的座位数;抢红包时没有锁的控制,抢到红包的金额大于红包的实际金额。 什么是分布式锁? 学过JAVA多线程的朋友都知道,为了防止多个线程同时执行同一段代码,可以用synchronized关键字或JAVA API中ReentrantLock类来控制。 但是目前几乎任何一个系统都往往部署多台机器的,单机部署的应用很少,synchronized和ReentrantLock发挥不出任何作用,此时就需要一把全局的锁,来代替JAVA中的synchronized和ReentrantLock。 当Thread1线程获取到锁,执行锁中的代码

Celery works, but with flower doesn't work

六眼飞鱼酱① 提交于 2020-01-12 07:45:09
问题 I have installed celery and RabitMQ and flower. I am able to browse to the flower port. I have the following simple worker that I can attach to celery and call from a python program: # -*- coding: utf-8 -*- """ Created on Sat Dec 12 16:37:33 2015 @author: idf """ from celery import Celery app = Celery('tasks', broker='amqp://guest@localhost//') @app.task def add(x, y): return x + y This program calls it # -*- coding: utf-8 -*- """ Created on Sat Dec 12 16:40:16 2015 @author: idf """ from

Celery task history

时间秒杀一切 提交于 2019-12-22 06:56:46
问题 I am building a framework for executing tasks on top of Celery framework. I would like to see the list of recently executed tasks (for the recent 2-7 days). Looking on the API I can find app.backend object, but cannot figure out how to make a query to fetch tasks. For example I can use backends like Redis or database. I do not want to explicitly write SQL queries to database. Is there a way to work with task history/results with API? I tried to use Flower, but it can only handle events and

How do I add authentication and endpoint to Django Celery Flower Monitoring?

瘦欲@ 提交于 2019-12-21 03:34:10
问题 I've been using flower locally and it seems easy enough to setup and run, but I can't see how I would set it up in a production environment. In particular, how can I add authentication and how would I define a url to access it? 回答1: For custom address, use the --address flag. For auth, use the --basic_auth flag. See below: # celery flower --help Usage: /usr/local/bin/celery [OPTIONS] Options: --address run on the given address --auth regexp of emails to grant access --basic_auth colon

Flush Flower database occasionally and/or exit gracefully from Docker?

家住魔仙堡 提交于 2019-12-11 13:55:49
问题 I'm running Celery Flower in Docker (see this question for details). The command ends up being: celery -A proj flower --persistent=True --db=/flower/flower I've got a persistent volume all set up on /flower . However, it looks like Flower never writes anything to its database file, even after 30 minutes of uptime (during which ~120 tasks were processed): -rw-r--r-- 1 user user 0 Mar 11 00:08 flower.bak -rw-r--r-- 1 user user 0 Mar 10 23:29 flower.dat -rw-r--r-- 1 user user 0 Mar 11 00:08

Celery Flower - how can i load previous catched tasks?

浪子不回头ぞ 提交于 2019-12-11 06:45:02
问题 I started to use celery flower for tasks monitoring and it is working like a charm. I have one concern though, how can i "reload" info about monitored tasks after flower restart ? I use redis as a broker, and i need to have option to check on tasks even in case of unexpected restart of service (or server). Thanks in advance 回答1: I found i out. It is the matter of setting the persistant flag in command running celery flower. 来源: https://stackoverflow.com/questions/22553659/celery-flower-how