中企动力 > 头条 > python比较数字大小

网站性能检测评分

注:本网站页面html检测工具扫描网站中存在的基本问题,仅供参考。

python比较数字大小

Python读书笔记(数字型数据) 企业视频课程

img

水仔仔

关注

Python与其它编程语言一样,常见的数字型无法整型(int)和浮点型两种(Float)两种。

整型就是整数,浮点型就是小数。

如果在Python中输入一个数字,则默认为10进制的,如何变为2进制、8进制和16进制的呢?

1、输入0b开头为二进制

2、输入0o开头为八进制

3、输入0x开头为十六进制

Python在IDLE中将不同进制的数字转化为10进制的数字!

换算进制用处比较少,还说说和Excel一样常用的一些运算字符吧!

在Python上应用效果如下!

相对于Excel,Python的整除和求余不用借助外在函数,直接用运算符实现即可!

接下来和大家分享的是如何将文本强制转化为数字。

Excel当中如何将文本强制转换为数字呢?

如果你回答用阿凯的Excel插件,那么可以奖励你中午多吃一个鸡腿!

至于另一种笨但是通用的方法嘛就是强制进行数字运算!

用等于号将文本加上0就可以实现强制数字转化,Python如何实现呢?

当用文本的3.14加上一个数字1是不能直接出来运算结果的,当int直接转化字符串3.14时也没有转化成功,给大家介绍两个东东!

先说明一下哦!双引号下都是文本的,和Excel是一样的。

所以用Int和Float可以转化文本至数字,但是如果原有文本是小数,不能用Int转化的。

但是原有文本里面是整数,可以用Float转化,转化后是保留一位小数的浮点数!

最后给大家介绍一个数字中的常见函数,保留N位小数,这个函数和Excel是一样的用法哦!

Round(小数,保留几位小数)

嗯 就这么多~

往期:

1、软件安装

2、变量

Python实战6:图片右上角加数字,类似微信的未读信息条数的效果 行业视频课程

img

沉重

关注

运行效果:

代码的文本内容:

from PIL import Image,ImageDraw,ImageFontim=Image.open(r'C:UsersAdministratorDesktopa.png') #打开一张图片x=im.size; #获取图片的大小y=(x[0]-22,0); #获取右上角红色圆圈中字体的位置z=(x[0]-25,0,x[0],25) #获取右上角红色圆圈的位置,设置的圆的直径为25draw=ImageDraw.Draw(im)draw.ellipse(z,fill='red',outline='red') #在图片右上角画圆font1=ImageFont.truetype("simsun.ttc",20,index=1) #设置字体样式draw.text(y, '30', fill=(255, 255, 255),font=font1) #在圆内写入数字;im.show()

使用 python 分析 14 亿条数据 公司视频课程

img

苔丝

关注

Google Ngram viewer是一个有趣和有用的工具,它使用谷歌从书本中扫描来的海量的数据宝藏,绘制出单词使用量随时间的变化。举个例子,单词 Python (区分大小写) :

这幅图来自: books.google/ngrams/grap… ,描绘了单词 ‘Python’ 的使用量随时间的变化。

它是由谷歌的n-gram 数据集驱动的,根据书本印刷的每一个年份,记录了一个特定单词或词组在谷歌图书的使用量。然而这并不完整(它并没有包含每一本已经发布的书!),数据集中有成千上百万的书,时间上涵盖了从 16 世纪到 2008 年。数据集可以免费从这里下载。

我决定使用 Python 和我新的数据加载库 PyTubes 来看看重新生成上面的图有多容易。

挑战

1-gram 的数据集在硬盘上可以展开成为 27 Gb 的数据,这在读入 python 时是一个很大的数据量级。Python可以轻易地一次性地处理千兆的数据,但是当数据是损坏的和已加工的,速度就会变慢而且内存效率也会变低。

总的来说,这 14 亿条数据(1,430,727,243)分散在 38 个源文件中,一共有 2 千 4 百万个(24,359,460)单词(和词性标注,见下方),计算自 1505 年至 2008 年。

当处理 10 亿行数据时,速度会很快变慢。并且原生 Python 并没有处理这方面数据的优化。幸运的是, numpy 真的很擅长处理大体量数据。 使用一些简单的技巧,我们可以使用 numpy 让这个分析变得可行。

在 python/numpy 中处理字符串很复杂。字符串在 python 中的内存开销是很显著的,并且 numpy 只能够处理长度已知而且固定的字符串。基于这种情况,大多数的单词有不同的长度,因此这并不理想。

Loading the data

下面所有的代码/例子都是运行在 8 GB 内存 的 2016 年的 Macbook Pro。 如果硬件或云实例有更好的 ram 配置,表现会更好。

1-gram 的数据是以 tab 键分割的形式储存在文件中,看起来如下:

每一条数据包含下面几个字段:

为了按照要求生成图表,我们只需要知道这些信息,也就是:

通过提取这些信息,处理不同长度的字符串数据的额外消耗被忽略掉了,但是我们仍然需要对比不同字符串的数值来区分哪些行数据是有我们感兴趣的字段的。这就是 pytubes 可以做的工作:

差不多 170 秒(3 分钟)之后, one_grams 是一个 numpy 数组,里面包含差不多 14 亿行数据,看起来像这样(添加表头部为了说明):

╒═══════════╤════════╤═════════╕

│ Is_Word │ Year │ Count │

╞═══════════╪════════╪═════════╡

│ 0 │ 1799 │ 2 │

├───────────┼────────┼─────────┤

│ 0 │ 1804 │ 1 │

├───────────┼────────┼─────────┤

│ 0 │ 1805 │ 1 │

├───────────┼────────┼─────────┤

│ 0 │ 1811 │ 1 │

├───────────┼────────┼─────────┤

│ 0 │ 1820 │ ... │

═══════════╧════════╧═════════╛

从这开始,就只是一个用 numpy 方法来计算一些东西的问题了:

每一年的单词总使用量

谷歌展示了每一个单词出现的百分比(某个单词在这一年出现的次数/所有单词在这一年出现的总数),这比仅仅计算原单词更有用。为了计算这个百分比,我们需要知道单词总量的数目是多少。

幸运的是,numpy让这个变得十分简单:

绘制出这个图来展示谷歌每年收集了多少单词:

很清楚的是在 1800 年之前,数据总量下降很迅速,因此这回曲解最终结果,并且会隐藏掉我们感兴趣的模式。为了避免这个问题,我们只导入 1800 年以后的数据:

这返回了 13 亿行数据(1800 年以前只有 3.7% 的的占比)

Python 在每年的占比百分数

获得 python 在每年的占比百分数现在就特别的简单了。

使用一个简单的技巧,创建基于年份的数组,2008 个元素长度意味着每一年的索引等于年份的数字,因此,举个例子,1995 就只是获取 1995 年的元素的问题了。

这都不值得使用 numpy 来操作:

绘制出 word_counts 的结果:

形状看起来和谷歌的版本差不多

实际的占比百分数并不匹配,我认为是因为下载的数据集,它包含的用词方式不一样(比如:Python_VERB)。这个数据集在 google page 中解释的并不是很好,并且引起了几个问题:

人们是如何将 Python 当做动词使用的?‘Python’ 的计算总量是否包含 ‘Python_VERB’?等

幸运的是,我们都清楚我使用的方法生成了一个与谷歌很像的图标,相关的趋势都没有被影响,因此对于这个探索,我并不打算尝试去修复。

性能

谷歌生成图片在 1 秒钟左右,相较于这个脚本的 8 分钟,这也是合理的。谷歌的单词计算的后台会从明显的准备好的数据集视图中产生作用。

举个例子,提前计算好前一年的单词使用总量并且把它存在一个单独的查找表会显著的节省时间。同样的,将单词使用量保存在单独的数据库/文件中,然后建立第一列的索引,会消减掉几乎所有的处理时间。

这次探索 确实 展示了,使用 numpy 和 初出茅庐的 pytubes 以及标准的商用硬件和 Python,在合理的时间内从十亿行数据的数据集中加载,处理和提取任意的统计信息是可行的,

语言战争

为了用一个稍微更复杂的例子来证明这个概念,我决定比较一下三个相关提及的编程语言: Python,Pascal, 和 Perl.

源数据比较嘈杂(它包含了所有使用过的英文单词,不仅仅是编程语言的提及,并且,比如,python 也有非技术方面的含义!),为了这方面的调整, 我们做了两个事情:

只有首字母大写的名字形式能被匹配(Python,不是 python)每一个语言的提及总数已经被转换到了从 1800 年到 1960 年的百分比平均数,考虑到 Pascal 在 1970 年第一次被提及,这应该有一个合理的基准线。

结果:

对比谷歌 ( 没有任何的基准线调整 ):

运行时间: 只有 10 分钟多一点

代码: gist.github/stestagg/91…

以后的 PyTubes 提升

在这个阶段,pytubes 只有单独一个整数的概念,它是 64 比特的。这意味着 pytubes 生成的 numpy 数组对所有整数都使用 i8 dtypes。在某些地方(像 ngrams 数据),8 比特的整型就有点过度,并且浪费内存(总的 ndarray 有 38Gb,dtypes 可以轻易的减少其 60%)。 我计划增加一些等级 1,2 和 4 比特的整型支持( github/stestagg/py… )

更多的过滤逻辑 - Tube.skip_unless() 是一个比较简单的过滤行的方法,但是缺少组合条件(AND/OR/NOT)的能力。这可以在一些用例下更快地减少加载数据的体积。

更好的字符串匹配 —— 简单的测试如下:startswith, endswith, contains, 和 is_one_of 可以轻易的添加,来明显地提升加载字符串数据是的有效性。

img

在线咨询

建站在线咨询

img

微信咨询

扫一扫添加
动力姐姐微信

img
img

TOP