𝕬𝖇𝖞𝖘𝖒
2020-05-21T13:29:21+00:00
感觉爬虫之类的只是python的副业了。python现在是人工智能第一语言了，tensorflow，pytorch，opencv都抢占python这块高地。。机器学习算法库sklearn，科学计算库numpy，sympy，数据处理pandas，画图matplotlib这块已经非常完美了。至少在各大厂，大数据推送，nlp算法，计算机视觉还是挺火的，为啥你们都不推荐呢。。。
机器学习，cv的国际顶会作者基本都有中国人，反而是泥潭唱衰人工智能，这是为啥呢
[img]http://img.nga.178.com/attachments/mon_201209/14/-47218_5052bc4cc6331.png[/img]门槛高？
要数学的
概率为了个二分之一都能吵个你死我活，整这个干什么
Python只是一个工具，人工智能是一个行业。人工智能用python实现不代表你会python就能做AI
[quote][pid=424835314,21899926,1]Reply[/pid] Post by [uid=42352599]f1644rf[/uid] (2020-05-25 21:37):
要数学的
概率为了个二分之一都能吵个你死我活，整这个干什么[/quote]大部分也就是个矩阵的知识，线性代数，一部分矩阵论，最多了解一下转置，正定，特征值，奇异值，特征向量，约旦块，几种矩阵分解，线性方程组。高数方面高中就学过导数，这块主要是微分为主。概率也就了解矩估计，极大似然估计，高斯分布，协方差矩阵，马尔可夫随机场就差不多了，不比数据结构难多少的。
因为你看到的成果都是伪成果，都是特殊数据集下的，不适合一般环境下应用，特别是nlp，我曾经和清华的自然语言组有过接触和技术合作，他们就算发了顶会，成了所谓的顶级大佬，落地应用也不多。
你看到的很多论文和技术，当你去认真研究代码和数据集的时候就知道多不靠谱了。基本各个大佬也认为弱人工智能是基于概率统计的终点。
最初做数据挖掘的，现在基本都在牢里了[s:ac:blink]
[quote][pid=424836178,21899926,1]Reply[/pid] Post by [uid=42012679]浅。悠[/uid] (2020-05-25 21:42):
因为你看到的成果都是伪成果，都是特殊数据集下的，不适合一般环境下应用，特别是nlp，我曾经和清华的自然语言组有过接触和技术合作，他们就算发了顶会，成了所谓的顶级大佬，落地应用也不多。
你看到的很多论文和技术，当你去认真研究代码和数据集的时候就知道多不靠谱了。基本各个大佬也认为弱人工智能是基于概率统计的终点。[/quote]你看到的高清视频补60帧是基于GAN生成对抗网络。你每天头条，抖音的推送，都是基于nlp算法。你每天用的百度谷歌翻译，基本都是基于bert及其衍生算法的自然语言处理模型。你的刷脸支付，都是基于卷积神经网络和残差结构，连阿法狗都是深度学习+强化学习的产物，你说个落地项目不多
[quote][pid=424836549,21899926,1]Reply[/pid] Post by [uid=12011875]zhuosheng[/uid] (2020-05-25 21:44):
最初做数据挖掘的，现在基本都在牢里了[s:ac:blink][/quote]你说的数据挖掘不是真正的数据挖掘。
Reply to [pid=424838626,21899926,1]Reply[/pid] Post by [uid=61079014]第47个马乙[/uid] (2020-05-25 21:55)
爬虫就犯法
你给我说说真的数据挖掘用不用爬虫
[quote][pid=424836661,21899926,1]Reply[/pid] Post by [uid=61079014]第47个马乙[/uid] (2020-05-25 21:45):
你看到的高清视频补60帧是基于GAN生成对抗网络。你每天头条，抖音的推送，都是基于nlp算法。你每天用的百度谷歌翻译，基本都是基于bert及其衍生算法的自然语言处理模型。你的刷脸支付，都是基于卷积神经网络和残差结构，连阿法狗都是深度学习+强化学习的产物，你说个落地项目不多[/quote]你来大专论坛说这些有什么用……
[quote][pid=424839206,21899926,1]Reply[/pid] Post by [uid=12011875]zhuosheng[/uid] (2020-05-25 21:58):
爬虫就犯法
你给我说说真的数据挖掘用不用爬虫[/quote]数据挖掘可不是爬取数据，是一些算法，比如图嵌入等发现数据深层次关系的算法
[quote][pid=424839206,21899926,1]Reply[/pid] Post by [uid=12011875]zhuosheng[/uid] (2020-05-25 21:58):
爬虫就犯法
你给我说说真的数据挖掘用不用爬虫[/quote]数据挖掘是指从大量的数据中通过算法搜索隐藏于其中信息的过程。
你真的懂数据挖掘？
让几千万条数据去掉null值，归一化，标准化，可视化，建立数学模型，这才是数据挖掘
借楼问下，通过六天的时间可以学习python到做出一个淘宝自动抢购脚本的程度吗？到提交订单那一步就好 我想抢aj3北卡蓝
现在只大致熟悉python的基本语法，numpy还有pandas。照着敲过前两本书。我是搞基金份额登记清算的，工作就是点流程 点鼠标工具人 偶尔导xls表出来简单处理下发给别人。python感觉不大用得上，vba比较直观，大概能解决得7788了。我们公司的个人客户业务拓展得不行，数据量少。想拿那点数据来做分析练习也不现实
百度搜了下也没人说要学多久，只知道要学selenium还有要了解下html。
上班可以摸鱼看书，但不敢用办公机调试爬虫脚本，只能下班弄了。
到下周一零点前大概有20个小时的时间来折腾这个，要是搞得了的话我就开工了 搞不动我就咸鱼刷剧了
楼上两位，说得这么清新脱俗，我就问，没有爬，你们挖掘的是啥？
数据挖掘入门就是爬虫，一爬就违法
一栋楼，一楼都没了，直接上二楼？
python和人工智能相关的就业关系不大，就是说你从python入手学习人工智能是找不到人工智能的高薪工作的
没有一个人工智能相关的工作是建立在你会不会python上的，这个和你去培训班学习一门开发语言就可以找到相关工作是不一样的思路
[quote][pid=424840688,21899926,1]Reply[/pid] Post by [uid=12011875]zhuosheng[/uid] (2020-05-25 22:06):
楼上两位，说得这么清新脱俗，我就问，没有爬，你们挖掘的是啥？
数据挖掘入门就是爬虫，一爬就违法
一栋楼，一楼都没了，直接上二楼？[/quote]也可以别人直接提供给你数据集你来挖掘所需的内容啊，就知道个爬虫？
python 随便学，但要做到你说的那些，先去把考研数学一学到120以上再说
[quote][pid=424840688,21899926,1]Reply[/pid] Post by [uid=12011875]zhuosheng[/uid] (2020-05-25 22:06):
楼上两位，说得这么清新脱俗，我就问，没有爬，你们挖掘的是啥？
数据挖掘入门就是爬虫，一爬就违法
一栋楼，一楼都没了，直接上二楼？[/quote]真是井底之蛙....大数据只有爬出来的，笑死人了