隋唐演义

隋唐演义

泰迪杯数据挖掘大赛技巧 2015泰迪杯数据挖掘赛题目

618活动 0

手机淘宝搜:天降红包55 5月20日开始,每天领红包。
京示搜:天降红包369,5月28日开始

泰迪杯数据挖掘竞赛2023,泰迪杯数据挖掘挑战赛2023,泰迪杯数据挖掘什么时候出结果,泰迪杯数据挖掘优秀论文

B题论文共90页,一些修改说明7页,正文72页,附录11页。

这次泰迪杯我做得有点晚了,一方面是之前有点事耽搁了两天,所以我是从6天前才开始做。另一方面泰迪杯不愧是时间这么长的比赛,数据量极大,第一问方便你们挑选,题目给出的8个角度我全都分析了,重点是后面需要自己标注数据的四个角度例如节假日等,需要谨慎查询并标注,这四个数据预处理花了我不少时间。不过求解也就是麻烦点,做起来其实也就是相关性+差异性分析+分类统计绘图挑着用。 重点是第二问,机器学习预测是肯定的,但是预测精度我调参了很久都比较低,后来只能结合神经网络自动寻优,但是这题数据量太大,月周日三个模型各跑了一天一共三天,最后精度确实都可以,最高的模型精度是80%以上,对于这个题目数据来说是非常高了,最后直接应用就完事了。之所以篇幅这么长,是因为:第一问8个角度都分析了。此外我论文很多的篇幅需要用来解释我为什么要这么做,基本就是手把手教你怎么做,并且我还要照顾每个人的水平,所有会有些地方需要写得很繁琐,一些中间过程展现得事无巨细,并且表格很多,你们自己放到附录即可。

在这里,我给大家讲一下具体是怎么做吧,精力有限可能讲得不够详细,如果看着觉得累,可以看的视频讲解:

2023泰迪杯数据挖掘赛B题保姆级教学(预告:华中杯、东北三省、五一数学建模)_哔哩哔哩_bilibili

OK,这里是我的目录:

目录

第一问:

第一类:定量数据之间影响

价格因素

第二类:定类数据之间影响

所在区域

节假日

促销

季节因素:

第三类:特性分析

摘要:

请对附件中的训练数据(order_train1.csv)进行深入地分析,可参照但不限于下述主题。

对于这一问而言,我把8个主题全部分析了.

(1) 产品的不同价格对需求量的影响; (2) 产品所在区域对需求量的影响,以及不同区域的产品需求量有何特性; (3) 不同销售方式(线上和线下)的产品需求量的特性; (4) 不同品类之间的产品需求量有何不同点和共同点; (5) 不同时间段(例如月头、月中、月末等)产品需求量有何特性; (6) 节假日对产品需求量的影响; (7) 促销(如618、双十一等)对产品需求量的影响; (8) 季节因素对产品需求量的影响。

首先我要说一下,影响和特性的求解方式是不一样的。

影响是看到底有没有影响,影响的程度到底有多大,主要是相关性分析+差异性分析。

而特性,则本质上只需要分类统计汇总分析。

具体可以分为以下三类。

1.产品的不同价格对需求量的影响;

两个定量数据之间的影响分析:

那就直接相关性分析:

之后做分位数回归,看一下究竟价格是怎么影响需求量的,在哪个点影响最大以及这种影响是怎么随着价格的变化而变化的:

(2) 产品所在区域对需求量的影响,以及不同区域的产品需求量有何特性; (6) 节假日对产品需求量的影响; (7) 促销(如618、双十一等)对产品需求量的影响; (8) 季节因素对产品需求量的影响。

有这样一张总表:

这道题的需求量数据很明显并不是正态分布的:

对于所在区域,一共是五个独立变量,因此,要做多独立样本非参数检验:

确定完差异程度之后,也就是有没有影响以及影响大小之后,做特性统计:

对于其余的,则首先要标注数据,但标注的时候大家一定要谨慎,例如节假日是不包括周六周日的,这个大家一定要清楚!:

同时,大家要分清楚农历和阳历,对于除夕、端午节这些节日,都是按照农历计算的,我们要查询到每一年这些节日对应的公历日期才可以:

比如中秋节:

全部标注完之后,开始做差异性分析,只有是否,所以这里就是双独立样本检验了:

之后是促销因素,

促销我选用了618 双十一和双十二:

方法一样我就不赘述了。

大家也要注意,小学常识:季节不是1-3月就是春天,那是农历,对于公历来说:

标注之后,采用和所在区域一样的多独立样本检验即可。

对于特性分析来说,只需要做统计分析即可:

OK,第一问结束。

第二问:

基于上述分析,建立数学模型,对附件预测数据(predict_sku1.csv)中给出的产品,预测未来3月(即2019年1月、2月、3月)的月需求量,将预测结果按照表3的格式保存为文件result1.xlsx,与论文一起提交。请分别按天、周、月的时间粒度进行预测,试分析不同的预测粒度对预测精度会产生什么样的影响。

第二问花了我整整三天的时间。

这道题肯定是不可以用时间序列的,又不是一个产品,需求量当然不是只跟时间有关。

因为这很明显是一个多输入的非线性回归问题,也就是说,有多个因素影响需求量,每个因素都可以作为自变量,需求量是因变量。题目也说了:

机器学习训练是肯定的,但是这个数据量实在太大了,59w多条,训练起来很麻烦。

而且手动调参精度我一直提升不上去,最后只能是结合神经网络自动寻优。

按照题目要求,我们是需要训练出月、周、日三个模型的,跑这三个模型花了我整整三天时间。

贴一些我用到的代码吧:

给大家看一下精度最低的那个模型吧:

70多是最低的,最高的是哪个模型为了保证限量我就不说了,精度是80%多。

看一下最后的预测表格:

整理成题目要求的格式:

是这样的:

教大家一个判断自己结果到底对不对的方法,同一个产品,三个月的需求量虽然会有变化,但是绝对不会相差太多,如果相差非常大,那么模型肯定是存在问题的。

大家可以看一下上面的预测结果相差的程度,基本是合理的。

当然了,真正的精度是从训练集测试集表现来的,这个我在论文里会有精度的表格。

一共2619个,全部预测完毕:

OK,那么就讲到这里吧,实在太累了,讲解得可能不够详细,详细的讲解在我的讲解视频里,讲解视频及完整成品的说明大家可以点击下方我的个人卡片查看:


2022年,10件令人印象深刻的互联网大事

2022年,10件令人印象深刻的互联网大事,2021互联网行业大事件,2021互联网发生的大事,2021互联网行业最近发生的三件大事

2022年即将过去,在这一年中,互联网发生了许多大事:虚拟人热度飙升、AIGC火遍全球、IE浏览器退役……还有哪些令你印象深刻的大事件?我们和天天问的小伙伴们一起挑选了十件具有代表性的事件,快来看看跟你想的是否一样吧。

  • 2022年,元宇宙蓬勃发展,虚拟人频频出圈;
  • 2022年,微软宣布IE浏览器将于6月16日正式退役;
  • 2022年,东方甄选靠双语直播成为流量黑马,火遍全网;
  • ……

在2022年,互联网发生了许许多多大事件,有的是冉冉升起的新星,有的是令人惋叹的衰落,还有的是突如其来的变化。在这些大事件中,有哪些令你印象深刻的?又是因为什么让你印象深刻?

经过激烈讨论,我们选取了十件具有代表性的事件,分成兴起、衰落和变化这三部分来讲述,一起来聊聊吧。

天天问每周精选第215期:2022年的互联网大事件中,哪件最让你印象深刻?

文章内容部分来源于@limpide @杭州马小胖 的精彩回答。

2022年,兴起了许许多多的潮流事物,我们从中挑选了三件,来看看他们给人留下了什么深刻的印象吧。

2022年,元宇宙依然是互联网最吸引人的赛道,从虚拟人到数字藏品,再后来到衍生的社区产品,甚至有元宇宙演唱会、元宇宙婚礼等等设想,元宇宙的风在2022年从未停歇,一年来都在被各种元宇宙内容刷屏。

其中,虚拟人可以说是元宇宙最早落地并极具商业潜能的一个方向。艾媒咨询的数据显示,2021年虚拟人带动产业市场规模和核心市场规模,分别为1074.9亿元和62.2亿元,预计2025年分别达到6402.7亿元和480.6亿元。

2022年,虚拟人频频出圈。

2021年10月31日,虚拟人柳夜熙在抖音上发布了自己的第一条作品,正式宣布出道。仅凭这一条短视频,柳夜熙就涨粉百万。而今年12月2日,柳夜熙更新到第26个作品,拥有863.6万粉丝。

今年初,虚拟偶像洛天登上了“相约北京”奥林匹克文化节的舞台,为冬奥会应援,还有知名滑雪选手谷爱凌的数字分身“meet gu”、AI手语主播、数字气象主播冯小殊等虚拟人纷纷参与到赛事播报和解说当中,为冬奥助力,也向世界展示了中国的虚拟人产业成果。

而后,虚拟人产业越发红火,虚拟偶像、虚拟主播频出不穷,涉及传媒、游戏、金融等众多领域。比如获得2021年万科总部新人奖的虚拟数字人崔筱盼,就是负责催办预付应收逾期单据的工作,负责催办的核销率达到了91.44%。

当然,元宇宙距离实现大规模沉浸式体验还很遥远,虚拟人行业也还有很多难题尚待解决,但其火红的态势确实是令人印象深刻,也让人更加期待未来的发展。

今年五月以来,罗大佑、孙燕姿的线上演唱会刷屏全网,#罗大佑线上演唱会# #孙燕姿线上演唱会#等话题登上微博热搜,相关话题阅读量超过3亿。而后,周杰伦的“地表最强魔天伦”演唱会重新在网络直播,全平台观看人数破5000万,总观看量将近一亿人次,创造了在线演唱会的最高观看记录。

还有刘德华、李健等一众明星的线上演唱会,点燃了粉丝的热情,也让各大平台收获了无数流量。比如周杰伦在快手举办的线上哥友会,直播开始10分钟点赞量就破亿,最高在线人数达到1129万。

线上演唱会可以说是明星与平台的双向奔赴,另三方都有所收获,你说这第三方是谁?当然是屏幕前的你我啦,足不出户就能参与偶像的演唱会,不也是一件乐事嘛。

2022年,可以说是AIGC元年,文本生成图像技术得到突破,AI绘画从粗糙走向精细,能产出多种风格的高质量作品。而在今年8月,利用AI生成的作品《太空歌剧院》,在美国科罗拉多州举办的艺术博览会上,获得了数字艺术类别冠军。

从小红书到抖音,处处都在讨论AI绘画,有的是晒图,有的是吐槽,虽然其中还有很多问题(比如说版权)有待解决,但不可否认,AI绘画已经成为了当下的一股潮流。

(小红书截图)

除了AI绘画,ChatGPT这个聊天机器人也非常红火,它不仅能和你聊天,还能写小说、写剧本,甚至能帮你改代码。虽然因为无法联网,ChatGPT的资料库不能及时更新,但它最大的优点并不是当个搜素引擎,一板一眼地回答你的问题,而是充当灵感库,把你那些细碎的想法补充整理再反馈给你,让你的创作难度大大降低。

2022年,有冉冉上升的新事物,也有走向衰败的没落事物,但我们依然能从中吸取经验教训。

IE浏览器诞生于1995年12月,是微软为了向互联网服务进军而研发的第一款浏览器,也是很多人用的第一款浏览器,毕竟它向来是与Windows操作系统*的。然而,微软宣布将于(北京时间)2022年6月16日,停止对IE浏览器的所有支持和更新,未来,将由Edge浏览器接力。

也就是说,陪伴很多人进入互联网的IE浏览器,正式退出了历史的舞台。虽然很多人都会吐槽IE浏览器,但它也蕴含着很多人的青春回忆,当它真的消失,大多数人都是伤感的,甚至有一名韩国软件工程师为IE竖了一块墓碑。

(为IE浏览器立的墓碑)

世间没有永恒,只有不停的改变。IE浏览器已正式向我们告别,我们也只能挥手说再见,然后奔向下一个时代。

今年7月28日,每日优鲜关闭了极速达业务,APP上的配送时间由“最快30分钟达”变为最快次日送达,此后关于每日优鲜解散、裁员的坏消息不断传出。虽然公司解散的消息被每日优鲜否认,但其确实放弃了前置仓业务,关闭了极速达。

每日优鲜的发展状况已经有许多媒体分析评述过,只能感叹世事多变,去年每日优鲜还顶着“生鲜电商第一股”的光环赴美上市,今年就亲手关掉了极速达,放弃了前置仓,实在令人惋惜。

每年的618、双十一都是消费者们喊着“剁手”的日子,但是今年,这些电商节日却纷纷遇冷,各大电商都不再放出战报,商家们纷纷表示“卷不动了”。这或许是因为电商大促太过频繁了吧。

你看,618、双十一、双十二是电商节要搞大促,端午、中秋、国庆是特殊节日也来个促销,再加上平时直播间里的低价优惠,真的是天天都有花样搞促。消费者平时就能以优惠价买到商品,也就不必惦记着那几个电商大促节了。

更何况,现在的电商节玩法越来越复杂,红包、跨店满减、游戏代金币等等操作齐上阵,但实际的优惠力度可能并没有增加太多,人们的消费热情便逐渐退却了。

2022年,是变化巨大的一年,而在这些变化中,我们有能抓住什么机遇呢?

2022年互联网大事件中,影响最深的一件事莫过于“一波接一波的裁员大潮”。从年初的大厂“毕业季”到年末的裁员大潮,还有硅谷的大裁员,国内外很多小伙伴都离开了自己的岗位,需要重新找工作,却又四处碰壁。天天问的一位小伙伴遭遇了如此经历,不禁感慨:

这个行业实在变化太快,“一招鲜,吃遍天”这种事情是不存在的,我们总会遇到从未接触过的新挑战,怎么办?学习。就如同一个优秀的企业,它最有价值的地方在于它有无限的发展前景。那么一个优秀的互联网从业者,最有价值的地方就在于拥有无限的潜力。

今年3月至四月,微博、今日头条、抖音、百家号、快手、知乎、小红书、微信公众号陆续公开显示用户的IP地址归属地,且用户不可自主关闭。对于这个变化,最初会有网友担心是否会侵犯隐私。

关于这点,DCCI互联网研究院院长刘兴亮解释道:“IP国内显示到省、国外显示到国家,并没有更详细的市、区、街道、村等,因此并不涉及个人的强隐私。”后来网友们也逐渐接受了这一改变。

(微博评论区截图)

而且,这一举动也揭露下了很多不怀好意之人的面具,比如说辨别真实的海淘商家、认清蹭热度的虚假谣言等,于是网友对公开IP属地的行为越发喜闻乐见了。

今年六月,东方甄选凭着双语直播带货的形式人气暴涨。当然,东方甄选不止双语直播,他们的主播都是教培行业出身,吟诗作对、才艺表演、鸡汤段子全都信手拈来,直播间文化氛围相当浓厚。

东方甄选直播间和其他直播间里“三二一、上链接!”的模式差别极大,对产品的介绍相对较少,而是结合主播的个人特色,展示出更多内容,正是因此而吸引了不少粉丝,还有粉丝为了支持东方甄选而重复购买了四袋大米,可谓是别样的知识付费。

今年,罗永浩曾宣布退网创业,然而就在双十一之际,他又回来了,并且不是回到抖音,而是入驻了淘宝直播。随后,东方甄选、刘u宏的妻子Vivi、遥望科技等抖音腰部主播也跨平台来到了淘宝。业内人士认为,这代表着主播跨平台直播的时代即将到来。

当然,跨平台发展并不是一件容易的事,这对于主播和平台来说都是个机遇和挑战。对主播来说,跨平台发展能进一步扩大自己的影响力,获得更多流量扶持;而对于平台来说,能获得更多新鲜的主播以及主播背后的粉丝流量。但是,主播和平台之间是需要磨合时间的,不同平台之间是有差异性的,如果主播不能根据平台适时转变直播风格,就可能导致跨平台直播失败。

2022年,互联网行业大事件不断,在这一年里,令你印象最为深刻的大事件,又是什么呢?是最近很火的AIGC,还是影响广泛的裁员潮?又或者是我们没有提到的其他事件?快来跟我们分享一下吧。

关于“2022年的互联网大事件中,哪件最让你印象深刻?”,你有什么看法?点击这个链接,即可跳转回答~

参考资料:

为了感谢各位优秀作者这一年在人人都是产品经理平台的辛勤付出,鼓励更多作者创作,我们于12月12日正式上线2022年度作者评选活动!

本次活动将会持续10天,在这10天里,我们会对来自产品/运营/营销/设计/行业等不同领域的80名优秀作者,通过投票和评分的方式,选出2022年度的最受欢迎作者、年度最具影响力作者,以及年度人气作者。

目前活动仅剩三天,谁是大家心中最优秀的作者?一起期待吧!

素材来源:天天问话题精选

「天天问」为人人都是产品经理社区旗下的互助问答模块,致力产品、运营、营销等领域知识的学习交流。

本栏目由 @张小莉 整理编辑发布,欢迎大家踊跃提问,一起交流。

题图来自Unsplash,基于CC0协议

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。