一、GPT简介 我们说BERT是Transformer的encoder，那么GPT就是Transformer的decoder。GPT全称为Generative Pre-Training。 参数量对比：ELMO-94M、BERT-340M、GPT-2-1542M（大规模）、GPT-3-175B（超大规模） 二、GPT基本原理 GPT的原理并不复杂，首我们知道它是基于Transformer的decod…
2023年4月18日 更新 评论区一位老哥的方法，不用下载mark.js，复制一份源目录里的文件改名即可，经测试，有效，评论已置顶。 首先放一下安装nbextensions的步骤 如果你是本机安装的python（非虚拟环境），那么直接在终端/cmd/powershell中运行一下命令： pip install jupyter_contrib_nbextensions jupyter contrib…
centos7: 问题：连接本地虚拟机时，连接不上，报错--Network error: Connection refused 原因： 1.刚开始直接ping主机，是可以ping通的，说明网络是正常的 [root@szb ~]# ping 192.168.8.132 PING 192.168.8.132 (192.168.8.132) 56(84) bytes of data. 64 bytes …
转自： http://scc.qibebt.cas.cn/docs/optimization/VTune(TM)%20User's%20Guide/mergedProjects/analyzer_ec/mergedProjects/reference_olh/instruct32_hh/vc143.htm http://szkn28szkn.iteye.com/blog/1362460 说明 将程…
原题在此，按照一般思路sizeof获取某个数据类型所占用空间的字节数，struct结构体计算要遵循字节对齐原则。 转载：https://www.runoob.com/w3cnote/struct-size.html int整型一般情况默认占4字节，所以需要放在4的整数倍地址（4，8，12······），char型占1字节，char a[3]只有3字节，所以需要补一位让int b[2]的首地址放在4…
来源 2018年8月-12月，由美团点评、创新工场、搜狗、美图联合主办的“AI Challenger 2018全球AI挑战赛”历经三个多月的激烈角逐，冠军团队从来自全球81个国家、1000多所大学和公司的过万支参赛团队中脱颖而出。其中“后厂村静静”团队-由毕业于北京大学的程惠阁（现已入职美团点评）单人组队，勇夺“细粒度用户评论情感分类”赛道的冠军。本文系程惠阁对于本次参赛的思路总结和经验分享，希望…
本技术博客只用于实验环境的测试学习，不可用于其他用途，否则造成的后果自行承担！ 1.查看网卡并启动相应网卡的监听模式 ifconfig -a airmon-ng start wlan1 启动监听模式之后网卡名称会变为wlan1mon(根据具体网卡名而有所不同，如：wlan0mon) 查看网卡的工作模式可以用: iwconfig wlan1mon 查看Mode字样,如果为Monitor则确定当前网卡…
说白了，就是所有的计算都要转换成数字，首先分词，词集合，转换成ID，然后匹配即可，这种模式比较粗糙。 词向量余弦 词向量余弦算法，是将文本作为一个多维空间的向量，计算两个文本的相识度即计算判断两个向量在这个多维空间中的方向是否是一样的。而这个多维空间的构成是通过将文本进行分词，每个分词代表空间的一个维度。 下面通过例子来说明多维空间的构成即词向量问题。比如要计算如下两个短文本的相识度： 文本一：天…
一、安装编译所需要的数据包 apt-get install dpkg-dev fakeroot build-essential apt-get install autoconf automake libglib2.0-dev libgda2-dev gda2-mysql zlib1g-dev libssl-dev 注：使用apt-get install安装过程中，有可能出现无法下载某些 软件名.d…