Auto Byte

专注未来出行及智能汽车科技

微信扫一扫获取更多资讯

Science AI

关注人工智能与其他前沿技术、基础学科的交叉研究与融合发展

微信扫一扫获取更多资讯

e成科技算法组作者

人才库变成「一潭死水」?因为你缺了这个!

先给大家看一组数字:

● 一家企业在进行了5年以上的招聘,通过不同渠道可以接触到行业内60%以上目标候选人。

● 经过3年以上招聘的中大型企业,从不同渠道累积获取的简历可达到10万份以上。

● 企业人才库简历的平均利用率不到10%

换句话说,经过几年招聘,大部分企业都会积累丰富的简历资源。但是,这样的人才金矿并没有得到充分的利用。人才池的水平线不断上涨,最终却成了一潭死水。

为什么企业不愿意优先从人才库中搜索已有简历,反而不断投入人力和金钱从外部渠道获取人才呢?

很大一部分原因就是人才库系统不好用,只是简单的简历储存。上万份甚至上百万份简历堆砌在一个库里,要找人的时候怎么也找不到。

要处理海量数据,AI算法就体现了天然的优势。HR只要通过关键词和标签,强大的搜索引擎就可以快速锚定目标候选人,基于人才画像,自动筛选高质量简历,从成千上万的候选人简历中快速找到最匹配的那个TA,从而达到快速填补空缺职位、提高招聘效率、降低招聘成本的目的

那具体AI是怎么做到的呢?e成科技算法团队今天就来给大家科普一下人才库搜索引擎背后的算法知识:

知识图谱在e成科技人才搜索引擎中的应用

背景介绍

人才搜索引擎是e成科技企业服务中的重要组成部分,为用户提供人才库搜索服务。e成科技早期的搜索引擎主要依赖于term weight、bm25等传统的信息检索相关技术,在语义匹配方面相对薄弱,而随着e成科技人力资源知识图谱的落地,搜索引擎引入知识图谱相关数据在效果上获得较大提升。

知识图谱

e成科技的知识图谱主要组成部分是实体(entity)和实体间关系,实体类型主要有职能、技能和行业等, 实体关系主要为上下位关系,基于整个graph,可以训练出每个entity的embedding。

人才搜索引擎的主要模块

人才搜索引擎主要有以下几个主要模块组成:

Query understanding

query理解的主要工作包括对query切词,以及基本的短语识别,去除停用词,并通过NER和分类算法进行tagging,以及通过word重要性模型weighting,知识图谱落地后,NER识别后还需要通过实体链接将识别出的term/phrase对应到graph中的相应实体id。

Talent document understanding: 

同样对于简历和人才画像等特征,通过识别和实体链接实体id的集合。

Match:

通过匹配模型计算query和document的match score。

Rank:  

结合match模块的相关特征以及文档时效性,用户招聘偏好等特征基于pairwise的LTR模型得到document的排序。

模型介绍

1. 神经网络在文本匹配上有两种类型:

representation

包括DSSM, CDSSM等,主要思想在于将query和document映射到语义空间,最后通过计算相似性表征两者的match score,这种方法的优点在于可用来建立索引,但是忽略了词粒度的特征以及重要性。

interaction: 

包括MatchPyramid、KNRM、DRMM等,设计match function对query和document中的word进行两两交叉,得到match score从而构建interaction matrix。这种方法的效果优于前一种方法,主要原因在于在我们的场景下,岗位和人才的相关性往往取决于重要性最靠前的实体是否精确匹配或者有与之非常相关的实体出现在人才简历或画像中。

2. 基于知识图谱计算word/entity matrix

因此,我们采用了interaction类型的模型,如何构建interaction matrix是核心问题。首先通过query和document解析,得到query和document的表示

Query:<QueryEntity1, QueryEntity……QueryEntityn,QueryWord1, ……QueryWordn>

doc:<DocEntity1, DocEntity……DocEntityn,DocWord1, …DocWordn>

entity之间的match score通过entity embedding计算得到,entity和word以及word和word之间的match score有其他的模型计算得出,这里不详细阐述。

query entity和word与document的entity 和word交叉通过match function得到相应的矩阵。

我们选定DRMM为大体框架,而DRMM中对上述交叉后的matrix进行Histogram Pooling,考虑到这种方式会带来一定的信息损失,我们将其更换为mlp,并增加一维用来表征是否为extract match。

以下为model网络结构图:

由于word和entity的重要性在计算match feature时比较重要,我们通过attention网络计算每个query中entity/word在计算match feature时的贡献度

其中Vi为query中一个entity或者word对应的embedding向量拼接对应的实体类型等其他特征后的向量,是可训练的参数

由于搜索排序还需要考虑其他因素,在match feature的基础上拼接了一些额外的特征,如doc的时效性、query中的entitiy在文档出现位置的proximity、用户招聘偏好等,最后计算出score。

模型训练

我们使用系统的用户行为数据构造偏序关系,在同一query下已offer的人才>面试邀约的人才>未邀约的人才,构建pairwise的hinge loss.

参考文献

[1]  Jiafeng Guo, Yixing Fan, Qingyao Ai, andW Bruce Cro.. 2016. A deep relevance matching model for ad-hoc retrieval. In CIKM. ACM, 55–64.

[2]  Po-Sen Huang, Xiaodong He, Jianfeng Gao, Li Deng, Alex Acero, and Larry

Heck. 2013. Learning deep structured semantic models for web search using clickthrough data. In CIKM. ACM, 2333–2338.

e成科技
e成科技

e成科技作为助力人才战略成功的AI平台, 开创性地将AI技术与人才战略升级场景深度结合,并基于画像和Bot(智能对话机器人),形成AI咨询、 AI招聘和AI产业三大支柱产品线,为企业和政府提供智能数字化决策解决方案。 e成科技始终秉持“打造人与任务新型连接平台” 的愿景,将“科技驱动人才升级” 作为自身使命不懈奋斗。

产业知识图谱神经网络
1
相关数据
信息检索技术

信息检索(IR)是基于用于查询检索信息的任务。流行的信息检索模型包括布尔模型、向量空间模型、概率模型和语言模型。信息检索最典型和最常见的应用是搜索引擎。

参数技术

在数学和统计学裡,参数(英语:parameter)是使用通用变量来建立函数和变量之间关系(当这种关系很难用方程来阐述时)的一个数量。

知识图谱技术

知识图谱本质上是语义网络,是一种基于图的数据结构,由节点(Point)和边(Edge)组成。在知识图谱里,每个节点表示现实世界中存在的“实体”,每条边为实体与实体之间的“关系”。知识图谱是关系的最有效的表示方式。通俗地讲,知识图谱就是把所有不同种类的信息(Heterogeneous Information)连接在一起而得到的一个关系网络。知识图谱提供了从“关系”的角度去分析问题的能力。 知识图谱这个概念最早由Google提出,主要是用来优化现有的搜索引擎。不同于基于关键词搜索的传统搜索引擎,知识图谱可用来更好地查询复杂的关联信息,从语义层面理解用户意图,改进搜索质量。比如在Google的搜索框里输入Bill Gates的时候,搜索结果页面的右侧还会出现Bill Gates相关的信息比如出生年月,家庭情况等等。

神经网络技术

(人工)神经网络是一种起源于 20 世纪 50 年代的监督式机器学习模型,那时候研究者构想了「感知器(perceptron)」的想法。这一领域的研究者通常被称为「联结主义者(Connectionist)」,因为这种模型模拟了人脑的功能。神经网络模型通常是通过反向传播算法应用梯度下降训练的。目前神经网络有两大主要类型,它们都是前馈神经网络:卷积神经网络(CNN)和循环神经网络(RNN),其中 RNN 又包含长短期记忆(LSTM)、门控循环单元(GRU)等等。深度学习是一种主要应用于神经网络帮助其取得更好结果的技术。尽管神经网络主要用于监督学习,但也有一些为无监督学习设计的变体,比如自动编码器和生成对抗网络(GAN)。

映射技术

映射指的是具有某种特殊结构的函数,或泛指类函数思想的范畴论中的态射。 逻辑和图论中也有一些不太常规的用法。其数学定义为:两个非空集合A与B间存在着对应关系f,而且对于A中的每一个元素x,B中总有有唯一的一个元素y与它对应,就这种对应为从A到B的映射,记作f:A→B。其中,y称为元素x在映射f下的象,记作:y=f(x)。x称为y关于映射f的原象*。*集合A中所有元素的象的集合称为映射f的值域,记作f(A)。同样的,在机器学习中,映射就是输入与输出之间的对应关系。

推荐文章
暂无评论
暂无评论~