变参数激活函数可调神经元数学模型.pdfVIP

Sciences 广西科学Guangxi 2004，11(1)：16～19 变参数激活函数可调神经元数学模型* VariableTunableActivationFunction S NeuronMathematicalModel 戴祯杰1 周永权2 Dai Zhou Zhenjiel Yongquan2 (1．广西教育学院数学与计算机科学系南宁市建政路530023； 2．广西民族学院计算机与信息科学学院南宁市大学路80号530006) of (1．Dept．ofMath．Comp．，GuangxiCollege Univ．for 530023，China；2．Dept．ofComp．Info．ScienceCoil．，GuangxiNationalities， 80 30006，China) Daxuelu，Nanning，Guangxi，5 摘要提出一种能同时模拟包括M—P与TAF神经元在内的各种神经元通用的新数学模型，给出这种模型的一 般形式．该模型不但连接权值可调节，而且激活函数可根据实际问题动态地选取。激活函数加入参数后，即成 为变参数激活函数，大大地增强神经网络的灵活性． 关键词 神经元数学模型 激活函数 变参数XOR问题 中图法分类号TPl8 AbstractAnewkindofvariabletunableactivationfunctionneuronmathematicalmodeliS the formofvariabletunableactivationfunctionis formisdifferent designed，andgeneral given．This fromM—Pmodel，andthe1ink istunable．Sincethevariabletunableactivationfunctionscan weights beehoosed thenon—linear ofneuralnetworkscouldbe randomly，SO capacity improved．Finally， thatthe newneuron is several XOR show mathematicalmodel given problemexamples proposed and effective practical． wordsneuronmodel，activationfunction，variable，XOR Key problem 1943年McCulloch和Pitts提出神经元的M—P先验知识往往不易得到，要经过多次的试验，才能获 模型，这种模型用连接权值和非线性激活函数分别模 得先验知识，即使获得先验知识，并且不能适应所有 仿生物神经元的突触和细胞体作用．在学习过程中， 问题；其