黄药师容貌俊秀且身上有一股潇洒洒脱之气加之文武双全，到了十五六岁附近便常有人到他家去商量亲事，只是黄药师对这男女之事无意，故而也不曾答应那些人家。
他自幼读书，相对于那些科举所考的诗书，其他的那些“杂书”黄药师更是喜欢，因为读书又多又杂，所以他不似那些整日想着要科举中第的读书人一样，在他心中自有一套对世间之事的看法。
当他知道自己祖父是被奸臣害死之后他开始整日咒骂皇帝和秦桧，黄药师的父亲颇为重视忠臣之道，每当听到黄药师咒骂皇帝之时总免不了训斥他一番再重新教他一番忠君事亲的圣贤之道，初始黄药师受到训斥便会停止，但他慢慢发现自己父亲的说法并不对，所以到了后来即便他父亲训斥他他也不会停，甚至反过来与他父亲争论，这让家中许多人都说他不孝，最后黄药师的父亲一怒之下将他赶出了家门。
黄药师的父亲本意是希望他出了家门之后能去参加科举取得功名到时便能衣锦还乡，但是黄药师不但没参加科举，还惹了许多麻烦。
他到了浙江西路，砸了庆元府明伦堂，在皇宫，宰相大臣的居所和衙门外张贴告示，非圣毁贤，指斥朝廷恶政，咒骂皇帝和大臣，说该图谋北伐收复江山。朝廷派了数百人追杀他，但他那是武功便已是很高，朝廷的人又怎能抓得到他。
因为这件事，黄药师在江湖上名声大噪，人称“邪怪大侠”。
黄药师虽常说应北伐收复疆土，但是却并没有真的做出什么行动，后来遇到了带兵抗金的王重阳二人便成了朋友，因王重阳做了自己想做却没做之事，所以他对王重阳心生佩服。
后来王重阳抗金失败隐居终南山，而黄药师在海外闲游时发现了桃花岛，之后便在那里扎了根。
金国还在之事黄药师便在桃花岛过起了世外桃源的生活，收了些徒弟在桃花岛过活。
这样过了多年，然后桃花岛发生了一系列的事情，也在江湖上惹起了不小风波，最后事情终了，黄药师便开始云游天下。
此时的黄药师已活了数十年，人生的大起大落世间的人情冷暖他皆深有体会，也是这跌宕起伏的一生的经历让黄药师成为了“东邪”。
这个似人似仙不被常人理解的黄老邪此时与杨过说着过去的事，眼神中不服那种看透世事的清明。
杨过在一旁听着黄药师说着他过去之事不觉暗自咂舌，想想自己这“西狂”和这“东邪”老前辈相比还是“正”了许多。
黄药师道：“蓉儿靖儿死后我常常回想，过去我总觉着家眷亲属皆是累赘，一人独活才潇洒自在，但是他们殉国之后我才发现并非如此.”
说到这黄药师顿了顿，随即哑然一笑，说道：“自认看破世事天命，最后还是老天弄人。”