Modelling Natural Language with Claude Shannon’s Notion of Surprisal
Über dieses Buch
Have you ever wondered how the principles behind Shannon's groundbreaking Information Theory can be interwoven with the intricate fabric of linguistic communication? This book takes you on a fascinating journey, offering insights into how humans process and comprehend language. By applying Information Theory to the realm of natural language semantics, it unravels the connection between regularities in linguistic messages and the cognitive intricacies of language processing. Highlighting the intersections of information theory with linguistics, philosophy, cognitive psychology, and computer science, this book serves as an inspiration for anyone seeking to understand the predictive capabilities of Information Theory in modeling human communication. It elaborates on the seminal works from giants in the field like Dretske, Hale, and Zipf, exploring concepts like surprisal theory and the principle of least effort.
With its empirical approach, this book not only discusses the theoretical aspects but also ventures into the application of Shannon's Information Theory in real-world language scenarios, strengthened by advanced statistical methods and machine learning. It touches upon challenging areas such as the distinction between mathematical and semantic information, the concept of information in linguistic utterances, and the intricate play between truth, context, and meaning.
Whether you are a linguist, a cognitive psychologist, a philosopher, or simply an enthusiast eager to dive deep into the world where language meets information, this book promises a thought-provoking journey.
Information zu Autoren / Herausgebern
Fachgebiete
-
PDF downloadenÖffentlich zugänglich
Frontmatter
I -
PDF downloadenÖffentlich zugänglich
Acknowledgements
VII -
PDF downloadenÖffentlich zugänglich
Contents
IX -
PDF downloadenÖffentlich zugänglich
List of figures
XI -
PDF downloadenÖffentlich zugänglich
List of tables
XV -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Introduction
1 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 1 Information and contexts
5 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 2 Previous work on application of Information Theory to the semantics of natural language
26 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 3 Modelling intensification through Shannon information
57 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 4 Shannon Information in information retrieval
92 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 5 Shannon information, form and linguistic coding
127 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Chapter 6 Some concluding remarks
156 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
References
159 -
PDF downloadenErfordert eine Authentifizierung Nicht lizenziertLizenziert
Index
173
- Herstellerinformationen:
-
Walter de Gruyter GmbH
Genthiner Straße 13
10785 Berlin - productsafety@degruyterbrill.com