\documentclass[a4paper,11pt]{book}
\usepackage[polish]{babel}
\usepackage[utf8]{inputenc} 
\usepackage[T1]{fontenc}
\usepackage{fourier}
\usepackage{fancyhdr}
\usepackage{geometry}

\geometry{width=126mm}

\renewcommand{\chaptermark}[1]{\markboth{\small\thechapter\ #1}{}}
\renewcommand{\sectionmark}[1]{\markright{\small\thesection\ #1}}

\pagestyle{fancy}
\fancyhf{}
\fancyhead[RO,LE]{\leftmark}
\fancyhead[LO,RE]{\rightmark}
\fancyfoot[RO,LE]{\thepage} 
\renewcommand{\headrulewidth}{0.5pt}
\renewcommand{\footrulewidth}{0.5pt}

\begin{document}

\chapter{Wprowadzenie}
\label{cha:wprowadzenie}

\chapter{Pierwszy dokument}
\label{cha:pierwszy:dokument}

\chapter{Formatowanie tekstu}
\label{cha:formatowanie:tekstu}

\section{Znaki specjalne}
\label{sec:znaki:specjalne}

\newpage

\section{Czcionki}
\label{sec:czcionki}

\newpage

.

\end{document}