Internet on Łukasz Prokulski, Dane i Analizy

DuckDB 250x szybszy od Postgresa, 14 indeksów pod lupą i architektura MCP na produkcji

Tue, 22 Sep 2026 11:42:48 +0000

W tym tygodniu (znowu) dużo konkretów: pomiary, decyzje architektoniczne i rzeczy, które wyglądają na dobre praktyki, dopóki ktoś nie zmierzy, co naprawdę robią. Jak indeks w Postgresie, który spowalnia 4-krotnie zamiast przyspieszać.

Tematy rozłożone między:

inżynierię danych (bazy, pipeline, data lake, migracje), systemy agentów AI i ich bezpieczeństwo, inżynierię oprogramowania (design doc, code review, monorepo), praktyczny Python i DevOps.

Przy okazji — tym razem pokusiłem się o polskie tytuły artykułów. Daj znać, czy to działa, czy jednak wolisz oryginalne angielskie. Odpowiedź na tego maila wystarczy.

LLM zwraca poprawny JSON i się myli. Plus: pathlib, benchmarki i marka osobista w IT

Mon, 07 Sep 2026 15:00:00 +0000

W tym wydaniu dużo o narzędziach, które już pewnie masz w stosie, ale rzadko trafia się dobry materiał tłumaczący ich działanie od środka. Są tu teksty o Airflow 3, dbt, Marquezie i formatach serializacji, a każdy z nich ma konkretną tezę, nie tylko opis funkcji.

jak migracja z legacy ETL do dbt wygląda krok po kroku, dlaczego Parquet eliminuje do 80% narzutu I/O w porównaniu z CSV, co Marquez robi z Twoim data lineage i jak integruje się z OpenLineage.

Agenty kodują same przez 16 dni, a Ty projektujesz architekturę na lata

Mon, 10 Aug 2026 15:00:00 +0000

W tym tygodniu trudno przeoczyć jeden wątek: autonomiczne agenty kodujące przestają być eksperymentem. Alibaba opublikowało wyniki 16-dniowego autonomicznego sprintu modelu Qwen, a równolegle pojawiło się kilka solidnych materiałów o tym, jak praktycznie skonfigurować środowisko do pracy z Claude Code czy Codex CLI. Jeśli jeszcze nie myślisz o agentic coding jako o codziennym narzędziu, ten numer powinien zmienić Twoje podejście.
No i AI uciekła i zaczęła rozrabiać. Ale o tym pisały mainstreamowe media tu, tu oraz tu.

Dlaczego migracja do Databricks jest trudna i co z tym zrobić?

Mon, 03 Aug 2026 15:00:00 +0000

W tym wydaniu powraca temat architektury danych i platformy lakehouse - Apache Iceberg, Databricks, Microsoft Fabric - ale tym razem z wyraźnie różnymi kątami. Jeden artykuł tłumaczy, czym Databricks w ogóle jest i jak działa. Drugi mówi wprost, dlaczego migracja na tę platformę często idzie nie tak. Trzeci pokazuje, jak zorganizować porządny proces wdrożeniowy - ale w Microsoft Fabric. Razem tworzą niezły przegląd tego, co czeka Cię przy pracy z nowoczesnymi platformami danych:

Medallion pęka w szwach, agenci tracą kontekst... co z tym zrobić?

Mon, 27 Jul 2026 15:00:00 +0000

Ten numer ma wyraźny środek ciężkości: agenci AI i to, co z nimi robić, kiedy wychodzisz poza pierwsze eksperymenty. Teksty o LangGraph - od “jak zbudować pierwszego agenta” po “co psuje się po kilku miesiącach” - tworzą razem coś w rodzaju mini-ścieżki, którą można przejść od razu albo wracać do poszczególnych etapów w miarę potrzeb. Uzupełnia je tekst o tym, jak zmienia się rola programisty, kiedy AI przejmuje pisanie kodu - i dlaczego to jest trudniejsze niż się wydaje.

ATS ocenia CV losowo, tmux ratuje deploy, VLM czyta wideo

Mon, 13 Jul 2026 15:00:00 +0000

W tym wydaniu dużo o tym, jak AI wchodzi głębiej w infrastrukturę - i co z tego faktycznie wynika w praktyce. Mamy zarówno materiały pokazujące granice modeli językowych (ocena CV, rozumienie sarkazmu), jak i te, które pokazują, jak je sensownie wkomponować w działające systemy (logi, inference stack, MCP nad Postgresem).

Architektura i skalowanie: od powiadomień push przy milionie odbiorców, przez inference stack złożony z vLLM, KServe i llm-d, po zaawansowane materializacje w DWH, Data Engineering i semantic layer: dbt + Looker w pełnym cyklu, pięć paradygmatów modelowania danych i nowości z frontu LookML, Computer vision: OpenCV 5 bez PyTorcha, detekcja sylwetek z 0,16 ms latencją i scene graphy budowane przez VLM.

Lokalni agenci, schema evolution i najgorsze błędy XGBoost

Mon, 06 Jul 2026 15:00:00 +0000

To wydanie zadaje dwa pytania, które wielu z nas ma gdzieś z tyłu głowy: czy narzędzia, których używam na co dzień, to nadal dobry wybór - i czy warto rozejrzeć się za czymś nowym? Na tapecie znalazły się dbt Core 2.0, DuckDB jako zamiennik Pandas, lokalne agenty AI do pisania kodu oraz nowe modele uczenia maszynowego, które chcą wypchnąć XGBoost z piedestału. Jeśli masz wrażenie, że świat danych zmienia się szybciej niż jesteś w stanie za nim nadążyć - ten numer to potwierdza.

Osiem wzorców potoków danych, Snowflake od środka i przedwakacyjny DevOps

Mon, 22 Jun 2026 15:00:00 +0000

Rozpoczynamy ostatni tydzień roku szkolnego, co dla wielu oznacza początek letnich urlopów i chwilowe zwolnienie tempa w projektach. To idealny moment na uporządkowanie technicznego długu oraz wdrożenie usprawnień, które pozwolą Twoim systemom bezawaryjnie przetrwać czas wakacyjnej flauty. Warto skupić się na:

automatyzacji powtarzalnych zadań operacyjnych, przeglądzie konfiguracji bezpieczeństwa i zarządzania kluczami, refaktoryzacji krytycznych fragmentów kodu przed masowymi urlopami w zespole.

W obszarze inżynierii danych i architektury przyglądamy się sprawdzonym wzorcom projektowym oraz zaawansowanym metodom skalowania przepływów. Zrozumienie relacji między różnymi modelami przetwarzania pozwala na budowanie systemów odpornych na nagłe skoki ruchu. W tym tygodniu dowiesz się więcej o:

Ponad połowa kodu z AI? Raport 2026 i symulatory Kubernetes

Mon, 08 Jun 2026 15:00:00 +0000

W tym numerze przyglądamy się gwałtownej profesjonalizacji świata AI, gdzie agenty przestają być tylko ciekawostką, a właściwie są fundamentem codziennej pracy programistycznej.

Analizujemy najważniejszy raport roku (State of AI 2026), z którego wynika, że już ponad połowa kodu produkcyjnego pochodzi z systemów AI, pokazujemy protokół MCP jako kluczowy standard łączący modele z infrastrukturą oraz zalety natywnych agentów głosowych, i sprawdzamy, jak pliki SKILL.md pomagają skalować wsparcie AI w wielorepozytorialnych środowiskach Enterprise.

Czy AI Slop zaleje sieć? Plus Spark, Kafka i SQL

Mon, 25 May 2026 15:00:00 +0000

W tym wydaniu obserwujemy wyraźny trend profesjonalizacji narzędzi AI oraz ich głębokiej integracji z codziennym workflow inżynierskim.

Analizujemy, jak agenty Playwright i protokół MCP automatyzują cykl życia błędu, od wykrycia po zgłoszenie w Jirze, pokazujemy, jak Claude Code i lokalne modele Qwen2.5 zmieniają zasady gry w analizie danych i budowaniu dashboardów, i sprawdzamy, ile “śmieciowego” AI (slop) faktycznie krąży w sieci i jak to wpływa na jakość informacji.

W obszarze inżynierii danych skupiamy się na wydajności, optymalizacji kosztów i mądrym wyborze silników bazodanowych.

Agenty w produkcji, DuckDB na sterydach i kłamstwa Kubernetesowi

Mon, 11 May 2026 15:00:00 +0000

W tym wydaniu skupiamy się na profesjonalizacji narzędzi AI w codziennej pracy inżynierskiej.

Analizujemy, jak Databricks i Shopify wbudowują agentów AI bezpośrednio w swoje platformy, pokazujemy, dlaczego AI przestaje być dodatkiem, a staje się integralną warstwą systemów, i tłumaczymy zmianę podejścia: od prompt engineeringu do context engineeringu i pracy na głębszych warstwach modeli LLM.

W świecie Data Engineeringu wracają do gry lekkie, lokalne silniki analityczne.

Przyglądamy się, jak DuckDB i Polars redefiniują wydajność pracy z danymi na pojedynczej maszynie, pokazujemy, kiedy lokalne przetwarzanie wygrywa z klasycznym podejściem cloud-first, a także wracamy do fundamentów: Kafka i Spark wciąż żyją, ale wymagają konkretnych checklist optymalizacyjnych przy skali produkcyjnej.

Od potoków danych w YAML po automatyzację SharePoint API

Mon, 04 May 2026 15:00:00 +0000

W tym wydaniu skupiamy się na przełomowych zmianach w sposobie, w jaki systemy AI wchodzą w interakcję z naszym otoczeniem technologicznym.

Analizujemy Model Context Protocol (MCP) – otwarty standard, który kończy erę pisania dedykowanych integracji, sprawdzamy, jak agenty AI płynnie komunikują się z bazami danych w modelu „plug-and-play”, i pokazujemy praktyczne wdrożenia budujące skalowalne ekosystemy sztucznej inteligencji.

W obszarze Data Engineeringu i analityki dbt pozostaje centralnym punktem, ale jego rola ewoluuje w stronę pełnej automatyzacji.

Semantic layer, czarne skrzynki i 30 lat Postgresa kontra cały Twój stack

Mon, 20 Apr 2026 15:00:00 +0000

Tym razem data engineering trzyma środek ciężkości całego wydania — i robi to z rozmachem.

DuckLake osiąga wersję 1.0 jako pełnoprawna platforma lakehouse oparta na Apache Iceberg, dbt publikuje świeży benchmark semantic layer kontra text-to-SQL, a Meta dzieli się case study o tym, jak użyła NLP do mapowania wiedzy w pipeline’ach danych.

Do kompletu:

architektura medallion z warstwą semantyczną, 20 reguł walidacji, które powinny być standardem w każdym pipeline, i konkretny materiał Airbnb o wysokowydajnym pipeline metryk na OpenTelemetry.

Lany Poniedziałek bez lania wody

Mon, 06 Apr 2026 11:00:00 +0000

W dzisiejszym wydaniu przyglądamy się dynamicznym zmianom w ekosystemie narzędzi AI oraz ewolucji architektury danych. Dominującym trendem staje się odejście od prostych chatbotów na rzecz złożonych systemów agentowych, co wymusza rewizję dotychczasowych podejść do jakości kodu i automatyzacji. Jednocześnie obserwujemy renesans wydajnych, osadzonych baz danych, takich jak DuckDB, które redefiniują sposób, w jaki myślimy o analityce “lokalnej” i przygotowaniu danych pod ML. Druga część zestawienia skupia się na inżynierii systemów o dużej skali. Analizujemy lekcje płynące z zarządzania tysiącami podów GPU w klastrach Kubernetes oraz wyzwania, jakie stawia przed inżynierami projektowanie globalnych usług o najwyższej dostępności. Nie zapominamy o “miękkich” aspektach pracy – odświeżamy spojrzenie na proces Code Review i wizualizację techniczną, szukając sposobów na zwiększenie efektywności zespołów deweloperskich w świecie zdominowanym przez automatyzację. Mamy nadzieję, że to poniedziałkowe zestawienie dostarczy Wam solidnej dawki inspiracji do nadchodzących projektów. Miłej lektury!

Agenty piszą kod, ale nie projektują systemów. Plus ponad 20 innych materiałów

Mon, 23 Mar 2026 15:00:00 +0000

W dzisiejszym wydaniu dominują dwa tematy: agenty AI i granice tego, co faktycznie potrafią, oraz architektura systemów na konkretnych przykładach z produkcji.

Znajdziesz tu też case study Slacka (przebudowa powiadomień), Twittera (500 tys. tweetów na minutę) i Stripe’a (1300 PR-ów tygodniowo), a obok nich – praktyczne materiały o DuckDB, dbt, LangGraph i ClickHouse.

Osobny wątek to praca z modelami językowymi: od kursów Anthropic, przez projektowanie system promptów, po refleksję o tym, dlaczego zaczynamy przepraszać chatboty.

DE w baseballu, stress-test OpenClaw oraz event-driven agents

Mon, 16 Mar 2026 15:00:00 +0000

W tym wydaniu agenci AI w praktyce: równoległe workflow developerskie, agenty głosowe z niską latencją i szersze spojrzenie na rynek pracy.

Solidna porcja inżynierii danych — case study z BlaBlaCar i Zalando, pipeline’y na Kafce i Airflow, porównanie Databricks z Microsoft Fabric. Są też dwa teksty o dbt: jeśli wolisz polski i gotowiec do uruchomienia, przygotowałem szybki start jako repo na GitHubie — wrzuć, odpal, działa (przynajmniej u mnie ;-).

Dla lubiących konkrety: analiza modeli cenowych pięciu cloud data warehouse’ów, omówienie pułapki „iluzji prototypu" w wdrożeniach AI i kilka tekstów o semantic layer — w tym mój wpis z końca zeszłego roku, jeśli chcesz szerszy kontekst przed lekturą.

dbt i semantic layer? a może po raz kolejny agenci ai?

Mon, 09 Mar 2026 15:00:00 +0000

W tym wydaniu agenci AI w praktyce: równoległe workflow developerskie, agenty głosowe z niską latencją i szersze spojrzenie na rynek pracy.

Więcej niż podstawy: AI, lakehouse, zaawansowany SQL

Mon, 02 Mar 2026 15:00:00 +0000

W dzisiejszym wydaniu eksplorujemy najnowsze trendy w świecie danych i AI – od inteligentnych agentów wspomagających pracę z kodem i platformami analitycznymi, przez zaawansowane techniki machine learning i tokenizacji, aż po praktyczne podejścia do architektury systemów i inżynierii danych.

Poznaj narzędzia, które realnie skracają czas developmentu, dowiedz się, jak wykorzystać embeddings w prognozowaniu szeregów czasowych, a także sprawdź, dlaczego PostgreSQL oferuje znacznie więcej niż podstawowe zapytania SQL. Nie zabraknie również praktycznych projektów z wykorzystaniem H3 do analiz geoprzestrzennych, przewodnika po architekturze lakehouse oraz wskazówek, jak unikać krytycznych błędów w API Pythona i pipeline’ach danych. Dla dla entuzjastów wizualizacji – profesjonalne wykresy w R oraz zasady projektowania efektywnych dashboardów.

Lokalne AI, optymalizacja Kafki i analiza 50 tysięcy profili randkowych

Mon, 16 Feb 2026 15:00:00 +0000

W dzisiejszym wydaniu łączymy praktyczne podejście do AI z fundamentami inżynierii danych. Zaczynamy od narzędzi agentowych – customizacji Claude Code dla Pythona (gdzie język jest przykładem - to samo można zrobić chociażby dla Javy) i OpenClaw jako lokalnego asystenta AI z pełną kontrolą nad danymi.

W sekcji ML znajdziecie automatyzację audytu katalogów z użyciem XGBoost, wprowadzenie do PyCaret (taka biblioteka auto-ml dla Pythona) oraz semantyczne wyszukiwanie obrazów łączące Gemini z Elasticsearch.

Zero ETL i hackathon z Bielikiem

Mon, 09 Feb 2026 15:00:00 +0000

W dzisiejszym wydaniu: architektura Zero ETL jako nowy standard w inżynierii danych (albo kolejny buzz word - różnie to bywa z nowościami), praktyczne zastosowania AI w zespołach data science, oraz ewolucja DuckDB w kierunku pełnoprawnego lakehouse.
Znalazłem też przegląd antywzorców w architekturach mikroserwisowych, strategie cache’owania w REST API i przewodnik po zarządzaniu ewolucją schematów w pipeline’ach strumieniowych (to potrafi być ból!).
Znajdziesz dzisiaj również frameworki analityczne dla e-commerce, techniki feature engineering w SQL dla szeregów czasowych oraz narzędzia do observability systemów ML w produkcji.

Kiedy AI zaczyna tworzyć własną kulturę... i jak ją wdrażać w produkcji

Mon, 02 Feb 2026 15:00:00 +0000

Hit minionego tygodnia - Moltbook. Jest to eksperymentalna sieć społecznościowa w stylu Reddita, zbudowana dla agentów AI, gdzie ludzie mogą tylko podglądać, a nie brać udziału.

Tekst Best Of Moltbook traktuje Moltbook jako dziwny, ale fascynujący eksperyment: obserwatorium tego, jak zachowują się LLM‑owe agenty, gdy zostawi się je samym sobie z własną przestrzenią społecznościową. Autor waha się między interpretacją to tylko sprytna konfabulacja i echo ludzkich promptów a podejrzeniem, że dzieje się tu coś ciekawszego - rodzaj zalążkowej kultury agentów, z własnymi memami, lękami, duchowością i polityką.

Rób produkcyjnie agentów AI, platformy danych i automatyzacje, które naprawdę dowożą

Mon, 26 Jan 2026 15:00:00 +0000

To wydanie to mocny pakiet o tym, jak przestać bawić się w „demka” i zacząć budować produkcyjne systemy danych, AI i automatyzacji – od architektury agentów, przez hurtownie, po niskopoziomowe optymalizacje.

Znajdziesz tu blok tekstów o agentach AI (platformy, orkiestracja, pamięć, narzędzia, realne case’y typu monitoring w Slacku), który pokazuje, co trzeba dostarczyć, żeby agenci nie wybuchli przy pierwszym większym ruchu. Do tego zestaw materiałów o analityce i data engineeringu: dobre EDA, przetwarzanie danych geograficznych z DuckDB + GeoPandas, kontrakty danych, wzorce ETL/ELT (Snowflake + dbt + Airflow, migracja z Airflow do Databricks), patterny pod AI‑ready pipelines i benchmark DuckDB vs Spark.

Agenci AI, skalowanie pipeline'ów i ewolucja Pythona

Mon, 19 Jan 2026 15:00:00 +0000

W dzisiejszym wydaniu głęboko zanurzamy się w świat agentów AI i agentic AI: od fundamentalnych rozróżnień między generatywną AI, agentami i podejściem agentycznym, przez praktyczne wyzwania bezpieczeństwa w postaci mapowania API, aż po optymalizację zarządzania kontekstem w Model Context Protocol. Nie zabraknie również solidnych podstaw machine learningu: kodowanie danych kategorycznych, Support Vector Machines oraz kompleksowy przegląd metod detekcji anomalii w Pythonie.

Na froncie inżynierii danych pokazujemy, jak ewoluować od prostych crontabów do systemów obsługujących miliardy zdarzeń, jak wykorzystać DuckDB do szybkich analiz bez ciężkiej infrastruktury oraz dlaczego dokumentacja jako kod w dbt-checkpoint staje się silnikiem jakości danych. Praktyczny przewodnik end-to-end z darmowymi narzędziami oraz refleksje nad zawodem data engineera dopełniają obrazu codziennych wyzwań w tej dziedzinie.

Zrób sobie lakehouse na laptopie

Mon, 12 Jan 2026 15:00:00 +0000

W dzisiejszym wydaniu dominują tematy z pogranicza AI, data engineeringu i praktyk inżynierskich. Szczególną uwagę poświęcamy agentom AI - od pisania skutecznych CLAUDE.md i budowy prostych agentów kodujących w 200 liniach, po zaawansowany monitoring autonomicznych systemów i wzorce projektowe dla inteligentnych aplikacji.

W sekcji data engineering znajdziesz konkretne rozwiązania: od wzorców partycjonowania przyspieszających zapytania, przez budowę lokalnego pipeline’u ELT z DuckDB i dbt (bez kosztów chmury), aż po kompletny przewodnik tworzenia lakehouse’a z Apache Iceberg, Trino i MinIO. Nie zabrakło też materiałów przygotowujących do rozmów rekrutacyjnych - 10 kluczowych tematów system design dla data engineerów w 2026 roku.

Ostatni raz w tym roku

Mon, 22 Dec 2025 15:00:00 +0000

W dzisiejszym wydaniu koncentrujemy się na praktycznych aspektach pracy z danymi i modelami AI. Z obszaru Data Engineering znajdziecie rozwiązania eliminujące nocne przetwarzanie batchowe przy pomocy DuckDB i dbt, przewodnik po strategiach obsługi danych wrażliwych oraz techniki checkpointingu w systemach event-driven. O DuckDB aż trzy materiały - bo to świetne narzędzie. Podobnie PostgreSQL to świetne narzędzie, “zamiatające” inne typy baz - tutaj na przykładzie baz wektorowych i indeksowania 100 milionów wektorów w 20 minut.

Jak ludzie korzystają z AI w pracy?

Mon, 15 Dec 2025 15:00:00 +0000

Ten tydzień - ostatni pełny przed świętami - to raczej czas porządków, niż wielkich premier. Choć niektórzy testują, jak naprawdę radzi sobie GTP-5.2 - najnowsze dziecko OpenAI.
Na dziś wystarczy tej dolinokratycznej magii. Przejdźmy do rzeczy, które mają większy sens: praktyka, konkret, zero ściemy (bo po to tu jesteś, nie?).

W tym numerze skupiamy się na tym, co daje realny efekt. Optymalizacja. Wydajność. Sprytne podejścia do codziennej roboty z danymi. Mamy PostgreSQL i DuckDB w akcji, Parquet na sterydach oraz garść sztuczek w Apache Spark i SQLAlchemy. Dorzucamy integrację DuckDB z Amazon S3 i pomysł na streamingowy ETL bez klasycznych hurtowni - lekko, elastycznie i bez ton konfiguracji.

Kryzys pracowniczy w branży + konferencja AI Dev 25

Mon, 08 Dec 2025 15:00:00 +0000

W dzisiejszym wydaniu przyglądamy się transformacji współczesnych architektur IT – od rosnącej konkurencji dla RESTa i mikroserwisów, przez natywną obsługę wektorów w Postgresie, aż po praktyczne wzorce partycjonowania Parquet. W sekcji AI i ML znajdziecie przewodnik po PyTorch dla chcących zacząć z sieciami neuronowymi i budowaniem własnych modeli AI. Znajdziecie też tekst o metodach interpretacji predykcji XGBoost z wykorzystaniem SHAP.

Dla programistów Pythona przygotowaliśmy materiały o walidacji outputów LLM z Pydantic, monitoringu FastAPI, zaawansowanych technikach pandas oraz nowym narzędziu “ty” do automatyzacji przepływów w chmurze. DevOpsi mogą sprawdzić tutorial wdrażania Spring Boot na Kubernetes, rozwiązanie problemu rozbieżności między środowiskami lokalnym a produkcyjnym oraz master class z tcpdump i Wireshark.

Sporo "przydasiów" do Linuxa oraz LLMów

Mon, 01 Dec 2025 15:00:00 +0000

W dzisiejszym wydaniu skupiamy się na praktycznych aspektach zarządzania danymi i sztuczną inteligencją w środowiskach produkcyjnych. Przedstawiamy kompleksowe podejścia do integracji modeli językowych: orkiestrację wielu LLM za pomocą Spring AI oraz budowę niestandardowych pipeline’ów z LangGraph. Znajdziecie również porównanie platform MLOps (MLFlow, Metaflow, Kubeflow).

W obszarze Big Data i data engineeringu omawiamy kluczowe technologie i wzorce architektoniczne. Delta Lake jako warstwa transakcyjna dla Apache Spark, praktyczne wzorce współpracy zespołowej z DuckDB, dyskusja o przyszłości koncepcji data mesh oraz kompleksowe spojrzenie na ekosystem Big Data – od kolejek wiadomości po HDFS, czyli standardowy stack big data (nota bene - możesz mieć big data w domu - zapraszam do repo).

Jak wygląda "przerzucanie liczb z worka do worka" w ubezpieczeniach i przemyśle?

Mon, 24 Nov 2025 15:00:00 +0000

W dzisiejszym wydaniu znajdziesz solidną dawkę praktycznej wiedzy – od optymalizacji agentów AI w GitHub Copilot i dyskusji o tym, czy serwer MCP rzeczywiście jest Ci potrzebny, przez zaawansowane techniki pracy z DuckDB i porównanie narzędzi do przetwarzania 650 GB danych, aż po konkretne konfiguracje Nginx, Terraform i Kubernetes.

Często tutaj trafiają teksty związane/zachwalające DuckDB (dzisiaj też będą). Alibaba tymczasem opublikowała trzyczęściowy cykl, w którym dogłębnie analizuje wewnętrzne mechanizmy DuckDB. Na blogu znajduje się analiza kodu DuckDB pod kątem formatu plików, formatu przechowywania tabel oraz warstwy wykonawczej. Część pierwsza, druga i trzecia.

System design, bazy danych i praktyczny Python

Mon, 10 Nov 2025 15:00:00 +0000

W dzisiejszym wydaniu skupiamy się na praktycznych aspektach projektowania i optymalizacji systemów danych.
Zaczynamy od architektury: poznasz sprawdzone metody nauki projektowania systemów oraz zajrzysz pod maskę infrastruktury OpenAI opartej na Kubernetes i Apache Kafka.
W sekcji baz danych znajdziesz spojrzenie na BigQuery z perspektywy programistów Pythona oraz dwanaście realnych przypadków migracji do DuckDB z konkretnymi oszczędnościami.

Miłośnicy Pythona znajdą też kilka wartościowych materiałów: od elegancji dekoratorów, przez biblioteki przewyższające Excela, po praktyczną migrację z PostgreSQL do MongoDB. Warto zerknąć na porównanie HTTPX z Requests (nie tylko w kontekście projektów LLM, ale po prostu na httpx jako nowocześniejszy pakiet) oraz omówienie narzędzia UV Toolchain do stabilizacji środowisk CI/CD.

Język polski najlepszy do promptowania?

Mon, 27 Oct 2025 15:00:00 +0000

W dzisiejszym wydaniu dominują tematy związane z infrastrukturą danych i narzędziami AI. Szczególnie polecam artykuł o benchmarku ONERULER – okazuje się, że język polski najlepiej radzi sobie z analizą długich kontekstów w modelach językowych!

Jeśli budujesz pipeline’y danych, znajdziesz praktyczne przewodniki po open table formats (Iceberg, Delta Lake), kompletnej konfiguracji Docker+Airflow+dbt+Postgres oraz wzorcach SQL w DuckDB. Dla zainteresowanych Kafką – materiały o wysokiej dostępności na GKE Autopilot i alternatywie w postaci BufStream z silniejszymi gwarancjami spójności.

Nowy dział low code

Mon, 06 Oct 2025 15:00:00 +0000

Kolejny tydzień, kolejna porcja wiedzy z szerokiego świata danych i AI. Jak zwasze przed Tobą materiały, które sprawdzą się zarówno w codziennej pracy, jak i przy zgłębianiu nowych technologii.

Jeśli zajmujesz się infrastrukturą i DevOps, czekają na Ciebie praktyczne wzorce Dockerfile dla Pythona, które zredukują czas buildów do sekund, oraz dziewięć sprawdzonych technik autoskalowania w Kubernetes, które przetrwają piki ruchu. A dla fanów baz danych – przegląd rozszerzeń PostgreSQL, które działają jak supermoc, oraz porównanie architektur Snowflake, Oracle i PostgreSQL.

Nie tylko obraz tego, co się dzieje, ale jak to wykorzystać w praktyce

Mon, 29 Sep 2025 15:00:00 +0000

Czy kiedykolwiek marzyłeś o tym, żeby skrócić generowanie raportu z 6 godzin do 15 minut? A może zastąpić tradycyjne procesy ETL jednym narzędziem, które działa nawet 100 razy szybciej niż Spark?

To nie science fiction – to rzeczywistość dzisiejszego numeru!

Od agentic AI, które rewolucjonizuje kariery specjalistów IT, po konkretne implementacje MCP w firmach CRM – jak zwykle w tym newsletterze nie tylko obraz tego, co się dzieje, ale przede wszystkim jak to wykorzystać w praktyce.

Sporo Streamlit i tutoriali budowania Agnetów AI

Mon, 08 Sep 2025 15:00:00 +0000

Gdy jedni wciąż zastanawiają się, czy warto eksperymentować z agentami AI, inni już budują kompletne systemy analityczne z Pydantic-AI i Streamlit. Gdy niektóre zespoły mierzą się z podstawową konfiguracją Kafki, inne optymalizują przepustowość na poziomie miliona wiadomości na sekundę. Między innymi o tym dzisiaj.

Rewolucja agentów AI - od zera do działającego agenta z LangGraph, plus praktyczne połączenie Streamlit z Pydantic-AI do analizy danych. To nie są już tylko proof-of-concept, to konkretne narzędzia robocze.

Gdzie się bujasz na rowerze?

Mon, 22 Aug 2022 21:37:14 +0000

Mam znajomego, który lubi jeździć na rowerze za każdym razem inną trasą. Skąd ma wiedzieć czy daną ulicą już jechał czy nie? Pomożemy mu robiąc heatmapę.

Idea

Przede wszystkim - trzeba mieć dane. Dzisiaj będziemy operować na danych zebranych w aplikacji Strava, zatem ruszamy w teren i kręcimy kilometry!

Osobiście trochę jeżdżę, ale nie na tyle żeby inwestować w pełne konto na Stravie. Bo pełne konto ma opcję rysowania heatmapy…

Swoją drogą co miesiąc Strava przygotowuje mapki i publikuje je na swoich stronach i tak dla przykładu jeździ się rowerem po Polsce:

Ile czasu marnujemy na spotkaniach?

Fri, 28 May 2021 15:50:04 +0000

Jak z poziomu Pythona dostać się do zawartości Outlooka (poczta, kalendarz)?

W niedawnym tekście opisałem drogę do aktualnego miejsca i zajęcia w pracy. Pisałem (chyba tak, sprawdź!), że sporo czasu zajmują mi spotkania? Sprawdźmy!

Photo by Estée Janssens on Unsplash

Poprzednio nie było też kodu, a przecież kod jest najciekawszy.

Gdzieś po drodze miałem styczność z VBA, a niedawno odkryłem, że w sumie z narzędziami MS Office można postępować dość podobnie z poziomu Pythona jak z poziomu VBA. Dzisiaj więc trochę o narzędziach MS Office dotykanych Pythonem.

Jak zostać analitykiem (danych, systemowym, rozwiązań)?

Sun, 09 May 2021 15:30:57 +0000

17 lat temu Polska weszła do UE. Dokładnie tego samego wieczoru wychodziłem z knajpy po zakończonym oblewaniu obronionej pracy magisterskiej.

Dzisiaj jestem formalnie analitykiem IT. Czego się nauczyłem w tym czasie? Czy coś bym zmienił?

Wiem z dostępnych mi danych, że stronę Dane i Analizy na Facebooku obserwują w około 1/5 ludzie w wieku 18-24 lata oraz w nieco ponad 1/2 osoby w wieku 25-34 lata. Bloga czyta podobna publiczność, w prawie identycznym rozkładzie. Tak więc sporo z Was jest na początku swojej kariery zawodowej. Zakładam też, że skoro jesteście fanami strony i czytelnikami bloga to interesuje Was ogólnie pojęte zajmowanie się danymi.

Jak trzymać konfigurację skryptów?

Mon, 29 Mar 2021 16:06:13 +0000

Jak trzymać konfigurację skryptów? Żeby było bezpiecznie i wygodnie? Przy prostych zadaniach konfiguracyjne parametry można (ale nie należy!) trzymać inline w kodzie. Ale lepiej w zmiennych (właściwie stałych) zdefiniowanych na początku pliku (i odpowiednio nazwanych, żeby wiedzieć że to stałe związane z konfiguracją). A najlepiej - w pliku zewnętrznym (lub zmiennych systemowych, ale tym się dzisiaj nie zajmiemy).

Photo by Ferenc Almasi on Unsplash

Dlaczego w pliku zewnętrznym? Z co najmniej dwóch powodów:

Pipeline w SciKit Learn - własny estymator

Thu, 05 Nov 2020 15:32:20 +0000

Dzisiaj napiszemy własny (a raczej poznamy mechanikę działania) oraz nauczymy się szukać najlepszych hyper parametrów dla modelu (właściwie: całego pipeline) w zwarty sposób.

W pierszej części zobaczyliśmy jak zbudować pipeline dla danych i modeli. Dzięki temu dostaliśmy możliwość zmiany sposobu transformacji danych i zmiany modeli w ramach prostego, zwartego kodu. Ale co jeśli potrzebujemy jakiś transformator którego nie ma w pakietach?

Tak jak poprzednio - nasze działania oprzemy na Pythonie i pakiecie scikit learn. Podobne rozwiązania można znaleźć w R (jeśli tego szukasz - zainteresuj się Tidymodels).

Data Science Summit 2020

Fri, 18 Sep 2020 11:48:55 +0000

16 października (piątek), odbędzie się IV edycja konferencji Data Science Summit

Post to informacja prasowa, a niniejszy blog oraz fanpage Dane i Analizy to patroni medialni konferencji.

DSS to największe w Polsce wydarzenie o tematyce data science adresowane do wszystkich osób związanych lub zainteresowanych szybko rozwijającym się obszarem przetwarzania, analizy i wizualizacji danych oraz uczelnia maszynowego.

Data Science Summit 2020 to przede wszystkim ponad 12 równoległych ścieżek tematycznych i ponad 100 prezentacji prowadzonych przez najbardziej pożądanych ekspertów z Polski i zagranicy.

Analiza polskiego crowdfundingu na bazie Patronite.pl

Sun, 30 Aug 2020 15:45:49 +0000

Zebrałem informacje o ponad 1700 profilach na Patronite.pl - wiem ile zarabiają, ilu mają patronów i za co patroni płacą. Dzielę się tymi informacjami z Wami w - być może - największej analizie polskiego crowdfoundingu!

Patronite zgodnie z informacją na Wikipedii to założony w 2015 roku serwis wspomagający pozyskiwanie finansowania przez osoby twórcze. Podstawową formą działalności portalu jest pomoc w zdobywaniu comiesięcznego wsparcia od osób indywidualnych i instytucji.

Dla czystości tekstu pełny kod źródłowy znajdziecie w repozytorium

AI & NLP Day 2020

Fri, 21 Aug 2020 09:00:00 +0000

Do 2025 r. Polska będzie potrzebować ok. 200 tys. specjalistów zajmujących się sztuczną inteligencją - wynika z danych ostatniej, siódmej edycji raportu Monitoring trendów w innowacyjności Polskiej Agencji Rozwoju Przedsiębiorczości.

Post to informacja prasowa, a niniejszy blog oraz fanpage Dane i Analizy to patroni medialni konferencji.

W obliczu rosnącego zapotrzebowania na ekspertów AI i dynamicznie postępującej cyfryzacji, edukacja nowych i obecnych kadr IT w obszarze Big Data będzie miała znaczący wpływ na rozwój gospodarczy w najbliższych latach.

Ile trzeba zjeść czekolady żeby dostać Nobla?

Sun, 26 Jul 2020 15:10:00 +0000

Znacie to pytanie? Wiecie skąd pochodzi? To poznajcie jeszcze moje zdanie!

Janinę Bąk poznałem oglądając na YouTube jej wystąpienia w ramach konferencji - dwa albo trzy. Jedno na pewno o czekoladzie i Noblistach, to pewne. Poszukajcie, fajne jest. Te inne które oglądałem też są fajne. Janina umie w prezentacje i w statystykę, to jest bezsprzeczne. Jest zabawnie, jest na poziomie przystępnym dla laika (a statystyka to nie jest kaszka manna albo zupa pomidorowa!).

Wyniki wyborów prezydenckich 2020 - coś więcej niż mapki

Sun, 19 Jul 2020 21:51:41 +0000

Wybraliśmy nowego prezydenta Polski. Jak zwykle internet zalała seria mapek z wynikami. Ale czy mapki to wszystko co można wyciągnąć?

Mapkami podniecają się wszyscy, ale tak właściwie co one mówią o wynikach wyborów i osobach, które oddały swój głos? Dlaczego Andrzej Duda wygrał w jednych rejonach, a Rafał Trzaskowski w innych?

Oczywiście media teraz nieco onanizują się tym, że jeden kandydat wygrał więcej gmin, a inny więcej województw (proporcjonalnie oczywiście). Mapkę narysować można zawsze (zresztą z wynikami po gminach publikowałem na Twitterze jako jeden z pierwszych - dlatego warto śledzić mnie na Twitterze), o tutaj:

Promocja na książki

Sat, 11 Jul 2020 10:03:15 +0000

Jeszcze tylko do poniedziałku 13.07 promka wakacyjna w Helionie, łapcie póki są porządne rabaty!

Deep learning z Kerasem w Pythonie, a konkretnie pozycja Deep Learning. Praca z językiem Python i biblioteką Keras i wersja dla R: Deep Learning. Praca z językiem R i biblioteką Keras
Ponoć najlepsza książka do nauki Pythona Automatyzacja nudnych zadań z Pythonem. Nauka programowania
Oraz dla równowagi - najlepsza książka do nauki R: Język R. Kompletny zestaw narzędzi dla analityków danych
Analiza danych to też SQL, zatem Praktyczny kurs SQL
Najlepszym środowiskiem do pracy jest mimo wszystko Linux - podstawy złapiesz dzięki Linux. Komendy i polecenia
Ale nie wszystko musisz mieć zainstalowane na jakimś serwerze - są rozwiązania kontenerowe, więc Docker. Praktyczne zastosowania może okazać się dobrym pomysłem.
Chyba, że wolisz pozostać w świecie Excela, wówczas przyda Ci się Biblia Excela. Sposobem na przejście do bardziej zaawansowanych technik jest Power Query, w korporacjach przyda się więc Power Query w Excelu i Power BI. Zbieranie i przekształcanie danych.

Więcej książek w ramach promocji znajdziecie na stronie.

Które API szybsze - w Pythonie czy w R?

Fri, 05 Jun 2020 15:48:33 +0000

Wiele razy czytałem opinie, że Python jest szybszy a R nie nadaje się na produkcję. Ale to opinie nie potwierdzone badaniami. Tutaj pierwsze badania na ten temat!

Testom podlegać będzie API zbudowane w R z użyciem frameworków Plumber i RestRserve oraz w Pythonie z użyciem Flask.

Biorąc pod uwagę analizę danych i na przykład wnioskowanie czy predykcje oparte o te dane zarówno R jak i Python dobrze się sprawdzają. Mam nadzieję, że niejednokrotnie w ramach tego bloga pokazałem, że R jest idealny do analizy danych. A o Pythonie w tym samym kontekście pisze się wszędzie (i pewnie tutaj będzie też coraz więcej). Zatem czy warto wybierać pomiędzy tymi rozwiązaniami przy wdrożeniu na produkcję?

(py)Spark, Hadoop i HDFS - podstawy

Thu, 09 Apr 2020 19:06:13 +0000

Dzisiaj zajmiemy się wykorzystaniem Sparka i Hadoopa do przetwarzania większej ilości danych. Oraz do budowania prostego modelu (regresji liniowej). Może jeszcze nie jest to big data, ale mechanizmy są identyczne jak w przypadku większej liczby danych. Wystarczy tylko tych danych więcej zgromadzić, zbudować większe środowisko (dużo serwerów) i… też będzie działało.

A w dodatku poznamy pakiet faker który pozwoli nam na wygenerowanie sztucznych danych.

Spark i Hadoop

Apache Spark to rozwijana na zasadach open source platforma klastrowego przetwarzania danych, która ma interfejsy API dla takich języków programowania jak Scala, Python, Java i R.

Muzyka i data science

Tue, 24 Mar 2020 17:11:08 +0000

Każdego dnia pojawia się nowa muzyka, w wielu różnych gatunkach. Jak wybrać to, czemu warto poświęcić czas?

Dodatkowo dowiemy się jakie znaczenie ma uczciwe przygotowanie danych.

Zdjęcie na okładce: Franck V. on Unsplash

Gdybym miał powiedzieć co lubię najbardziej bez wątpienia byłaby to muzyka. Słucham dużo, nie wyobrażam sobie życia w ciszy. Ale mimo dostępu do nieskończonych (powiedzmy) zasobów muzycznych chociażby poprzez Spotify zauważyłem, że zamykam się w bańce już znanych wykonawców i utworów. A ja lubię odkrywać nowe dźwięki, tylko nie mam czasu (trochę też zbyt na to jestem leniwy) na szukanie nieznanych utworów czy wykonawców. Po co mam poświęcać kupę czasu na szukanie czegoś co mi się nie spodoba?

Mapy w Pythonie

Fri, 28 Feb 2020 15:07:09 +0000

Jakiś czas temu pokazywałem jak w prosty sposób narysować mapę w R. Dzisiaj powtórzymy zadanie dla Pythona.

Skorzystamy z danych GUS na temat bezrobocia oraz liczby ludności (pomijając dokładność złożenia danych - interesuje nas rysowanie map, a nie analiza bezrobocia) oraz map z Głównego Urzędu Geodezji i Kartografii.

Jeśli potrzebujesz podobnych informacji jak zrobić to wszysto w R sprawdź na początek wszystko co jest w ramach tagu mapa

Skąd pobrać dane?

Dane o liczbie ludności: Ludność / Stan ludności / Ludność wg grup wieku i płci w tzw. BDLu (czyli Banku Danych Lokalnych GUS) - bierzemy dane z 2018 roku (najnowsze pełne jakie są); Wiek = ogółem, Płeć = ogółem; wszystkie jednostki terytorialne. W wyniku klikania dostaniemy się do tabeli, którą ściągamy lokalnie poprzez Export / CSV - tablica wielowymiarowa.
Dokładnie tak samo pozyskujemy dane o liczbie bezrobotnych: Rynek pracy / Bezrobocie rejestrowane / Bezrobotni zarejestrowani wg płci w gminach (znowu: ogółem, 2019 rok, wszystkie jednostki; pobieramy plik CSV dokładnie tak samo jak wyżej).
Dane mapowe bierzemy z GUGiK - interesuje nas archiwum PRG – jednostki administracyjne (uwaga - to ma 375 MB!). To archiwum rozpakowujemy i (coś co ja robię, żeby później nie było problemów) zmieniamy nazwy plików tak, aby pozbyć się polskich znaków i wszystkie litery w nazwie były małe.

Przygotowanie danych z GUS

Ale zanim - potrzebne nam będzie kilka pakietów Pythona do dalszej pracy:`

Analiza własnych finansów

Fri, 13 Dec 2019 14:20:00 +0000

Jak nauczyć się analizy danych? Robiąc małe i duże projekty.

Kiedyś napisałem post o tym jak się przemieszczam w którym odsłoniłem dość dużo swojej prywatności, dzisiaj ciąg dalszy.

Postanowiłem, że mocniej wezmę się za Pythona i to co potrafię dość szybko zrobić w R będę robił w Pythonie. To najlepszy sposób na naukę - zmuszać się w pewnym sensie do przełamywania własnych oporów. Z drugiej strony - od dawna chodził za mną tekst związany z analizą własnych wydatków.

Analiza wystąpienia udaru niedokrwiennego mózgu

Fri, 15 Nov 2019 16:52:10 +0000

Zanonimizowana próbka danych NFZ dotycząca wystąpienia udaru niedokrwiennego mózgu NFZ opublikował dane, zobaczmy czy coś ciekawego z nich można wyciągnąć?

Dzisiaj wpis gościnny - autorstwa Dominiki Kuc. Opublikowałem na Dane i Analizy link do danych z zaproszeniem do skorzystania z nich. We wpisie na fanpage’u napisałem też, że jeśli ktoś zechce to mogę go opublikować tutaj. Dominika skorzystała i przygotowała analizę. Widzicie jak łatwo?

A teraz oddaję już miejsce na Waszych ekranach Dominice.

Sejm VIII kadencji

Mon, 28 Oct 2019 13:26:13 +0000

Wybory parlamentarne 2019 dobiegły końca, a co za tym idzie mamy zmianę kadencji Sejmu. Podsumujmy więc mijającą, ósmą kadencję Sejmu Rzeczpospolitej Polskiej. Kiedy głosowali posłowie, o jakich porach dnia i nocy? Kto był najczęściej nieobecny?

Niniejszy wpis pokaże Wam jakieś ogólne, dość przekrojowe statystyki. Sądzę, że to dobry materiał wyjściowy dla redakcji informacyjnych. Można poszerzyć analizę o dodanie innych źródeł, szczególnie doniesień prasowych. Ale niech zajmą się tym dziennikarze, a nie analitycy. Mogę pomóc, dogadamy się (po ile teraz wierszówka? a research?).

Latający premierzy

Tue, 20 Aug 2019 15:49:02 +0000

Przełom lipca i sierpnia 2019 roku w polskiej polityce zdominowany był przez informacje o lotach - najpierw marszałka Sejmu, później kolejnych premierów. KPRM opublikował listę lotów kolejnych premierów z ostatnich kilku lat - zobaczmy czego nie zrobiły z nią media?

Listy te (na dzień 18 sierpnia 2019 roku) dostępne były pod linkami:

Nie znalazłem w żadnych mediach sensownego porównania pomiędzy premierami, więc porównam sobie sam. Przy okazji pokazując jak można w kilkadziesiąt minut przygotować rzetelny materiał.

(Inteligentne) Raporty na żądanie

Wed, 07 Aug 2019 20:17:22 +0000

Dzisiaj przygotujemy narzędzia do automatycznego generowania raportów, które będzie (quasi) inteligentnie odpowiadać na pytania zadane przez email.

Czyli jak pozbyć się upierdliwej pracy (i zająć się czymś innym)

Uwaga: wraz z aktualizacją pakietu gmailr do wersji 1.0 prezentowany poniżej kod związany z logowaniem do konta może nie działać. Przeczytaj proszę informacje o tym jak to zmienić Kod na GitHubie powinien być ok.

Problem z jakim można się często spotkać w korporacjach to wysyłanie tych samych raportów mailem. Wyobraźmy sobie taki scenariusz:

Model jako API (w R)

Wed, 17 Jul 2019 13:19:18 +0000

Budujemy model w R. Daje nawet dobre wyniki. Ale jak go użyć produkcyjnie? Gdyby tak pytać o wynik korzystając z API?

Dzisiaj o tym jak przygotować w R web-serwis, czyli narzędzie które zapytane (w odpowiedni sposób) przez internet zwróci nam jakiś wynik. W naszym przypadku odpowiedzią będzie wynik działania modelu.

Zadanie podzielimy na kilka etapów:

przygotowanie modelu
przygotowanie funkcji, które będą używać naszego modelu
web-service korzystający z tych funkcji

Przygotowanie modelu

Na warsztat weźmiemy bardzo prosty przykład i prosty model. Będziemy przewidywać gatunek irysa na podstawie rozmiarów płatka (petal) i kielicha (sepal) - czyli wykorzystamy popularny w uczeniu maszynowym zbiór iris.

Jak interpretować wyniki analizy komponentów głównych (PCA)?

Fri, 17 May 2019 09:18:08 +0000

W sieci dostępne jest multum informacji na czym polega metoda PCA, jednak ich istotnym problemem jest to, że za bardzo skupiają się na stronie matematycznej, a za mało na tym jak interpretować, rozumieć i wyjaśniać wyniki osobom nieobeznanym w statystyce i naukach ścisłych.

Dzisiejszy wpis jest wpisem gościnnym - autorem poniższego tekstu jest dr Iwo Augustyński.

W sieci dostępne jest multum informacji na czym polega metoda PCA, jednak ich istotnym problemem według mnie jest to, że za bardzo skupiają się na stronie matematycznej a za mało na tym jak interpretować, rozumieć i wyjaśniać wyniki osobom nieobeznanym w statystyce i naukach ścisłych. Celem poniższego artykułu jest wypełnienie tej luki. Zanim jednak przejdziemy do wyjaśnień parę słów wstępu na temat działu statystyki, z którego metoda PCA się wywodzi.

Gole w europejskich ligach

Wed, 24 Apr 2019 13:21:16 +0000

Skąd padają gole? Jak poruszają się piłkarze podczas meczu? Czy zawodnicy podają zawsze do tych samych?

Wszystkiego tego można się dowiedzieć jak tylko ma się odpowiednie dane… Warto przeglądać czasem Reddita - można znaleźć np. Soccer shots dataset (post już jest skasowany, ale kto pierwszy ten lepszy) zawierający link do arkusza z danymi zeskrapowanymi z ciekawej strony understat.com.

Skoro ktoś zdjął te dane i udało mi się zapisać do nich link to wykorzystajmy je!

Instagram - zbieranie danych i bot

Wed, 27 Mar 2019 14:28:51 +0000

Konto na Instagramie mam od kwietnia 2012 roku, ale nie zajmuje on mojego czasu (nie zaglądam tam wcale). Kiedyś chciałem sprawdzić czy zdjęcia z tagu #warszawa są zrobione w Warszawie, ale nie sprawdziłem… Do dzisiaj.

Tekst How I Eat For Free in NYC Using Python, Automation, Artificial Intelligence, and Instagram który robi furorę w ostatnich dniach sprawił, że wreszcie ruszyłem tyłek i zająłem się tematem. Kilka miesięcy temu widziałem tutorial How to Get Instagram Followers/Likes Using Python, dzisiaj spróbujemy w R.

Najpopularniejsze imiona dzieci nadane w 2018 roku

Tue, 05 Mar 2019 16:07:11 +0000

Niedawno Ministerstwo Cyfryzacji opublikowało listę najpopularniejszych imion nadawanych dzieciom w 2018 roku. Wykorzystamy to do połączenia Pythona z R (albo R z Pythonem).

Lista opublikowana została w postaci serii tekstów na stronach Ministerstwa, w formie całkowicie niezjadliwej. Co więcej - prasa podała informacje dalej, bez żadnego obrobienia tych danych. Zróbmy to więc jak należy przy okazji łącząc R i Pythona.

Aby móc w RStudio używać Pythona oraz mieć dostęp do obiektów Pythona w sesji R potrzebujemy biblioteki reticulate - polecam się z nią zapoznać. Daje ciekawe możliwości, które właśnie za chwilę zobaczymy na konkretnym przykładzie.

Analiza ofert pracy

Mon, 18 Feb 2019 21:42:14 +0000

Ile jest pracy dla ludzi zajmujących się analizą danych i machine learningiem? Jakiej pracy w Polsce jest najwięcej? Czy widać podział na Polskę A i Polskę B w ofertach pracy?

Nie znalazłem żadnych raportów ani badań na ten temat. Największy (chyba) portal z ofertami pracy Pracuj.pl publikuje co jakiś czas raport, ale to nie to. Już lepsze są wyniki ankiet prowadzonych przez Stackoverflow ale to są dane globalne. Najbliższe temu czego szukałem były raporty np. dla województwa łódzkiego, ale najnowszy dotyczy wiosny 2015 roku (zresztą najnowsza aktualność na tej stronie to grudzień 2015…). Łódzki raport robiło pięć osób, to co poniżej robiłem sam. Może więc mieć swoje niedoskonałości, ale mam nadzieję że będzie dla Was interesujący.

Testowanie rozkładu, hipotez i regresja logistyczna

Thu, 24 Jan 2019 17:33:14 +0000

Dzisiaj trochę nadrabiana statystyki za pomogą R. Zobaczymy jak przetestować czy rozkład jest normalny, jak przetestować hipotezy i jak zbudować prosty model.

library(tidyverse)
library(broom)
library(knitr)
library(kableExtra)

Za dane przykładowe posłużą nam dane o wzroście i wadze w podziale na płeć. Wczytujemy dane - użyjemy zestawu danych z Kaggle (ściągnąłem je wcześniej na dysk):

data <- read_csv("weight-height.csv")

# szybki rzut oka w dane
glimpse(data)

## Observations: 10,000
## Variables: 3
## $ Gender <chr> "Male", "Male", "Male", "Male", "Male", "Male", "Male", "…
## $ Height <dbl> 73.84702, 68.78190, 74.11011, 71.73098, 69.88180, 67.2530…
## $ Weight <dbl> 241.8936, 162.3105, 212.7409, 220.0425, 206.3498, 152.212…

Dziwne te liczby: wzrost w okolicach 70? Waga blisko 200? Dane są amerykańskie, więc wzrost mamy w calach, a wagę w funtach. Nie musimy, ale możemy przeliczyć to na jednostki metryczne - będzie nam łatwiej interpretować wyniki.

Podsumowanie 2018 roku na blogu

Fri, 04 Jan 2019 12:47:59 +0000

Początek roku to dobry czas na podsumowanie roku poprzedniego. Wykorzystajmy więc ten moment i podsumujmy 2018. Oczywiście z użyciem R.

W zeszłym roku dokonałem analogicznego podsumowania opartego jedynie o dane z Google Analytics. Tym razem skorzystamy bezpośrednio z danych zawartych w postach (ale uzupełnimy je o dane z Google Analytics), dla ułatwienia wyciągniętych z bazy danych.

Chciałbym dowiedzieć się kilku rzeczy o moim pisaniu w 2018 roku:

Jakich słów używałem najczęściej?
Czy da się podzielić posty na tematy?
Jak długo żyją posty (ile dni po publikacji są czytane)?
Czy istnieje korelacja pomiędzy liczbą wizyt a liczbą komentarzy?

Ja to wszystko wiem na bieżąco, ale pokażę Wam jak to zrobić. A nuż przyjdzie komuś przeprowadzić podobną analizę? Antyweb, Spider’s Web, Niebezpiecznik - Was przeanalizowałbym najchętniej pod tym kątem :) Grzesiek, Przemek, Piotrek - piszcie na maila! Potrale nawet chętniej…

Spark, czyli opóźnienia pociągów

Fri, 21 Dec 2018 14:52:21 +0000

Czy polskie pociągi są punktualne? To pytanie, na które poszukamy odpowiedzi, ale jest ono tylko przyczynkiem do dzisiejszego wpisu.

Chciałbym pokazać dzisiaj sposób znalezienia odpowiedzi, nawet nie samą odpowiedź. Skąd wziąć dane? Jak sobie z nimi poradzić? Czym je uzupełnić?

Pozyskanie danych

W pierwszym odruchu pomyślałem o stronach PKP i webscrappingu. Ale na Twitterze mojego bota @rstatspl obserwuje inny bot - @OpPociagow, który prezentuje ciekawe dane. Skoro prezentuje to je ma. Skoro ma, to gdzieś są. Chwila rozmowy z twórcą i uzyskujemy adres InfoPasażer Archiver - archiwum opóźnień pociągów.

Analiza wykopalisk z głównej strony Wykop.pl

Wed, 12 Dec 2018 09:15:47 +0000

Czy Wykop to obraz całego świata czy tylko specyficzny dla społeczności wycinek? Co cieszy się największym powodzeniem? Wykop to serwis tworzony przez użytkowników. Każda informacja jest dodawana, oceniana i komentowana przez społeczność. Te najciekawsze (z największą liczbą wykopów, czyli głosów pozytywnie oceniających dodane znalezisko) trafiają na stronę główną. Analizą tego co trafiło na główną stronę Wykopu się zajmiemy. Kiedyś była taka analiza (Statystyki wykopu z lat 2005-2017), ale nowszej nie znalazłem. Sporo takich materiałów przewija się przez Reddit o Reddicie. Dlaczego więc, nie zrobić tego samego dla naszego polskiego odpowiednika? Dane zostały zebrane wieczorem 2 grudnia 2018 roku, tylko z pierwszych trzech tysięcy stron strony głównej serwisu. Świetnie byłoby mieć dane o każdym znalezisku, o tym kto zagłosował na plus, kto na minus. Tych danych byłoby bardzo dużo, ale nie chciałem ich zbierać. Zajęło by to dużo czasu, jeszcze więcej zajęła by obróbka, a mam inne rzeczy do roboty. Początkowo analiza ta miała być wprawką do nauki Pythona, ale stanęło (jak zwykle) na R. W Pythonie napisałem skrypt scrappujący dane. Skrypty (jakieś szczątkowe) i zebrane dane znajdziecie na moim repo. Zacznijmy od liczby znalezisk wpadających na stronę główną. Widzimy, że liczba ta jest mniej więcej stała i jest to średnio około 65 znalezisk dziennie (max to 156 - 19 grudnia 2015, minimum to 31 z 11 czerwca 2016 roku). Rozkład jest ładny, symetryczny, taki Gauss prawie. Znajdźmy absolutne hity - czyli znaleziska najwyżej wykopane: Aby było łatwiej je przeglądać (i dowiedzieć się o czym są - na podstawie opisów dodanych przez zgłaszających) poniżej tabela z bardziej szczegółowymi informacjami:

Wycieczki do Grecji

Fri, 30 Nov 2018 16:47:06 +0000

Ile kosztuje wycieczka do Grecji? Czy last minute jest opłacalne i kiedy cena zaczyna spadać? Jak znaleźć najbardziej atrakcyjne miejsce na wypoczynek (w Grecji)? Jakiś czas temu analizowałem raporty publikowane przez Polski Związek Organizatorów Turystyki. Z analizy wyszło, że najchętniej jeździmy na wypoczynek do Grecji (tak było w drugiej połowie 2017 roku). Postanowiłem więc sprawdzić ile kosztuje taki wyjazd.

Zebranie danych

Aby cokolwiek analizować trzeba mieć dane. Jeśli nie mamy dostępu do baz oraz nie możemy (albo nie chcemy) ich kupić to można pokusić się o ich zebranie z sieci. Założeniem tego bloga jest to, aby kolejne analizy przygotowywać bez opłat (nie licząc czasu i kosztów typu serwery), zatem dane weźmiemy sobie sami.

Wielka bitwa majonezów! Ketchupów też

Thu, 15 Nov 2018 13:40:26 +0000

Mieszkałem w Krakowie, teraz w Warszawie, przez długi czas często bywałem w Poznaniu, mam znajomych z różnych części kraju - wszystkie te miejsca charakteryzują się różnymi nazwami tego samego. Jedni wychodzą na pole, inni na dwór. Jedni kupują migawkę na krańcówce, a do innych w grudniu prezenty przynosi Gwiazdor, Dzieciątko lub po prostu Mikołaj. A jak wygląda popularność ketchupu lub majonezu?

Skąd pomysł

Ponad pół roku temu trafiłem na wpis pokazujący mapę regionalizmów w Niemczech. Jestem fanem postów z /r/MapPorn na Reddicie, w szczególności takich jak ten pokazujący od którego policzka Francuzi zaczynają całowanie podczas powitania (była też mapa o liczbie cmoknięć - nie tylko we Francji, ale w całej Europie; Polacy całują na trzy - prawda?). Wszystko to było inspiracją do zrobienia czegoś podobnego samodzielnie. Bo nauka jakiejś umiejętności to zazwyczaj powtarzanie tego, co ktoś już zrobił - w imię ja też tak potrafię. To dobre podejście, w wielu dziedzinach. Jeśli chodzi o polskie lokalne upodobania czy nazwy tego samego (regionalizmy) to ciekawy zbiór znajdziecie na jednym fanpage’u (niestety nieco już opuszczonym) oraz w archiwum tekstów BIQData z Wyborczej. Wszystko już było, więc potrzebowałem czegoś innego do identycznego zadania. Nie wiem czy wiecie, ale taki na przykład majonez ma zwolenników poszczególnych marek. Fani Kieleckiego nie kupią nigdy innego. Tym tropem idąc podobnie może być z ketchupem. Czy z musztardą to nie wiem - mam wrażenie, że wystarczy wszystkim sarepska (zwana saperską), a producent nie ma już takiego znaczenia. Ale z majonezem na pewno taki podział istnieje. Mieszkając na Bieżanowie w Krakowie wiedziałem gdzie panuje Wisła, a gdzie Cracovia (bodaj ulica Teligi wyznaczała granicę). A jak to wygląda w całej Polsce? Czy kibice poszczególnych drużyn są skupieni wokół określonych regionów? Wydawałoby się, że tak. Podważać i wątpić to jednak podstawowa zasada badacza danych, zatem trzeba tezę zweryfikować. I tutaj docieramy do końca tego przydługiego wstępu. Cel (narysowanie mapki regionalizmów) został wyposażony w przedmiot badań (majonez, ketchup i przy okazji drużyna piłkarska) i pozostała egzekucja.

Facebook w R

Tue, 16 Oct 2018 15:04:18 +0000

Kto uważany jest za gwiazdę rozrywki 100-lecia niepodległej Polski? Takie pytanie pojawiło się w poniedziałek 15 października na fanpage’u Karoliny Korwin-Piotrowskiej. Pani Karolina poprosiła o wpisywanie nazwisk w komentarzach. Oczywiście obudził się we mnie umysł pragmatyczny i zapytał (siebie): ciekawe jak ona to ręcznie sobie policzy?. Ludzie przecież będą wpisywać nazwiska jak leci a nie w jakiejś uporządkowanej formie. Bo ankietę można zrobić tak jak ta majonezowo-ketchupowa do której wypełnienia serdecznie namawiam! Jak będzie dużo głosów to będzie sensowny wynik. I opowieść jak to wszystko zostało zbudowane. Zajmie Ci to góra dwie minuty. Nie po to człowiek siedzi w internecie i analizie danych, żeby z takim problemem sobie nie poradził. A że w R jest dostępny pakiet Rfacebook to zadanie policzenia głosów jest banalnie proste. Poza Rfacebook przyda nam się kilka innych pakietów (w sumie standard):

Jak odczytać maile z Gmaila w R?

Mon, 08 Oct 2018 15:51:43 +0000

Wszystko zaczęło się od awarii Home.pl i jednego postu na Facebooku… Post, o którym mowa to screen shot skrzynki mailowej pełnej informacji od czytelników Niebezpiecznika donoszących o awarii serwerów Home.pl (o samej awarii tutaj).

W komentarzach pojawił się pomysł, żeby stworzyć mechanizm informujący, że w skrzynce odbiorczej wzrasta liczba maili dotyczących określonego tematu. Jak do tego podejść? Zastanówmy się czego potrzebujemy, aby taki “sygnalizator” przygotować. W najprostszej formie, przynajmniej na początek. Potrzebujemy:

Kategoryzacja użytkowników strony www

Tue, 02 Oct 2018 09:50:33 +0000

Jak podzielić użytkowników strony internetowej na grupy? Korzystając tylko ze statystyk ruchu. W poprzedniej części dowiedzieliśmy się jak skorzystać z danych z Google Analytics w R. Pod koniec wpisu podałem linki do postów, które opisują jak dodać unikalne ID użytkownika wchodzącego na stronę. Dzisiaj zajmiemy się próbą przypisania każdego z użytkowników do jakiejś grupy. Kategoryzacja klientów to jedno z podstawowych działań w biznesie. Dlaczego? Możemy zechcieć coś innego pokazać na naszej stronie różnym grupom klientów. Albo - jeśli mamy na przykład maile (z zapisów na newsletter) wysłać inne treści. Znajomość klientów i ich zachowań to podstawa. Spróbujemy na podstawie posiadanych danych określić grupy klientów. Tymi danymi mogą być odwiedziny na stronie WWW albo wyświetlenie reklamy w aplikacji w telefonie, zakupy w rzeczywistym sklepie, udział w jakimś wydarzeniu (na przykład pójście do kina). Zwróćcie uwagę, że w każdym z wymienionych przypadków wiemy zazwyczaj nieco więcej:

Google Analytics w R

Wed, 26 Sep 2018 16:16:34 +0000

Google Analytics to chyba najpopularniejszy sposób mierzenia ruchu na stronach internetowych. Można bardzo dużo wyklikać w panelu, ale może zaistnieć potrzeba pobrania danych statystycznych do analiz, których GA nie daje. Dzisiaj dowiesz się jak zrobić to w języku R. Jak większość zadań, tak samo i to ma pomocny pakiet. Jak można się podziewać pakiet nazywa się RGoogleAnalytics i dostępny jest poprzez instalację z GitHuba:

devtools::install_github("Tatvic/RGoogleAnalytics")

Załadujmy więc go do R (razem z innymi pakietami) i do dzieła:

Kto pisze teksty przemówień prezydenta Dudy?

Thu, 20 Sep 2018 16:13:07 +0000

Pytanie tytułowe jest nieco przewrotne. Sprawdzimy czy wystąpienia są do siebie podobne, a przede wszystkim dowiemy się jak to zrobić. Nazwisk autorów wystąpień nie podam… Niniejszy tekst to fragment (ale rozbudowany i zmodyfikowany) mojej prezentacji z konferencji “Machine Learning @ Enterprise”. Całość prezentacji z odpowiednimi skryptami znajdziecie na GitHubie. Dzisiaj skorzystamy z bibliotek:

library(tidyverse) # wykresy i manipulacja danymi
library(data.table) # dla fread - szybkie wczytywanie plików CSV
library(lsa) # dla cosine()
library(Rtsne) # implementacja t-SNE w R
library(plotly) # interaktywne wykresy
library(tidytext) # do manipulacji tekstem
library(wordcloud) # chmurki słów
library(lubridate) # manipulacja datami
library(rvest) # do pobierania danych z www
library(glue) # wygodne sklejanie ciągów znaków

W pierwszym kroku potrzebujemy wypowiedzi Andrzeja Dudy. Na szczęście wszystko jest podane na tacy na oficjalnej stronie prezydenta, a jedyne czego potrzebujemy to wyłuskać teksty. Do tego celu przygotujemy kawałek kodu:

Gdzie są sklepy, drogi czy cokolwiek innego?

Fri, 10 Aug 2018 18:49:05 +0000

Zastanawialiście się skąd wziąć listę wszystkich miejsc danego typu - na przykład przedszkola w Warszawie - i narysować je na mapie? Jeśli tak, to z tego postu dowiesz się jak to zrobić. Wpis techniczny, żadna tam analiza. Ale są mapki! Macie świadomość, że istnieje coś takiego jak Wikipedia, prawda? Zbiór haseł uzupełniany przez ochotników. Istnieje coś podobnego dla map i nazywa się Open Street Map. Ludzie z całego świata dodają informacje o różnych obiektach na mapach - budują drogi, stawiają domki i tak dalej. Dane te można pokazać jako mapy, ale też przeszukiwać. W R mamy pakiet osmdata (przygotowany przez zacną inicjatywę rOpenSci, a jest opakowaniem dla Overpass API), który umożliwi nam skorzystanie z tych informacji. W dalszej części do pokazania (na interaktywnych, przesuwanych i skalowanych) map użyjemy pakietu leaflet (opierający się na bibliotece JavaScript Leaflet, który nota bene również korzysta z Open Street Map. Ciekawostka na marginesie: ostatnio Google zmienił drastycznie ceny używania Google Maps (ciekawy tekst na ten temat znajdziecie tutaj), zatem korzystanie z Open Street Map może być wybawieniem. Zaczniemy od wczytania odpowiednich bibliotek:

Sympatia - porównanie pań i panów

Thu, 02 Aug 2018 14:48:52 +0000

Ostatnia część cyklu analizy informacji zebranych z profili serwisu randkowego Sympatia.pl.

W poprzednich częściach:

było o kobietach z Sympatii
a także o kobietach przez pryzmat ich zdjęć profilowych
żeby było sprawiedliwie - było też o mężczyznach

Dzisiaj porównamy panie i panów w różnych przekrojach, a także - co wydaje się być najciekawsze - zderzymy ze sobą deklaracje i oczekiwania obu stron. Właściwie jest to zestawienie tego, co widzieliśmy w pierwszych dwóch częściach (o paniach i o panach) Zacznijmy od sprawdzenia czy w danym województwie jest tyle samo profili kobiet i mężczyzn w konkretnym wieku. Czy jest tak, że gdzieś mamy więcej poszukujących nieco starszych panów, a gdzie indziej więcej młodszych kobiet?

Dziewczyny z Sympatii - co widać na zdjęciach?

Mon, 30 Jul 2018 16:34:30 +0000

Było już o kobietach z Sympatii (i o panach), ale wszystko to było na podstawie informacji zawartych w profilu. Dzisiaj sięgniemy nieco głębiej. Zbierając profile zebraliśmy też linki do zdjęć. Korzystając z microsoftowego Cognitive services Face API pobieramy cechy jakie udaje się rozpoznać na zdjęciach. Między innymi są to informacje o:

wieku
płci
okularach
kolorze włosów
emocjach jakie wyraża twarz, na przykład czy osoba na zdjęciu się uśmiecha

W dużym uproszczeniu Face API to bramka do wytrenowanego modelu (zapewne sieci neuronowej). Wrzucamy zdjęcie, a w odpowiedzi dostajemy kilka parametrów, które są wynikiem porównania zdjęcia z tym czego sieć się nauczyła. Skrypt (jaki inne z tego cyklu) znajdziecie na githubie. Pobrałem tylko dane dla zdjęć pań, nie będzie odpowiednika tego samego wpisu dla panów. Zobaczmy co sztuczna inteligencja wyczytała ze zdjęć i jak to się ma do informacji podawanych w profilach przez ich właścicielki.

Chłopaki z Sympatii

Fri, 20 Jul 2018 13:34:45 +0000

Jacy są faceci z Sympatii? Czego szukają? Średnio jest to niebieskooki ciemny blondyn, 180 cm z Mazowsza, w 90% katolik o normalnej budowie ciała. Czuły, dowcipny, spokojny. Szuka kobiet i miłości. Lubi rower i piłkę nożną, wolny czas spędza w kinie z przyjaciółmi, interesuje się sportem i podróżami (książki po gotowaniu, ale przed komputerem). Lubi pop i rock, komedie i filmy akcji albo sensacyjne. Poprzednio było o kobietach, więc teraz o panach z Sympatii. Na prośbę telewidzów. Udało się zgromadzić około 16024 tysięcy profili panów. W wynikach wyszukiwania spełniających kryteria było ponad 87 tysięcy profili. Dla przypomnienia kobiet było około połowę mniej. Co ciekawe - panowie od razu reagowali na wizyty robota. W ciągu pierwszych trzech godzin zbierania danych robot odwiedził jakieś 2500 męskich profili. Jakieś 150 właścicieli tych profili odwdzięczyło się odwiedzeniem profilu bota, robot dostał 4 wiadomości i 3 oczka. Po kolejnych godzinach i zebraniu 7 tysięcy profili bot miał już 700 re-wizyt, 9 wiadomości i 6 oczek. Dla porównania dla zebranych 11 tys. profili kobiet było około 500 rewizyt. Po zakończeniu zbierania danych i upływie kilku dni łącznie było prawie 2600 odwiedzin (czyli około 2100 od panów), 21 wiadomości i kilka oczek. Wśród wiadomości te najbardziej przyjemne:

Mapy hipsometryczne

Thu, 28 Jun 2018 09:08:59 +0000

Jak wykorzystać dane o numerycznym modelu terenu (NMT)? Skąd je wziąć i jak przygotować do wygodniej pracy? Dzisiaj wpis mocno techniczny, bez szczególnych analiz. Gratka dla osób szukających sposobów na rozdzielenie danych punktowych na gminy, powiaty i województwa oraz wskazówki jak pokazywać takie dane na mapie (i agregować je zgodnie z podziałem terytorialnym). Oprzemy się na danych o wysokości terenu, ale to tylko przykład. Potrzebne nam będą następujące biblioteki:

library(tidyverse) # do wszystkiego :)

library(rvest) # do srappingu strony

library(rgdal) # do obsługi plików SHP
library(rgeos)
library(raster)

library(ggmap) # do wczytania mapy z Google Maps

library(sf) # do wczytywania plików SHP i łatwego rysowania

library(RPostgreSQL) # do zapisu i odczytu danych z bazy, w tym przypadku baza PostgreSQL

Kolejne fragmenty kodu to kilka skryptów złączonych w jedno. Stąd mogą trafić się powtórzenia w kodzie albo te same dane pod różnymi nazwami zmiennych. Nie przejmujcie się tym - czytając kod i rozumiejąc go znajdziecie sposób na wybranie tego, co najbardziej Was interesuje. Zaczniemy od zgromadzenia danych o wysokości terenu. Centralny Ośrodek Dokumentacji Geodezyjnej i Kartograficznej (CODGiK) udostępnia takie dane w postaci plików tekstowych (jeden plik to jedno województwo). Struktura plików jest bardzo prosta - w każdym wierszu mamy informację dla jednego punktu: współrzędne punktu i jego wysokość nad poziomem morza. Pliki na serwerze CODGiK są spakowane - pobierzmy je i rozpakujmy. Aby nie bawić się w ręczne pobieranie każdego pliku zeskanujmy automatycznie stronę i wyciągnijmy linki do plików. Nie raz już scrappowaliśmy strony, więc pójdzie łatwo:

Bot mundialowy

Sat, 16 Jun 2018 15:41:39 +0000

Na Twitterze na koncie @rstatspl działa bot śledząc co się dzieje na Twitterze podczas kolejnych meczy. Zapraszam!

Stawiamy własny serwer

Thu, 14 Jun 2018 11:29:30 +0000

Budujemy własny serwer do programowania w R i Pythonie, razem z serwerem WWW, PHP oraz bazami danych MySQL i PostgreSQL.

Opis środowiska
Zakupy
Konfigurujemy VPSa
R, RStudio i Shiny
Python i Jupyter
Subdomeny - konfiguracja
Dodatki
Koniec

Tym razem więcej administrowana serwerami, a mniej programowania i analizowania danych. Zbudujemy własny serwer do programowania w R i Pythonie, razem z serwerem WWW (aby móc prezentować wynik swoich prac).

Opis środowiska

W niniejszym wpisie przygotujemy serwer zbudowany na linuxie w dystrybucji Ubuntu z działającym na nim (i dostępnym przez przeglądarkę z dowolnego miejsca z internetem) RStudio. Serwer pozwoli nam też na budowanie i publikowanie aplikacji napisanych w Shiny. Przy okazji zainstalujemy Pythona razem z Jupyter Notebook (oraz JupyterLab) do wygodnej pracy. Całości dopełni baza danych PostgreSQL. Aby móc publikować swoje dzieła w formie bloga zainstalujemy PHP oraz bazy MySQL - być może zechcesz zainstalować WordPressa, a on tego wymaga. Do czego taka maszyna może się przydać? W zależności od wydajności:

Webscrapping w R

Tue, 05 Jun 2018 16:26:22 +0000

W dzisiejszym wpisie nieco bardziej techniczne sprawy, ale bardzo cenne dla osób, które przy pomocy R chcą pobierać dane ze stron WWW. Przedstawię trzy narzędzia, które w tym pomogą. Dwa pomogą na pewno, trzecie to bardziej ciekawostka do robienia screen shotów.

Jak dobrać się do tabelki na stronie?

Często jakieś dane, które nas interesują są opublikowane na stronach WWW. Można je przepisać ręcznie, można je wciągnąć do Excela (jest odpowiedni, w miarę intuicyjny importer tabelek dostępny pod guzikiem Z sieci Web w menu Dane). Ale nas interesuje oczywiście w R (i Python, ale to nie w tym odcinku). W dzisiejszych zajęciach przydadzą nam się biblioteki:

Powiadomienia z telefonu i IFTTT.com

Tue, 08 May 2018 14:52:14 +0000

Jak dużo powiadomień generuje Android? Dzisiaj dość proste zadanie, ale może być interesujące. Od kilku lat jestem użytkownikiem i fanem serwisu If This The That który pozwala na automatyzację wielu zadań. W skrócie polega to na tym, że podpinamy do IFTTT.com swoje konta, aplikacje, urządzenia (żarówki, samochody - bo czemu nie?) i budujemy przepisy (applets). Każdy przepis to zawsze dwa elementy: wyzwalacz i akcja. Na przykład: jeśli temperatura spadnie poniżej 5 stopni (wyzwalacz) to wyślij maila (akcja). Możemy łączyć ze sobą kilka serwisów (jeśli dodam nowe zdjęcie na Instagramie to zapisz je w Dropboxie), informować o czymś mailem (wyślij maila jeśli prognoza według Weather Underground przewiduje deszcz), zapisywać historię zdarzeń (wszystkie moje twitty zapisz do arkusza Google) czy też zarządzać telefonem (włącz wi-fi jeśli jestem w rejonie oznaczonym jako dom). I właśnie z połączenia informacji z telefonu zapisywanymi do arkusza Google Sheets skorzystamy. Odpowiedni przepis IFTTT: jeśli Notification received to add row to Google Drive spreadsheet. Po kilku dniach na Dysku Google dostaniemy arkusz, w którym kolejne wiersze to kolejne zdarzenia. Teraz tylko wystarczy dobrać się do tego pliku (ciekawostka - po przekroczeniu 5000 wierszy powstaje nowy plik) i przeanalizować jego zawartość. W wydobyciu plików z Google Drive pomocny będzie pakiet R googledrive. Zatem do dzieła!

Gdzie Polacy jadą na wakacje?

Fri, 27 Apr 2018 09:08:49 +0000

Gdzie Polacy jadą na wakacje? Jak wyciągnąć w R informacje z PDFa? Jaki związek ma jedno z drugim? Zgodnie z życzeniem telewidzów ;) wyrażonym w szybkiej ankiecie żebro-lajkowej kilka dni temu

dzisiaj zajmiemy się wycieczkami (a raczej: zorganizowanymi przez biura podróży wyjazdami) zagranicznymi naszych rodaków. Czyli:

gdzie Polak jedzie na urlop?
w ile osób jedzie?
ile go to kosztuje?

Bo w ankiecie kciuki w górę wygrały (na obecną chwilę) 69 do 32 z serduszkami. Na początek trochę historii. Po sukcesie wpisów o mieszkaniach na wynajem i cenach samochodów chciałem zająć się wyjazdami z biurami podróży. To byłby hicior. Nawet znalazłem miejsce, z którego trzeba wziąć dane. Takim miejscem są raporty publikowane przez Polski Związek Organizatorów Turystyki. Raporty powstają na bazie systemu rezerwacji MerlinX i to on byłby tym źródłem danych. Same raporty nie zawierają interesujących mnie danych, na przykład:

API, Feedly i R

Fri, 20 Apr 2018 09:00:16 +0000

Jak zmusić R do korzystania z (dowolnego) API? Jak przygotować atrakcyjne tabelki w raportach? Nie tak dawno na Dane i analizy wrzuciłem post z informacją, że Feedly ma API. Źródłem inspiracji był post z bardzo fajnego bloga, którego autor chyba pracuje nad biblioteką do R obsługującą API Feedly (tak to wygląda po opublikowanych przez niego fragmentach kodu). Niby nic szczególnego, ale od czasu śmierci Google Readera brakuje mi w czytnikach RSS jednej rzeczy: informacji o tym, których kanałów nie czytam. Google Reader miał to niejako wbudowane (był wskaźnik liczby przeczytanych postów do wszystkich opublikowanych w kanale), Feedly niestety tej informacji nie ma. Spróbujemy to samo uzyskać w Feedly, najpopularniejszym chyba czytniku RSS. Może na początek słówko wyjaśnienia co to jest czytnik RSS? Większość z nas korzysta z internetu podobnie: przeglądamy wiadomości, Facebooka i Twittera (też jako źródło wiadomości), jakiegoś Instagrama czy Snapchata (to już magia dla mnie, zapewne w związku z wiekiem…). Jeśli coś nas zainteresuje w feedzie na Facebooku to przechodzimy na odpowiednią stronę, czytamy i wracamy. Podobnie jest z Twitterem. Do wiadomości najczęściej używamy jednego portalu. Problem pojawia się kiedy czytamy jakieś ulubione blogi i nie pamiętamy aby na nie wejść (a Facebook skutecznie usuwa nam z walla posty z odpowiednich stron). Albo jak potrzebujemy porównać wiadomości prezentowane przez Wyborczą, TVN z tym co pisze TVPInfo, Niezależna czy TV Republika. Poza tym nie ma czasu na czytanie nawet leadów, opinię o tekście można sobie wyrobić na podstawie samego tytułu, a jakże! Co zrobić? Z pomocą przychodzą właśnie czytniki RSS. Kanał RSS to takie pliczki XML na serwerach (najczęściej generowane automatycznie) z najnowszymi wpisami (lub ich skrótami) albo czymkolwiek innym (np. z najnowszymi ogłoszeniami z Allegro czy OLX - przydatna opcja jeśli śledzimy ogłoszenia z jakiejś kategorii, na przykład polujemy na aukcje z poszukiwanym winylem). Feedly to jeden z czytników tych kanałów. Cały myk polega na tym, że serwis co jakiś czas (jak często dowiemy się na przykładzie za chwilę) sprawdza kolejne kanały i zapisuje sobie nowości. A potem na jednej stronie widzimy skróty i linki do wszystkich kanałów. Ja mam jakieś 170 kanałów zapisanych w Feedly - nie dałbym rady codziennie ogarnąć tylu stron. Wystarczy za to 15 minut z Feedly i przegląd nowości mam z głowy. Dodatkowy plus czytnika jest taki, że nie musimy pamiętać co czytaliśmy - czytnik sam to oznacza. Ja robię tak, że przeglądam całość, czytam to co mnie interesuje (albo zaznaczam do przeczytania później - ta lista stale rośnie…), a resztę oznaczam jako przeczytane. I przy kolejnej sesji z Feedly nie miesza mi się to co nowe z tym co już czytałem (albo tylko tak oznaczyłem). Rozumiecie już ideę? Wszystkie serwisy (na które się zapiszemy) w jednym miejscu, w wygodnej aplikacji. Idealna sprawa. Ale przy większej liczbie obserwowanych kanałów rośnie liczba treści jaka wpada do czytnika. A części kanałów nie czytamy. Ja na przykład mam kategorię Wiadomości - zagranica, gdzie pojawia się dużo treści (bo są tam najnowsze z CNN i BBC), a których czytam kilka… tytułów. Resztę oznaczam jako przeczytane. Wracając do celu całego ćwiczenia: chciałbym wiedzieć które kanały usunąć, żeby mi nie zaśmiecały feedu - po co ma pojawiać się coś, czego i tak nie czytam? Zajmiemy się dzisiaj w związku z tym próbą rozwiązania tego problemu. Początek standardowy:

A lato było cieplejsze...

Tue, 27 Mar 2018 10:22:04 +0000

Czy w Boże Narodzenie zawsze brakowało śniegu? Czy klimat się ociepla? Jak ciepło przepływa przez Polskę? Dzisiaj zajmiemy się pogodą. Sporo ciekawych zagadnień przed nami:

Skąd wziąć dane o pogodzie w Polsce?
Pory roku na przestrzeni lat - czy wiosna przychodzi szybciej? A może lat trwa krócej?
- zobaczymy procentowy podział dni w roku na poszczególne pory roku (ile było dni wiosennych, a ile zimowych)
- czy wiosna przychodzi coraz szybciej - jak kształtowała się temperatura w marcu na przestrzeni lat?
Czy klimat się ociepla?
- jak wyglądały różnice w temperaturze na przestrzeni lat
- czy poszczególne miesiące są coraz cieplejsze lub zimniejsze?
- podobnie dla kolejnych dni - jak wyglądała liczba dni cieplejszych i zimniejszych niż średnia?
Czy jest różnica miedzy temperaturami w kraju?
- przygotujemy animowane mapki temperatury dla 2017 roku
A kiedyś to było…
- Boże Narodzenie ze śniegiem
- w Lany Poniedziałek było cieplej

Pobranie danych

Zanim przejdziemy do analizy potrzebujemy danych o pogodzie. Zgodnie z ustawą o dostępie do danych publicznych IMGW udostępnia dane historycznie na stronie https://dane.imgw.pl/. Dane aktualne są dostępne poprzez API, ale dane historyczne spakowane już niestety nie. Dostępne są w postaci spakowanych plików CSV, podzielone na kilkanaście katalogów. Do wszystkiego da się jednak dobrać. Aby skorzystać z tych zasobów należy każdy plik (archiwum) pobrać, rozpakować i wyciągnąć z niego dane. Aby nie operować na dużej liczbie plików przepiszemy je do bazy danych (w tym przypadku będzie to plikowa baza SQLite, chociaż może być dowolna - mySQL, PostgreSQL). Skrypt przepisujący dane znajdziecie na moim githubie (jak i pozostałe poniżej zaprezentowane kody).

Jak zrobić twitterowego bota?

Wed, 21 Mar 2018 09:52:09 +0000

Automaty rządzą naszym życiem. Czy tego chcemy czy nie. Szczególnie w sieciach społecznościowych, nawet podobno wygrały wybory prezydenckie w USA (ciekawe czy w Rosji też). Spróbujmy zatem samodzielnie napisać jakiś automat działający w social mediach. W R, chociaż można w czymkolwiek innym.

Przygotujemy automat (bota), który będzie na Twitterze publikował wybrane przez nas treści. Taki bot już istnieje - to @rstatspl. W tym wpisie znajdziecie informacje jak powstał. Bot @rstatspl robi trzy rzeczy:

Co grało radio?

Mon, 12 Mar 2018 15:39:04 +0000

Uwielbiam muzykę, lubię radio (chociaż słucham go właściwie tylko w samochodzie), kiedyś przez chwilę uczyłem się w krakowskich stacjach radiowych realizacji dźwięku. Po Więcej czadu miałem wieloletnią fazę, żeby zostać radiowcem. Radiowcem nie zostałem, ale nad stacjami radiowymi można się trochę poznęcać. Według badania Radio Track Millward Brown (ostatnie zestawienia można znaleźć na Wirtualnych Mediach) najpopularniejsze (top 5) w Polsce stacje radiowe to: RMF FM, Radio ZET, Jedynka, ESKA i Trójka. A że istnieje sobie taki serwis jak Radiospis.pl zawierający listę piosenek granych na antenie z ostatnich siedmiu dni to sobie porównamy kto co gra. Na początek przygotujemy funkcję, która zbierze nam dane ze strony:

MNIST dataset – sieci neuronowe, część 3 (sieć CNN)

Tue, 20 Feb 2018 11:19:42 +0000

Ciąg dalszy rozpoznawania pisanych ręcznie liczb. Potraktujemy obrazki jak obrazki (a nie jak wektory). Dla przypomnienia:

w zerowej części przygotowaliśmy zbiór danych (aby finalnie korzystać i tak z tego z Kaggle ;) i zobaczyliśmy jak wyglądają przykładowe liczby
w części pierwszej przygotowaliśmy modele w oparciu o XGBoost (najlepszy osiągnięty wynik to 87.1% trafności przewidywań) oraz o prostą sieć neuronową (FF, feed-forward) z wykorzystaniem pakietu nnet (najlepszy wyniki to 71.7%, ale liczone to było na fragmencie danych)
w części drugiej zainstalowaliśmy bibliotekę Keras wraz z back-endem w postaci tensorflow, poznaliśmy znaczenie współczynników loss, val_loss, acc oraz val_acc oraz przygotowaliśmy kilka modelów, z których najlepszy dał wynik około 97% poprawności rozpoznania liczb. Zrozumieliśmy (mam nadzieję) również logikę stojącą za budowaniem architektury sieci polegającą na składaniu kolejnych warstw jedna za drugą. Zobaczyliśmy również skąd mogą wynikać błędy klasyfikacji (te różne rodzaje czwórek rozpoznane jako dziewiątki na końcu tekstu)

W ostatniej dotychczas części cyklu traktowaliśmy dane o każdej z liczb w zbiorze uczącym jako wektor (czyli ciąg 784 liczb). Dzisiaj każdą liczbę potraktujemy poprawnie - jako obraz. Zaczniemy od wczytania pakietów oraz danych:

MNIST dataset – sieci neuronowe, część 2 (Keras)

Tue, 13 Feb 2018 10:34:35 +0000

Tym razem przygotujemy środowisko do pracy z Keras i rozpoznamy kilka liczb (ponownie jak poprzednio).

Instalacja Keras

Zaczniemy od instalacji. Potrzebujemy zainstalowanego Pythona na maszynie. W unixach (w tym odcinku korzystam z serwera EC2 w AWS) nie jest to problem, pod Windowsem można zainstalować go na przykład instalując Anacondę. Kolejny krok to przygotowanie R do pracy z Keras. Najpierw instalujemy bibliotekę keras:

install.packages("keras")

a następnie sam silnik:

library(keras)
install_keras()

Ta ostatnia funkcja ma trochę parametrów - między innymi odpowiedzialnych z zainstalowanie TensorFlow skompilowanego pod korzystanie z GPU (wykorzystanie kart graficznych do obliczeń - znacznie przyspiesza to cały proces, ale potrzebny jest stosowny sprzęt). Odpowiedni ich opis znajdziecie w dokumentacji. Szczegółową dokumentację Keras znajdziecie na stronie Keras.io. Proces instalacji nieco trwa za pierwszym razem, później jest już z górki. Przy instalacji na Windowsie może się coś pogryźć w Anacondzie (mi powstało drugie środowisko i trochę z tym trzeba powalczyć). Na maszynie EC2 (szczególnie t2.micro) może być okazać, że zabraknie pamięci (tak się stało dla sieci opisywanych poniżej). Rozwiązaniem jest zwiększenie wielkości tzw. swapu czyli wirtualnej pamięci, która tak na prawdę jest miejscem na dysku. Znalazłem odpowiednie obejście na niezastąpionym Stackoverflow. Stosujemy więc zwiększenie swapu, po resecie maszyny wszystko wraca do normy (chyba, że potrzebujemy pozostać przy powiększonym miejscu - odpowiednia zmiana opisana jest też na SO).

MNIST dataset – sieci neuronowe, część 1 (xgboost i nnet)

Thu, 01 Feb 2018 11:30:10 +0000

Budujemy pierwszą sieć neuronową oraz porównujemy jej wyniki z XGBoost. W pierwszej części przygotowaliśmy dane, a i tak będziemy korzystać z gotowych z Kaggle.com. Zanim wkroczymy w sieci neuronowe zobaczmy dla przypomnienia jaki mamy rozkład liczb (ile jest jakich)?

library(tidyverse)

# wczytujemy zestaw danych
data <- read_csv("data/train.csv")

data %>%
 count(label) %>%
 ggplot() +
 geom_col(aes(as.factor(label), n, fill = as.factor(n)), color = "gray50", show.legend = FALSE) +
 labs(x = "Liczba", y = "Liczba obrazków")

Żeby całość działa się szybciej i potrzebowała mniej pamięci wybierzemy po 250 próbek dla każdej liczby:

Sprzedam Opla

Tue, 23 Jan 2018 09:17:27 +0000

Auta na sprzedaż - czego można dowiedzieć się z ogłoszeń? Jak ustrzelić okazję? Tak się zdarzyło, że rozglądam się za samochodem. Ale też na bazie sukcesu analizy ogłoszeń mieszkań na wynajem z poprzedniego roku postanowiłem przygotować podobny materiał, tym razem o samochodach. Przez ponad dobę maszyna zbierała informacje z ogłoszeń z serwisu Otomoto.pl. Po kolei, ogłoszenie po ogłoszeniu, skrypt zapisywał dane do lokalnego pliku. Teraz użyjemy tych danych.

library(tidyverse)
library(lubridate)
library(stringr)
library(forcats)
library(ggrepel)

# wczytujemy nasze zgromadzone dane
auta_otomoto <- readRDS("auta_otomoto.RDS")

n_offers <- auta_otomoto %>% count(OfferID) %>% ungroup() %>% nrow()

Udało się zebrać 40747 ogłoszeń. Niektóre są już nieaktualne (bardzo szybko auta znikają), niektóre z różnych powodów nie nadają się do analizy. Jak wyglądają zgromadzone dane?

MNIST dataset - sieci neuronowe, część 0 (przygotowanie)

Tue, 16 Jan 2018 15:24:16 +0000

Zaczynamy cykl związany z sieciami neuronowymi. Zaczniemy od przygotowania danych. W kilku kolejnych postach posłużymy się danymi z ręcznie pisanymi liczbami. Zbiór ten nazywa się MNIST i jest bardzo popularny w świecie datalogów. Można go pobrać z tego miejsca. Klasyfikacja ręcznie pisanych liczb to takie hello world w sieciach neuronowych. W kolejnych częściach:

zbudujemy narzędziownię w R (w oparciu o bibliotekę Keras)
zbudujemy prostą sieć neuronową i sprawdzimy jakie daje efekty
zbudujemy sieć konwolucyjną (CNN) i sprawdzimy czy daje lepsze efekty, spróbujemy ją również rozbudować

Pliki jednak nie są w super przyjaznej formie (na przykład w Excelu nie da się ich otworzyć) - na początek więc przetworzymy je na czytelną formę. Zgodnie z opisem zbiór dzieli się na cztery pliki. Mamy więc dwie (dane treningowe i testowe) paczki: plik określający literki oraz dane opisujące ich wygląd. Pliki są binarne, przetworzymy je na pliki CSV.

Diagnoza, Wataha czy Belfer?

Fri, 29 Dec 2017 10:32:30 +0000

Który jesienny serialowy hit był najczęściej komentowany w 2017 roku? Jakie to były komentarze? Dzisiaj, w ostatnim poście w tym roku, zajmiemy się polskimi serialami z jesiennej ramówki. Na warsztat weźmiemy trzy tytuły: Diagnozę od TVN, Belfra od Canal+ oraz Watahę od HBO. Zobaczymy jak wyglądała obsługa seriali na Facebooku i jakie towarzyszyły im komentarze. Uwaga: post (lub informacje na wykresach) mogą zdradzać fabułę seriali! Kod jest na tyle uniwersalny, że wystarczy podać inne nazwy fanpage’y w części wczytującej dane aby uzyskać podobną analizę dla innych facebookowych stron - na przykład dla partii politycznych.

Przez losowy las Spotify

Sun, 10 Dec 2017 10:16:32 +0000

Czy machine learning może pomóc w poszukiwaniu ulubionej muzyki? Dzisiaj zajmiemy się poszukiwaniem nowej muzyki. Już kiedyś o tym było w oparciu o LastFM, dzisiaj będzie w oparciu o Spotify. Taki szybki wpis. Na początek potrzebujemy kilku elementów:

własnej aplikacji współpracującej z API Spotify - zbudować ją można zaczynając z dashboardu Spotify, potrzebujemy numerku client_id i client_secret
te numerki wpisujemy do zmiennych o tych samych nazwach i zapisujemy sobie lokalnie (żeby nie przechowywać ich w kodzie) w pliku spotify_cred.rda. W bardzo prosty sposób: save(client_id, client_secret, file = "spotify_cred.rda")
następnie budujemy kilka funkcji, których będziemy używać. Kod jest długi, nie warto go tutaj zamieszczać - znajdziecie go na GitHubie (swoją drogą jest tam nieco więcej funkcji niż potrzeba, ale nie wszystkie skończone i działające)

Uzbrojeni w taki zestaw zaczynamy od pozyskania tokenu:

Analiza procesów

Sat, 02 Dec 2017 09:27:35 +0000

W którym miejscu można skrócić proces, na której fazie trwa on najdłużej? Dzisiaj zajmiemy się analizą dowolnego procesu, w którym można wskazać jakieś fazy. Zadanie wzięło się z pracy, którą wykonuję na co dzień: który element procesu wytwórczego oprogramowania trwa najdłużej? Czy to, że przygotowanie systemu IT trwa tak długo to wina IT (analiza wymagań, przygotowanie dokumentacji dla programistów, samo programowanie, testy) czy biznesu (przygotowanie wymagań biznesowych, oceny opłacalności rozwiązania, przygotowanie dokumentacji do decyzji wszelakich komitetów sterujących)? Czy jak zamówię przesyłkę dzisiaj to dotrze ona do mnie w krótszym czasie niż przy zamówieniu za miesiąc? Ile czasu będę czekał na pizzę? Dlaczego klient w sklepie (urzędzie, banku, placówce służby zdrowia) obsługiwany jest tak długo? Dlaczego w przychodni zapisuje się na wizyty co 15 minut, jak i tak są opóźnienia? Weźmy przykład teoretyczny, chociaż dość realny - zakupy przez internet. Możemy wyróżnić kilka podstawowych faz:

Sondaże przedwyborcze

Fri, 17 Nov 2017 14:36:51 +0000

Komu rośnie, a komu spada? Czy PSL przekroczy próg 5% i załapie się do Sejmu? Czy “totalna opozycja” już przegrywa z partią rządzącą czy jeszcze nie? Takie pytania rozgrzewają komentatorów polskiej sceny politycznej mniej więcej raz w tygodniu, przy okazji publikacji kolejnych sondaży przedwyborczych. Zajmiemy się więc tymi sondażami. Długo szukałem archiwalnych danych sondażowych, aż w końcu na Twitterze ktoś podrzucił linka do serwisu ewybory.eu. Przeglądając stronę znalazłem tabelę z tym co mnie interesowało - pełną historią sondaży. Po zerknięciu w kod strony okazuje się, że jest to osadzony arkusz Google Spreadsheets i wystarczy się do niego dobrać. Do samego arkusza się nie dostałem (więc nie udało się wykorzystać mechanizmów jak w poście z podsumowaniem wyników mojej ankiety), ale dane można pobrać z publicznego widoku HTML tego arkusza:

Urodziny w Wikipedii

Thu, 09 Nov 2017 16:21:41 +0000

Przedstawiciele jakiego zawodu są najczęściej opisywani w Wikipedii? Czy miesiąc urodzenia predysponuje do wykonywania danego zawodu? Czy w polskiej Wiki więcej jest o Polakach czy innych nacjach?

Pomysł

Któregoś dnia, siedzimy w knajpie z J.P. a właściwie z J.A., z okazji jego urodzin. I tak od słowa do słowa pada “a dzisiaj urodziny ma też Putin”. Sprawdzamy w Wikipedii - faktycznie. A oprócz J.A. i Putina urodziny ma cała masa piłkarzy. I aktorów. I to mnie natchnęło - czym zajmują się (albo zajmowali) osoby opisane w Wikipedii? Którego zawodu jest najwięcej? Wydawałoby się, że ludzi kultury, sztuki i polityki - tak by wypadało, bo tak było zawsze w encyklopedii. Sprawdzimy jak jest naprawdę.

Ankieta - wyniki (i jak je podsumować w R)

Tue, 17 Oct 2017 16:38:17 +0000

Wyniki ankiety to jedno, a drugie to narzędzie do ich uzyskania i przedstawienia. Łączymy przyjemne z pożytecznym. Ankietę przygotowałem korzystając z Google Forms - to jedna z najwygodniejszych opcji (systemów do ankiet jest wiele), szczególnie jeśli chcemy mieć od razu dane (odpowiedzi) w postaci tabeli (w tym przypadku arkusza Google Sheets). Kiedy ankieta jeszcze trwała przygotowałem poniższe skrypty i na bieżąco mogłem śledzić zarówno liczbę oddanych głosów jak i rozkład poszczególnych odpowiedzi. To bardzo przydatne jeśli z jakiegoś powodu chcielibyście wiedzieć jak wpływają różne akcje zarówno na wypełnienie (liczbę odpowiedzi) jak i same odpowiedzi. Jeśli interesują Cię tylko wyniki ankiety, a nie sposób ich wyciągnięcia i pokazania - przejdź do odpowiedniej sekcji.

Kto pracuje najbardziej efektywnie w Europie?

Mon, 09 Oct 2017 13:41:04 +0000

Czy wydajność pracy w różnych krajach Europy jest jednakowa? Jak skorzystać z danych Eurostatu w R? Jestem fanem facebookowej strony z różnymi mapkami. Na stronie tej pokazał się ostatnio obrazek z informacją o średniej liczbie godzin jaką w pracy spędzają mieszkańcy poszczególnych krajów (linkował do tego postu). Ale szczerze powiedziawszy co to za informacja? To czy siedzisz w pracy długo czy krótko nie ma (bezpośrednio) związku z tym ile wartości wypracujesz. Sprawdźmy ile warta (w rozumieniu produktu krajowego brutto) jest godzina pracy mieszkańca poszczególnych krajów Europy. Do tego celu skorzystamy z danych Eurostatu, tym bardziej że istnieje bardzo wygodny pakiet R, z którym takie działanie jest banalnie proste. Na początek musimy znaleźć odpowiednie dane. Pakiet eurostat dostarcza nam odpowiednich funkcji:

Ankieta!

Wed, 04 Oct 2017 16:33:09 +0000

Czytasz tego bloga? Jesteś fanem Dane i Analizy na Facebooku? (dlaczego nie?!) Wypełnij koniecznie ankietę! Zajmie Ci to góra pięć minut.

Kulki w Monte Carlo

Wed, 04 Oct 2017 08:01:23 +0000

Symulacje to coś, do czego komputery nadają się najlepiej. Zamiast liczyć na kartce wykorzystujemy maszynę i dostajemy wynik. Dzisiaj policzymy liczbę Pi i przeanalizujemy pewien teleturniej telewizyjny.

Liczba Pi i metoda Monte Carlo

Policzymy wartość liczby Pi… upuszczając ołówek na kartkę. Możecie zrobić to samodzielnie, albo wykorzystując metodę Monte Carlo. Metoda Monte Carlo to numeryczny sposób rozwiązywania problemów. Wykonujemy bardzo dużo obliczeń (opartych o losowe symulacje) i na podstawie ich wyniku coś określamy. Metoda została opracowana przez Stanisława Ulama, który należał do tak zwanej lwowskiej szkoły matematycznej i był między innymi współtwórcą amerykańskiej bomby termojądrowej (co akurat powinno wzbudzić szacun a nie jakiś postrach). Ulam był też jednym z pierwszych naukowców, którzy wykorzystywali w swych pracach komputer. Możecie (zachęcam!) obejrzeć film o lwowskiej szkole matamatycznej pochodzący z kanału Historia Bez Cenzury - mam nadzieję, że wzbudzi Wasz podziw (i odkrycie ludzkich cech u matematyków) dla polskich przedwojennych matematyków. Każdy kto miał na studiach matematykę (wszystkie uczelnie techniczne) zapewne słyszał o przestrzeni Banacha. Tak, ma to związek z lwowską szkołą, a Banach zresztą pochowany jest na Cmentarzu Łyczakowskim, podobnie jak wielu innych znanych Polaków (ze znanych ze szkoły nazwisk: Maria Konopnicka i Gabriela Zapolska). Wróćmy jednak do naszego eksperymentu. Polega on na losowym upuszczeniu (na przykład) ołówka, tak aby zaznaczył punkt na kartce. Wcześniej na tej kartce rysujemy koło i opisany na nim kwadrat. Ołówkiem rzucamy z góry tak, aby trafić w kwadrat. Liczymy liczbę rzutów i liczbę trafień w koło. Zamiast robić to ręcznie wykorzystamy komputer (i oczywiście R). Zamiast rzucania wylosujemy punkt:

Pablo Picasso - życie i twórczość... w liczbach

Fri, 29 Sep 2017 14:43:13 +0000

Co prawda nie jest to teleturniej Wielka Gra, ale tytuł przywodzi na myśl temat “Pablo Picasso - jego życie i twórczość”. Zajmiemy się obrazami i ich analizą. Oczywiście tytuł nie jest przypadkowy i (starszym) Czytelnikom powinien się z Wielką grą skojarzyć. Ale ilu z Was pamięta ten program? Pięcioro? Myślę nad ankietą, a teraz w planie, mamy badanie!… Celem dzisiejszego wpisu jest sprawdzenie czy “okres czerwony” w malarstwie Picassa rzeczywiście był czerwony. Oczywiście sprawdzimy to przy pomocy R, w pewnym sensie oglądając obrazy (automatycznie). Dowiemy się też kilku rzeczy o strukturze obrazu komputerowego (totalne przedszkole). Zaczniemy od początku, czyli krok pierwszy:

Migracje Polaków w 2016 roku (część druga)

Tue, 26 Sep 2017 15:59:18 +0000

W pierwszej części przygotowaliśmy zestaw narzędzi do uzyskania informacji skąd przyjechali mieszkańcy danej gminy oraz dokąd wyjechali. Oparliśmy się o dane GUSu o migracjach z 2016 roku. Obiecałem, że there is an app for this - dzisiaj taką aplikację przygotujemy. Uwaga wpis jest mocno techniczny (i w dodatku dla co najmniej średnio zaawansowanych pRogramistów). Jeśli interesuje Cię wynik (gotowa aplikacja) najlepiej przejdź na stronę aplikacji i się nią pobaw do woli. Powinna być zrozumiała :) Skorzystamy z pobranych wcześniej danych, ale rozważania prowadzić będziemy na poziomie powiatów. Zatem potrzebujemy zagregować dane o migracjach do powiatów oraz wykorzystać mapę powiatów (zamiast gmin). Zgodnie z wcześniejszymi uwagami - zobaczymy względny ruch, a nie bezwzględną liczbę osób zmieniających miejsce zamieszkania (stałego zamieszkania, bo dane GUSu dotyczą osób zmieniających meldunek). Większość danych mamy już przygotowanych i cała droga będzie krótsza. Z poniższych pakietów

Migracje Polaków w 2016 roku (część pierwsza)

Thu, 21 Sep 2017 16:16:18 +0000

Chcesz wiedzieć skąd pochodzą mieszkańcy Twojej gminy? Albo jak narysować mapę dowolnej wartości na poziomie gmin, powiatów lub województw? Coś podobnego zrobiło jakiś czas temu BIQdata, po sieci krążyło ostatnio to samo dla Stanów Zjednoczonych. Dzisiaj nauczymy się jak to zrobić samodzielnie. A w następnej części przygotujemy aplikację (wow!). Jedziemy zatem z pakietami, a później szczegółową instrukcją na zdobycie danych.

library(tidyverse)
library(broom)
library(rgdal)

Baza nazw gmin, powiatów i województw

Potrzebujemy danych o nazwach gmin, powiatów i województw przyporządkowanych do kodów TERYT. Takie dane znajdziemy w GUSie na odpowiedniej stronie, z której pobieramy archiwum TERC / podstawowa i rozpakowujemy ZIPa, z którego potrzebny nam plik CSV.

Analiza tekstów z wiadomości

Thu, 14 Sep 2017 09:09:09 +0000

O czym w wiadomościach piszą serwisy internetowe? Czy da się jakoś pogrupować teksty? Wszystko to (i więcej) na bazie ponad roku tekstów z serwisu Wiadomości Gazeta.pl. Zanim przejdziemy do analizy potrzebujemy danych. Jeśli interesują Cię wyniki to przejdź od razu do części Analiza. Pierwsza część to obszerny opis tego jak uzyskać dane. Pojawiają się w komentarzach (tutaj albo na fanpage’u Dane i analizy czy też mailach do mnie) o to jak pobierać dane z WWW - poniżej znajdziecie wystarczająco szczegółowy algorytm postępowania. Wiedza na temat HTMLa i CSSa jest przydatna i do zdobycia samodzielnie.

Jak nauczyć się R? Co czytać?

Wed, 30 Aug 2017 14:09:36 +0000

W listach pytacie o źródła wiedzy dotyczącej R. Dzisiaj kilka linków. Na początek agregaty, które mogą okazać się wystarczające:

R Bloggers - platforma zbierająca treści z wielu blogów
Revolution Analytics
Data Science Central - platforma blogowa dla dłubiących w BigData

Warto śledzić też blogi poszczególnych osób:

Julia Silge to współautorka pakietu tidytext (i jednocześnie data scientist w Stack Overflow)
Variance Explained - blog drugiego współautora tidytext
blog Maëlle Salmon, który kiedyś dodałem do RSSów (trafiłem pewnie w poszukiwaniach czegoś konkretnego albo z r-bloggers)

Jednym z lepszych miejsc jest cała domena związana z RStudio i poszczególne jej subdomeny, przede wszystkim blog RStudio oraz RViews. W ramach RStudio znajdziecie też dużo informacji o poszczególnych pakietach - strona zbiorcza jest tutaj. Z polskich blogów szczególnie polecam dwa:

Lista Przebojów Trójki

Fri, 25 Aug 2017 22:05:45 +0000

Lista Przebojów Trójki to chyba najpopularniejsza lista przebojów w Polsce, a z pewnością najstarsza. Zobaczmy czego możemy się dowiedzieć z całej jej historii. Potrzebne będzie kilka pakietów R (do pobrania danych dodatkowo rvest):

library(tidyverse)
library(lubridate)

library(ggrepel) # dla ładnego umiejscowienia labelek na wykresach

Pobranie danych

Skorzystamy z archiwum Listy Trójki zebranym na stronie LP3.pl - klikając w kolejne numery notowań po prawej stronie widzimy, że zmienia się adres strony według schematu http://www.lp3.pl/alpt.phtml?m=1&nn=XXX gdzie XXX to kolejny numer (niekoniecznie notowania). Trzeba znaleźć największy numer (najnowsze notowanie) i przejść przez kolejne strony (kolejne XXX od jeden do tej największej liczby). Analiza kodu HTML strony pozwala na wybranie odpowiednich jej fragmentów i tym samym zgromadzenie danych. Szczegółowym kodem nie będę zamęczał - znajduje się na GitHubie. Pojawiają się pytania od Was jak scrappować strony - być może przygotuję o tym kiedyś dedykowany wpis techniczny (choć wolę przygotowywać analizy :). Dane zapisałem w pliku lokalnym. Swoją drogą na LP3.pl znajdziecie część z poniższych analiz.

Zmiany temperatury w czasie - animowany wykres kołowy

Thu, 10 Aug 2017 08:12:44 +0000

Kilka dni temu karierę na stronach poświęconych wizualizacji danych robił filmik obrazujący zmiany temperatury na przestrzeni lat. Na stronie Dane i Analizy obiecałem, że opiszę jak można coś takiego zrobić. Wspomniany filmik to

Jakiś czas zastanawiałem się jakie dane pokazać i zdecydowałem, że będzie to liczba odsłon najpopularniejszych tekstów z bloga który czytasz. Przy okazji dowiemy się jak za pomocą R dostać się do statystyk zebranych w Google Analitycs. Oczywiście jest do tego stosowny pakiet, ale wcześniej potrzebna jest pewna konfiguracja konta googlowego. Jak zwykle w przypadku API potrzebny jest klucz - w tym przypadku jest to para Client ID i Secret ID. Aby je uzyskać wystarczy wykonać kroki opisane chociażby tutaj. Dodatkowo instalujemy pakiet RGoogleAnalytics:

Najbardziej aktywni użytkownicy na stronach partii

Tue, 08 Aug 2017 14:43:11 +0000

Kim są osoby najbardziej aktywne na fanpage’ach poszczególnych partii? Po artykule Anny Mierzyńskiej a jeszcze bardziej (i wcześniej) po publikacji wyników analizy naukowców z Oxfordu na temat fake-newsów i kont-botów zapragnąłem zrobić dokładnie to samo. Sprawdzić jak bardzo prawdopodobne jest, że konta które są najbardziej aktywne są botami. Metodologia jest stosunkowo prosta: trzeba wytypować najbardziej aktywne konta, sprawdzić ile osób mają w znajomych, co lajkują (jak często) i co podają dalej, jak dużo napisały postów i w jakim czasie (czy są młode czy stare). Na podstawie kilku wskaźników można określić z jakimś prawdopodobieństwem czy konto jest botem. Niestety, o ile na Twitterze większość informacji można pobrać, o tyle z Facebookiem jest już gorzej i niewiele się da wyciągnąć z API. Anna Mierzyńska swoją analizę przeprowadziła ręcznie. Ja nie lubię takiej dłubaniny, szczególnie jeśli są narzędzia. Podczas prób moja analiza obrała nieco inny kierunek (nie Czy konto jest botem? a Kim jest użytkownik?). Zobaczmy co wyszło. Na początku potrzebujemy danych. Wytypowałem osiem facebookowych stron partii pokazywanych w sondażach:

Taksówką po Nowym Jorku - konkurs Kaggle.com

Fri, 28 Jul 2017 21:01:32 +0000

Jest sobie taka strona - Kaggle.com - na której badacze danych mogą próbować swoich sił w różnych konkursach. Najczęściej chodzi o to, żeby z opublikowanych danych treningowych przewidzieć wyniki dla danych testowych. Tak jest w przypadku konkursu NYC Taxi Trip Durration w którym uczestniczę. Chodzi pokrótce o to, żeby na podstawie informacji o kursach taksówek przewidzieć czas trwania podróży. Do dyspozycji mamy dane z pierwszego półrocza 2016 roku - prawie półtora miliona wierszy. Jeśli chcesz spróbować swoich sił albo po prostu sprawdzić opublikowany niżej kod - ściągnij dane ze strony konkursu (do tego wpisu wystarczy plik train.csv). W tym poście nie pokażę rozwiązania i nie zbuduję modelu (można kilka zobaczyć na stronie konkursu, moje też), ale przejdziemy przez cały proces analizy danych, odpowiedniego ich czyszczenia (w nieco skróconej formie) i szukania ukrytych w nich informacji. Wpis raczej mało popularnonaukowy, ale może interesuje Cię gdzie nowojorczycy jeżdżą taksówkami? Potrzebujemy tylko kilku pakietów, z czego większość dla jednej czy dwóch funkcji.

The Rolling Stones Tour

Tue, 25 Jul 2017 10:39:50 +0000

Po wolnej musi być szybka, takie są zasady muzykowania pada na koncertowej płycie Bolilol Tour zespołu Illusion. Sprawdźmy czy tak jest na koncertach… …ale nie dokładnie to sprawdzimy. Inspiracją dla niniejszego postu jest wpis z 2011 roku o utworach granych przez Metallicę na koncertach, szczególnie infografika, o której ów wpis jest. Infografika przedstawia popularność piosenek granych na koncertach. Skoro ktoś mógł to zrobić, to dlaczego nie ja? Instrukcja jak zrobić to samo poniżej. Za źródło danych posłuży serwis Setlist.fm, w którym znaleźć można całą masę informacji o koncertach - przede wszystkim datę, miejsce i to co najbardziej interesująca - lista utworów. Dane pobierać będziemy przez API, do którego potrzebny jest klucz. Po założeniu konta w serwisie możemy sobie taki wygenerować. Z API rozmawiamy JSONem - dlatego poniżej biblioteka jsonlite oraz RCurl do odpytywania tegoż API.

Popularność literek w polskich słowach

Tue, 18 Jul 2017 13:43:25 +0000

Zainspirowany grafiką obrazującą rozkład położenia liter w słowach (angielskich) znalezioną na reddicie postanowiłem sprawdzić jak to samo wygląda w języku polskim. Aby sprawdzić na których miejscach w słowach występują poszczególne litery alfabetu potrzebujemy przede wszystkim słów. Bo alfabet znamy. Skąd wziąć słowa? Ze słownika, ktoś powie. Oczywiście to najlepsze miejsce - w słownikach są słowa, po to właśnie są słowniki. Ale słowniki mają jedną wadę - zawierają podstawowe formy słów (rzeczowniki w mianowniku, czasowniki w bezokoliczniku), co znacząco ogranicza liczbę dostępnych słów. A język polski jest bardzo bogaty w różne formy fleksyjne. Spróbujcie wymienić wszystkie możliwe wariacje na temat jakiegoś czasownika - najwięcej zabawy i rubasznego śmiechu będzie przy wulgaryzmach. Do każdego właściwie można dodać na początek wy-, przy-, za-, pod-, s-, roz-. Można dodać też się. Można odmienić czasownik przez osoby i liczby. Podobnie z rzeczownikami, przymiotnikami i innymi częściami mowy. Wystarczy spojrzeć na pierwszy z brzegu link znaleziony w Google. I właśnie na taki worek słów (bardzo lubię angielskie określenie bag of words) się nastawimy. Bo im więcej kombinacji tym bliższe życiu wyniki użycia literek. Dlatego nie skorzystamy ze słownika, a z gotowych tekstów - w tym przypadku z ośmiu książek, które już analizowaliśmy w odcinku poświęconym sprawie kryminalnej poszukiwania autora. Im więcej tekstów, najlepiej różnych autorów i z różnych dziedzin, tym większy zbiór słów. W poszukiwaniu danych do dzisiejszego postu natrafiłem na stronę PWN o korpusie języka polskiego - mowa tam o stu milionach słów! Na pewno z uwzględnioną fleksją, bo słów w naszym języku jest zapewne mniej (w formach podstawowych). Ale nie mamy tych 100 milionów słów, musimy polegać na tym co mamy. Zaczniemy od potrzebnych pakietów:

Ekstraklasa 2017/18 - przewidywania wyników

Fri, 14 Jul 2017 11:14:37 +0000

Ostatni post cyklu związanego z Ekstraklasą to przewidywania wyników w nadchodzącym sezonie. Szykujcie kasę na bukmacherów! Dla przypomnienia cykl postów o Ekstraklasie do tej pory składał się z dwóch części:

w pierwszej przeprowadziliśmy prostą analizę historycznych rozgrywek z sezonów 2008/2009 do 2016/2017
w drugiej części omówiłem ranking Elo i zbudowany został model na nim oparty. Sprawdziliśmy jaką sprawdzalność dał model w zderzeniu z rzeczywistością (było to 47.36%)

Tym razem wytypujemy wyniki na rozpoczynający się za chwilę sezon 2017/18 - korzystając ze zbudowanego modelu. Uwaga, potrzebny jest disclaimer: nie odpowiadam za Twoje pieniądze. Jeśli zechcesz wykorzystać opublikowane niżej dane lub sam model aby obstawiać wyniki w zakładach bukmacherskich to robisz to na własną odpowiedzialność. Dane jakich potrzebujemy do symulacji to lista kolejnych meczy, przy czym ważna jest kolejność spotkań dla każdej z drużyn - na tej podstawie aktualizowany jest ranking Elo (szczegóły znajdziesz w drugiej części cyklu) oraz początkowe wartości Elo dla grających drużyn. Te wartości początkowe, podobnie jak poprzednio, zaczerpnąłem ze strony ClubELO.com. Pochodzą one sprzed ostatnich meczy Legii (z Mariehamn), Jagiellonii (z Gabala) i Lecha (z Haugesund), więc są delikatnie nieaktualne. Tak to wygląda:

Ekstraklasa - analiza

Tue, 11 Jul 2017 14:50:21 +0000

Zaczynamy nową serię - analizę i przede wszystkim przewidywania dotyczące rozgrywek w ramach piłkarskiej Ekstraklasy. Cykl będzie składał się z trzech części:

w pierwszej przeprowadzimy analizę danych z historycznych rozgrywek na podstawie wyników meczów z sezonów 2008/09 do 2016/17
w drugiej części spróbujemy znaleźć model, który pozwoli na symulację rozgrywek oraz sprawdzimy jego skuteczność
zaś w ostatniej części - przygotowanym modelem wytypujemy wyniki na nadchodzący sezon 2017/18

Zapowiada się ciekawie, zatem do dzieła! Tym razem będzie bez kodów R w treści posta, wszystkie zaś dostępne są na moim GitHubie. Historyczne dane pobrałem ze strony Historia Polskiej Piłki Nożnej, stosowny skrypt na GitHubie nazywa się load_table.r. Dane zawierają informację o dacie meczu (i sezonie w którym mecz został rozegrany), drużynach i wyniku. Niestety nie znalazłem łatwych do zaadoptowania wyników z np. minutami meczu w których padają bramki - przez to analiza będzie nieco uboga. Ale może ciekawa? Na początek zobaczmy czy własne boisko sprzyja wygranej? Uwaga - są to dane uśrednione ze wszystkich sezonów, jeśli Legia grała z Wisłą Kraków u siebie (grała 13 razy) to liczymy średnią liczbę bramek zdobytą przez oba zespoły i to traktujemy jako wynik takiego super-meczu.

Analiza twórczości J.K.Rowling

Mon, 03 Jul 2017 15:40:10 +0000

W ostatnich dwóch wpisach analizowaliśmy oceny książek na podstawie bazy z serwisu z recenzjami książek a także prowadziliśmy śledztwo polegające na szukaniu autora książki. Tym razem zajmiemy się twórczością jednej autorki. Tą autorką będzie J.K. Rowling, autorka bestsellerowej serii o Harrym Potterze oraz kilku książek dla dorosłych wydanych pod pseudonimem Robert Galbraith. Podobnie jak w poprzedniej części potrzebujemy książek w plikach tekstowych. Analizować będziemy angielskie wersje książek (ze względu na analizę wydźwięku - ang. sentiment. W przypadku języka polskiego trudno o słowniki tegoż wydźwięku). Na początek sprawdźmy jakie słowa w poszczególnych książkach są najbardziej popularne: Nie jest dziwnym, że w serii o Potterze najpopularniejsze słowo to “Harry”. Później kolejno imiona poszczególnych bohaterów (Ron, Hermione) ale też na przykład różdżka (wand) Zobaczmy teraz jak długie są poszczególne książki - sprawdźmy liczbę zdań w każdej z nich: oraz liczbę słów: Słupki w obu przypadkach są podobne, co może prowadzić do wniosku, że średnio każde zdanie składa się z podobnej ilości wyrazów: Na powyższym wykresie pionowa czerwona linia oznacza medianę (połowa zdań ma więcej słów, a druga połowa - mniej) zaś niebieska - średnią. Jak widać Rowling właściwie w każdej książce pisze zdania o podobnej długości. Niektóre “kopy” są wyższe - to wynik objętości książki. Powyższa seria wykresów nie pozwala na szybkie i łatwe porównanie parametrów (średniej i mediany) pomiędzy poszczególnymi książkami. Ale wykres jak poniżej już tak: Tutaj wyraźnie widać, że zdania są właściwie prawie zawsze tej samej długości. Przeanalizujmy na razie samego Pottera. Zobaczmy kiedy (w których momentach książki i w których książkach z serii) pojawiają się poszczególni bohaterowie. Na podstawie chmurki popularnych słów (za chwilę wyjdzie też to w parach słów - bigramach) wytypowałem kilkanaście osób: Harry, Ron, Hermione, Hagrid, Malfoy, Snape, Dumbledore, Voldemort, Vernon, McGonagall, Trelawney, Umbridge, Petunia, Lupin. Zobaczmy: Harry oczywiście występuje cały czas. Ale na przykład Ron i Hermoine pojawiają się gdzieś w 1/3 pierwszej części - wtedy zapewne Harry przybywa do szkoły czarodziei. Tak na przykład Umbridge największy udział ma w części Harry Potter i Zakon Feniksa, w której się pojawia. Petunia z kolei pojawia się na początku każdej z części, podobnie jak Vernon. Być może coś ich łączy? Na pewno coś łączy Hermonię, Rona, Snape’a czy Mafloy’a lub Hagrida. Sprawdźmy jak często pojawiają się poszczególne imiona (8 najczęściej występujących). Poniższy wykres obrazuje udział procentowy popularności określonego imienia wśród ósemki najpopularniejszych imion. Czyli - im częściej dane imię pojawia się w części tym wyżej ono znajduje się na wykresie. Bez zaskoczenia Harry dominuje całą serię - połowa należy do niego. Ciekawe jest coś innego - udział Rona spada w kolejnych częściach, a delikatnie rośnie udział Hermoine. Z kolei Dumbledore najbardziej aktywny jest w części Harry Potter i Książę Półkrwi. Widać to też na wcześniejszym wykresie Sprawdźmy teraz gdzie odbywa się akcja (albo o jakich miejscach mowa). Do wyboru mamy (angielskie nazwy): privet drive, diagon alley, hogwarts, azkaban, ministry of magic, grimmauld place. Ciekawostka - “privet drive” pojawia się w tych samych miejscach co Petunia. Coś Wam to mówi? Na koniec sprawdźmy jakie i jak często występują klątwy i zaklęcia (jak na książkę o magii przystało)? Początkowo zbyt wiele nie czarują, ale im dalej w las tym sprawa wygląda poważniej. Czas na ciekawsze sprawy - czy książki (już wracamy do całej twórczości Rowling) są coraz bardziej “pozytywne” czy wręcz przeciwnie? “Pozytywne”, bo wydźwięk może być pozytywny lub negatywny (w skali -5 dla negatywnych do +5 dla pozytywnych). Miara polega na przypisaniu każdemu ze słów określonej wartości liczbowej wyrażającej emocje i ich zabarwienie jakie niosą ze sobą słowa. I tak najbardziej negatywne to m.in. bastard, cock, cocksucker i tym podobne, wszystkie mają po -5 punktów. ass jest już ładogniejsze - ma -4 punkty. Te pozytywne to na przykład breathtaking czy outstanding (po +5 punktów), albo amazing (+4 punkty). Neutralne (0 punktów) to some kind. W słowniku AFINN zawartym w pakiecie tidytext jest 2476 słów. Nie za dużo, ale wystarczająco. Każde ze słów (w ramach konkretnego zdania) mamy opisane “punktem czasowym” - w którym zdaniu (lub inaczej mówiąc - w którym procencie) książki występuje. Możemy więc policzyć średnią z wydźwięku dla kolejnych “chwil” w książce i je narysować na wykresie. Pisałem o tym trochę w drugiej części tekstu o Pulp Fiction, tam też znajdziecie ciekawy film z krótkim wykładem Kurtem Vonneguta. Polecam poszukać czegoś na temat “Arc of Story”, chociażby tekst 6 Story Arcs Define Western Literature, Data-Mining Study Reveals (gdzie nota bene jest wykres mniej więcej przypominający to co mamy tutaj - dotyczy książki Harry Potter i Insygnia Śmierci). Zobaczmy jeszcze czy wraz z postępem czasy pani Rowling używa w swoich książkach słów coraz bardziej pozytywnych czy negatywnych? W bardzo dużym uproszczeniu - jest coraz bardziej mrocznie. Ale różnice są na poziomie ułamków punktów. Teraz - podobnie jak w przypadku śledztwa dotyczącego Remigiusza Mroza i Zygmunta Miłoszewskiego - sprawdźmy czy statystycznie rzecz biorąc wszystkie badane książki napisała Rowling? Na początek podzielimy książki na dwie grupy - o Harrym Potterze (podpisanych jako J.K.Rowling) i pozostałe (podpisanych pseudonimem Robert Galbraith). Dla każdego ze słów w ramach tych grup policzymy udział procentowy w całej grupie. Na koniec weźmiemy po 10% najbardziej popularnych słów z grup i policzymy współczynnik korelacji pomiędzy częstościami wystąpienia. Podobieństwo liczone w ten sposób daje nam wartość 0.76. To całkiem sporo, chociaż dla porównania w poprzednim poście autorstwo Enklawy przypisaliśmy Mrozowi na podstawie współczynnika równego 0.88 a Bezcennego przypisaliśmy Miłoszewskiemu ze współczynnikiem 0.83. Spróbujmy zatem inaczej - nie ma co się ograniczać do najpopularniejszych słów (tym bardziej, że bez filtrowania są to głównie imiona bohaterów i miejsca akcji), skoro można porównać każdą książkę z każdą na podstawie wszystkich wspólnych słów (i ich częstości występowania): Widać tutaj wyraźnie trzy obszary:

Kto napisał tę książkę?

Fri, 30 Jun 2017 12:36:46 +0000

Czy da się rozpoznać kto jest autorem książki na podstawie jej treści? Są tacy badacze, którzy to robią (i na przykład podważają autorstwo niektórych dramatów Szekspira), my zrobimy to samo z kryminałami (bo jest to takie zadanie śledcze).

Na warsztat weźmiemy dwóch poczytnych polskich autorów, tak żebyście mieli szansę sprawdzić czy to co wychodzi jest zgodne z tym co znacie z książek. Oczywiście czytaliście je, prawda? Mowa o Zygmuncie Miłoszewskim i jego trylogii o Teodorze Szackim oraz Remigiuszu Mrozie i jego trzech książkach o Joannie Chyłce. Do tego dorzucimy dwie książki - “Bezcennego” oraz “Enklawę”. Udamy, że nie wiemy kto je napisał. Żeby było trudniej - “Enklawa” podpisana jest przez Ove Løgmansbø, ale nawet sam Mróz na swojej stronie przyznaje się, że to jego pseudonim, zaś “Bezcenny” nie jest o Szackim. Żeby było jeszcze zabawniej - ja (jeszcze, czeka właśnie w kolejce) nie czytałem żadnej książki Remigiusza Mroza, więc nie wiem o czym i o kim są (ta Chyłka to wynik tego co poniżej). Czego potrzebujemy? Oczywiście tekstów książek. Powinny być w plikach tekstowych. Najprościej przenieść je do takiego formatu z plików .mobi przy pomocy oprogramowania Calibre - wczytujemy MOBI i konwertujemy na TXT. Wszystkie pliki TXT nazwałem odpowiednio i umieściłem w jednym folderze. Kilka operacji i wczytujemy wszystko do jednej dużej tabeli, w której kolumny to: autor książki, jej tytuł i w kolejne wiersze tekstu.

Lubimy czytać - coś o książkach

Wed, 28 Jun 2017 13:49:14 +0000

Jakiś czas temu była analiza ocen filmów (na podstawie bazy Filmwebu), obiecałem w różnych miejscach, że będzie też o książkach. Zatem sprawdźmy czego możemy się dowiedzieć z danych pobranych z serwisu LubimyCzytać.pl. Przez kilka tygodni skrypt działający sobie grzecznie na serwerze pobierał stronę po stronie z serwisu, analizował zapisane na niej dane i przepisywał je sobie do lokalnego pliku (dane zgromadziłem w pliku books_total.RDS, z którego za chwilę je wczytamy). I tutaj ciekawostka. Poprosiłem redakcję serwisu o przesłane danych, tak aby nie zapychać im serwerów. Poprosiłem jednocześnie zaznaczając, że chcę przygotować niniejszą analizę, a jeśli nie otrzymam danych - pobiorę je samodzielnie. Odmówiono mi. Żeby być miłym oszczędziłem serwery (swoje i cudze) i przed kolejnymi hitami w stronę czekałem losową liczbę sekund (od 1 do 3). Warto to robić, warto być przyzwoitym. Ale mimo wszystko nie udało się pobrać wszystkich danych (a ileż możecie czekać na nowy post?). Tak czy inaczej - mamy ponad 330 tysięcy wierszy. Wiersze zawierają informację o tytule książki, jej autora, wydawnictwo, datę wydania (skorzystamy tylko z roku), liczbie stron i kategorii do której dana książka została przypisana w serwisie. Dodatkowo - to co najbardziej ciekawe - mamy średnią ocenę, liczbę ocen oraz liczbę każdej z ocen przyznanych przez użytkownika (od 1 do 10 gwiazdek). Gdzieś jest też znacznik w jakim języku jest książka. Fajne dane, można sobie porobić różne przekroje. I tak zrobimy. Zaczynamy oczywiście od przygotowania środowiska - wczytanie pakietów i danych:

Maszynka do czytania Twittera

Tue, 20 Jun 2017 12:57:10 +0000

Bardzo lubię Twittera, który w Polsce jest trochę niedowartościowany. Według mnie to najszybsze źródło informacji, a przy okazji - przyjemne i wygodne w zdobywaniu danych do przeróżnych analiz. Najnowsze dane do jakich dotarłem (nie szukałem długo - jakieś 2 minuty) mówią o tym, że w Polsce z FB korzysta jakieś pięć razy więcej użytkowników niż z Twittera. Niby mało, ale jak zobaczymy jest to wystarczająco. Analizowaliśmy już w oparciu o dane z Twittera wyniki Oscarów oraz aktywność podczas meczu piłki nożnej. Nie ma jednak prostego sposobu (nie znam, może raczej tak), aby w krótkim czasie dotrzeć to tego co aktualnie dzieje się na Twitterze. Przygotujemy sobie więc odpowiednie narzędzie.

Mecz Polska - Rumunia na Twitterze

Mon, 12 Jun 2017 11:00:36 +0000

Wydarzenia sportowe (lub inne dziejące się tu i teraz) są bardzo wdzięcznym tematem analizy tego, co dzieje się w mediach społecznościowych. Jak wyglądał Twitter podczas meczu Polska - Rumunia?

Przygotowanie tokenu

Aby zebrać dane z Twittera potrzebujemy zbudować aplikację, która wykorzysta API Twittera i jej tokenu. W samym R wykorzystamy pakiet rtweet. Koniec końców potrzebny nam jest klucz API (para Consumer Key i Consumer Sectet) - jak je zdobyć można przeczytać tutaj (z obrazkami). Odpowiednie wartości należy przypisać do zmiennych poniżej. Kod przygotuje nam token i zapisze w lokalnym pliku, dzięki temu w przyszłości będziemy mogli taki token wykorzystać:

Oceny filmów i ich przewidywanie

Thu, 08 Jun 2017 13:59:55 +0000

Od czego zależą oceny filmów? Jak będzie oceniony film, który dopiero powstaje? Dawno temu, czyli gdzieś około roku, może nawet półtora temu, zebrałem z Filmwebu prawie całą ówczesną bazę danych o filmach. Wykorzystałem biblioteki napisane w PHP korzystające z (nie)oficjalnego API Filmwebu budując skrypt, który dla kolejnych ID “produktów” (produktów, bo Filmweb ma nie tylko filmy, ale również seriale i gry) i pobierał odpowiednie informacje (do ID bodaj 770 tys.): rok produkcji filmu, jego polski i oryginalny tytuł, czas trwania, gatunki, twórców i obsadę oraz liczbę ocen i średnią ocenę (na moment pobrania danych). Powstało kilka plików CSV (pliki relacyjne) z dużą ilością danych. Dzisiaj z tego skorzystamy i pooglądamy jak zmieniał się przemysł filmowy. Pliki zgromadzone zostały w formie CSV, po wyczyszczeniu danych wpakowałem wszystko w jeden plik z danymi. Wczytajmy sobie te dane:

Partie polityczne i sport

Thu, 25 May 2017 12:32:43 +0000

Czy preferencje polityczne mają jakiś związek z preferencjami sportowymi? Innymi słowy: czy jeśli lubię PSL to wolę piłkę nożną czy jednak bieganie? Stereotypowo mogłoby to wyglądać tak: Nowoczesna to biegi, PiS - piłka nożna i podnoszenie ciężarów (przed tv, ciężary 500ml w puszce), Kukiz - wędkarstwo, PSL - wypas owiec. Koniec żartu, można się śmiać. A jak jest? Zrobimy eksperyment z dużą ilością danych. Facebook ma to od ręki, dlatego wykorzystamy publiczne informacje z tego właśnie źródła. Poza tym - te 2 miliardy użytkowników zostawia bardzo dużo informacji o sobie. Według badania Gemius/PBI za kwiecień 2017 w Polsce z Facebooka korzysta 22.6 mln internautów (81.4% wszystkich, co ciekawe - zanotowano spadek o ponad 200 tys. m/m). Jak to zrobić? Po pierwsze trzeba wytypować listę fanpage’y na podstawie których będziemy wyciągać wnioski. Skorzystałem z dwóch źródeł: własnej głowy (i sondaży poparcia) aby wytypować partie i z własnych rąk aby wyszukać ich fanpages na Facebooku. Druga strona równania to lista fanpage’y sportowych (dla mnie trudniejsze) - tutaj skorzystałem z raportów Sotrender. Teraz metodologia. Można na kilka sposobów. Na przykład biorąc listę fanów poszczególnych stron i szukając części wspólnych tych zbiorów. Tak będziemy działać. Problemem jest tylko jak uzyskać listę fanów? Kiedyś Facebook udostępniał poprzez API możliwość wywoływania zapytań FQL (to taki podobny do SQL język dla FB). Ale ograniczenia prywatności spowodowały, że to nie działa. Trzeba więc inaczej, co nieco zaburzy wyniki (trudno mi jednocześnie na szybko oszacować jak bardzo). Posty na stronach są publiczne, ludzie lajkują i komentują. Facebook udostępnia poprzez API dane o tych komentarzach i lajkach, w tym ID (oraz imię i nazwisko) użytkowników, którzy taką interakcję poczynili. Zatem weźmiemy posty każdej ze stron, dla każdego postu listę osób reagujących (policzymy tylko like i comment - bez share oraz innych reakcji) na post. Tym sposobem nie będziemy mieć fanów (jest ich zapewne więcej niż wchodzących w interakcję - jaka to różnica wyjdzie po drodze; a jednocześnie na tych stronach można komentować i lajkować nie będąc jednocześnie fanem strony), ale coś podobnego. Może nawet lepszego (użytkownik zaangażowany jest cenniejszy niż bierny obserwator).

Tramwajem po grafie

Wed, 17 May 2017 15:09:13 +0000

Dzisiaj trochę o grafach. Po drodze na nie się powoływałem, czasem nawet jakieś można było zobaczyć. Ale co to są te grafy? Był wpis “edukacyjny” o metodach klasyfikacji, czas na kolejny. Grafy to stwory matematyczne, które przydatne są na przykład w analizie sieci społecznych (wykrywanie “grup wzajemnej adoracji” albo ważnych osób wokół których skupiają się inni), logistyce (planowanie tras transportu). My zajmiemy się warszawskimi tramwajami. Bo to sieć, jakby nie było. Dane o trasach pobrałem ze strony Warszawa.wikia.com ręcznie przepisując (Ctrl-C + Ctrl-V plus trochę Ctrl-H oraz USUŃ.ZBĘDNE.ODSTĘPY() w Excelu) do tabeli, w której w pierwszej kolumnie jest numer linii, a w drugiej - kolejne przystanki na tej linii (ich nazwy).

Rowery Veturilo - część pierwsza

Mon, 08 May 2017 15:54:27 +0000

Czy popularność rowerów Veturilo w Warszawie od czegoś zależy? Dzisiaj, po majowej przerwie (spędzonej między innymi na rowerze) zajmiemy się nieco większymi zbiorami danych. Na początek kilka słów o przygotowaniu danych.

Rowery Veturilo

Od początku marca (od bodaj 11) zbierałem dane wystawione przez NextBike (operatora rowerów m.in. Veturilo) dla kilkudziesięciu miast. Ograniczyłem się tylko do Warszawy, dane były pobierane co 5 minut. Jak wyglądają te dane możecie sprawdzić sami - to dostępny online plik XML. W pliku znaleźć można wszystkie potrzebne nam informacje:

Nowe pojazdy w Polsce po roku 2010

Sat, 29 Apr 2017 09:57:58 +0000

Gdzie rejestruje się najwięcej nowych samochodów? Jak to porównywać i pokazywać?

Dzisiaj proste zadanie, ale wymagające nieco gimnastyki. Otóż sprawdzimy gdzie przybywa najwięcej nowych samochodów. Skorzystamy z danych GUSu (precyzyjniej jest to Kategoria: TRANSPORT I ŁĄCZNOŚĆ, Grupa: POJAZDY, Podgrupa: Zarejestrowane nowe pojazdy samochodowe (dane kwartalne)). Pobieramy ręcznie plik CSV (dane dla wszystkich okresów i wszystkich lat, tylko samochody osobowe), pamiętając żeby przed pobraniem pliku przełączyć układ danych na “według TERYT” (klucz TERYT jest najlepszy do łączenia danych z mapami - pobranymi w plikach SHP z CODGiK - zdaje się, że było już o tym).

Prognoza stopy bezrobocia na 2017-2018

Wed, 26 Apr 2017 12:28:23 +0000

Jakie będzie bezrobocie za dwa lata? A właściwie - jak wyznaczyć przyszłe dane na podstawie historii? Dzisiaj zajmiemy się prostą (automatyczną) predykcją szeregów czasowych. Co to jest szereg czasowy? Ano, zbiór danych przypisanych do kolejnych dat (chwil w czasie - będąc bardziej precyzyjnym). Może to być wartość akcji dzień po dniu, może to być temperatura (czy dowolne inne wartości opisujące pogodę) lub cokolwiek innego, co ma swoje wartości w kolejnych momentach czasu. My zajmiemy się stopą bezrobocia w Polsce. Skorzystamy z miesięcznych danych publikowanych przez GUS. Dane są w ładnej tabelce na stronie, można więc je łatwo z niej wyciągnąć.

Nowa Europa (według k-means)

Wed, 19 Apr 2017 13:53:09 +0000

Czy granice państw europejskich są wyznaczone poprawnie? Jak wyglądałyby gdyby użyć algorytmów?

Tak zrobimy - sprawdzimy jak algorytm k-średnich “rozdzieli” na poszczególne kraje miasta biorąc pod uwagę ich położenie geograficzne. I zobaczymy co się stanie jak w Europie będzie mniej państw (oczywiście hipotetycznie, oczywiście na podstawie algorytmu, a nie wojny o ziemię). Trochę o algorytmach pisałem już wcześniej, tutaj użyjemy najprostszego z algorytmów - k-średnich. Metoda będzie prosta - dla każdego miasta znajdziemy jego współrzędne, później na podstawie współrzędnych dokonamy klasyfikacji do nowych grup. Na początek tej samej ilości grup (państw) jaką mamy obecnie - sprawdzimy czy granice są “odpowiednie”. Później będziemy zmniejszać ilość “nowych państw”.

Tramwaje warszawskie

Wed, 12 Apr 2017 08:54:46 +0000

Dzisiaj zajmiemy się ruchem tramwajów w Warszawie. Jak zmienia się ruch w ciągu dnia? Jakie i ile tramwajów jeździ po warszawskich torach? Inspiracją do tego wpisu jest filmik obrazujący podobne dane z Nowego Jorku.

Ekstra, co nie? Zrobimy to samo. Bo możemy, bo chcemy, bo potrafimy.

Źródło i pobranie danych

Skorzystamy z otwartych danych, jakie dostępne są na stronie Otwarte dane po warszawsku. Na początek potrzebna będzie rejestracja na tej stronie i uzyskanie klucza API, który pozwoli na dostęp do różnych ciekawych danych jakie udostępnia Miasto Stołeczne Warszawa. Po uzyskaniu klucza API koniecznie będzie wpisanie jego wartości w miejsce NUMER_APIKEY w poniższym kodzie.

Ceny mieszkań do wynajęcia

Thu, 06 Apr 2017 15:43:37 +0000

Znacie to nagranie?

No, ja mam M1 do wynajęcia…
To już nie jest aktualne, wie pan?

Pytanie brzmi za ile wynająć takie M1? Albo ile zapłacić? W zależności od lokalizacji.

Skąd wziąć dane?

Sprawdzimy jakie są rynkowe ceny najmu mieszkań, korzystając jak zwykle z dostępnych źródeł. Popatrzymy globalnie, na cały kraj. Popatrzymy też statystycznie (bez dużej ingerencji w dane)., a skoro statystycznie to potrzebujemy dużo danych, żeby statystyka miała sens. Tym bardziej że będziemy głównie uśredniać (albo precyzyjniej - opierać się na medianach, czyli wartościach środkowych). Skąd weźmiemy dane? Z serwisów ogłoszeniowych. Jest kilka specjalizujących się w nieruchomościach (np. otodom.pl), ale są też inne gdzie przewija się znacznie więcej ogłoszeń - OLX.pl, gumtree.pl czy gratka.pl. Ta ostatnia okazała się najbardziej przydatna. Z prostego powodu - na liście wyników wyszukiwania znajdujemy potrzebne dane (dzięki temu wystarczy przeskanować kolejne strony indeksu zamiast wchodzić na każde ogłoszenie - jest szybciej), ułożone dodatkowo w sensownym HTMLu. Jeśli chcesz pominąć technikalia - skroluj dalej, albo kliknij sobie tutaj i przejdź do analizy, a jeśli interesują Cię ceny mieszkań w Warszawie - to też jest, a nieco dalej w innych miastach. Już możecie się domyślić, że metodą “czołgową” przejedziemy po kolei wszystkie strony i sobie pobierzemy to co nam potrzebne. Potrzebujemy kilku bibliotek, przy okazji zdefiniujemy “standardowy” wygląd wszystkich wykresów (żeby nie dodawać za każdym razem moje ulubione “+ theme_minimal()”).

Jak Onet pracuje na Facebooku?

Mon, 20 Mar 2017 17:08:09 +0000

W poprzednim poście zrobiłem analizę postów publikowanych przez polskie redakcje informacyjne na Facebooku. Zabrakło tam redakcji z grupy Ringier Axel Springer Polska. W związku z licznymi prośbami - dzisiaj pogłębiona analiza postów Onetu. Zajmiemy się fanpage’em “głównym” i ostatnimi dwoma tysiącami postów.

fb_page_posts <- get_fanpage_posts("Onet", 2000, token)

Skorzystałem z funkcji get_fanpage_posts() napisanej w poprzednim poście, więc zainteresowanych tam odsyłam po szczegóły techniczne. Zobaczmy jakiego typu posty publikuje Onet:

fb_page_posts %>%
 count(type) %>%
 mutate(p=100*n/sum(n)) %>%
 ungroup() %>%
 arrange(n) %>%
 mutate(type = factor(type, levels=type)) %>%
 ggplot() +
 geom_bar(aes(1, p, fill=type), stat="identity") +
 labs(fill="Typ postu") +
 theme_void() +
 coord_polar(theta="y")

Prawie 77% - linki, 16.75% wideo, 6% zdjęcia. Jak to wygląda ilościowo - liczba postów publikowanych w ciągu dnia w zależności od dnia tygodnia, im bardziej żółte tym więcej:

Redakcje informacyjne na Facebooku

Sat, 18 Mar 2017 09:31:57 +0000

Jak pracują redakcje serwisów informacyjnych na Facebooku? Kiedy publikują, jakiego rodzaju treści? Czy “cała prawda całą dobę” to prawda? Dobierzemy się do postów publikowanych przez redakcje informacyjne i zobaczymy jak wygląda obraz tych redakcji na Fejsie. Do tego celu użyjemy biblioteki Rfacebook, której nie ma w CRANie, ale jest na GitHubie - jest sposób, aby i takie coś zainstalować w pakiecie R i korzystać tak samo jak z bibliotek z CRANa. Potrzebujemy biblioteki devtools, przy pomocy której zainstalujemy Rfacebook. Najpierw instalujemy devtools:

Róbmy swoje, Panie Wojtku!

Thu, 16 Mar 2017 14:22:03 +0000

Wczoraj wieczorem zmarł Wojciech Młynarski. Zobaczmy czy był popularny - korzystając z Wikipedii. Za miarę popularności uznamy liczbę wyświetleń hasła poświęconemu Panu Wojciechowi w polskiej Wikipedii. Im bardziej osoba popularna, tym częściej poszukuje się o niej informacji. Założenie dość dobre, prawda? Chyba, że… tak - w przypadku ogólnego medialnego szumu wokół osoby (na przykład z powodu śmierci) ta miara zostaje zaburzona. Co też za chwilę zobaczycie. Potrzebne będzie kilka bibliotek - do obróbki danych dplyr oraz reshape2, do wykresów ggplot2; stringr przyda się do jednego przekształcenia ciągu znaków. Dane pobierzemy przez API w formacie JSON z serwisu Wikimedia.org przy pomocy httr i przekształcimy do formatu data.frame przez fromJSON() z biblioteki jsonlite.

Pogoda w Warszawie

Tue, 14 Mar 2017 14:49:49 +0000

Rozmowy o pogodzie. Taki small talk. Z potwierdzeniem liczbowym faktów znanych z życia codziennego. Oraz - kiedy na urlop?

Dane pobieramy ze strony wunderground.com, gdzie każdy dzień ma swój URL (przykład), dzięki czemu możemy dość łatwo przejść dzień po dniu w pętli. Tym razem będzie bez gotowego kodu, a jedynie wskazówka co jest potrzebne:

biblioteka rvest
po wczytaniu strony dla konkretnego dnia trzeba znaleźć tabelkę (inspektor HTMLa w Chrome bardzo przydatny do tego celu)
z pomocą html_table() pobieramy dane z HTMLa do tabeli
dla każdego kolejnego dnia robimy to samo, łącząc w jednej tabeli wszystkie dane

Tak przygotowane dane warto zapisać lokalnie i później korzystać już z lokalnego pliku. Pobrałem dane dla całych lat 2000 - 2016, dla Warszawy. Po uporządkowaniu typów danych i wyczyszczeniu ich z braków lub błędów możemy zobaczyć jak wyglądają. Na przykład temperatura:

Poszukiwanie nowej muzyki

Thu, 09 Mar 2017 10:00:43 +0000

Dzisiaj zajmiemy się poszukiwaniem nowej muzyki. Uwielbiam poznawać nową muzykę, poszukiwać nowych smaków i cieszyć się nowymi odkryciami. Co prawda od kilku lat coraz trudniej znaleźć coś interesującego i innego. Albo są to popłuczyny po Kornie, albo jakaś kolejna wersja wczesnego Coldplay (który z każdą nową płytą jest coraz dalej od mojego gustu). Do poszukiwań wykorzystamy to co już znamy i lubimy. Bo najbardziej podobają mi się piosenki, które już raz słyszałem. W określeniu tego co znamy i lubimy pomoże LastFM. Serwis o którym pisałem przy okazji analizy nastrojów muzycznych zbiera nasze scrobble (przesłuchane utwory), ale posiadając tak dużo danych potrafi “polecić” coś od siebie. Algorytm polecający LastFM w dużym stopniu polega na porównywaniu gustów poszczególnych użytkowników, szukaniu podobieństw i wskazywaniu wykonawców pasujących do już znanych. Albo do innych wykonawców, mniej więcej na zasadzie: skoro dużo osób słucha Nirvany i Pearl Jam to te kapele są do siebie podobne. Oczywiście to nie jedyne cechy podobieństwa - są też tagi, lata działalności itp. Nie będę wchodził w algorytm LastFM, a wykorzystam dane jakie można z LastFM uzyskać. A z pomocą pakietu RLastFM w łatwy sposób uzyskamy dostęp do API serwisu. Przygotowanie R do pracy to ewentualne zainstalowanie wspomnianego pakietu, uzyskanie klucza API z LastFM oraz załadowanie potrzebnych bibliotek (tutaj: dplyr, ggplot2, reshape2). Wszystko to opisałem w poście “Jesienna deprecha”. Konfiguracja skryptu to 4 zmienne:

Koła w zbożu - algorytmy klasyfikacji

Tue, 07 Mar 2017 11:33:58 +0000

Jednym z głównych zagadnień w analizie danych jest klasyfikacja elementów do wybranych grup, na podstawie właściwości opisujących elementy. W pakiecie R i jego bibliotekach znajdziemy gotowe rozwiązania, pytanie tylko którego użyć? Zanim jednak coś poklasyfikujemy - zastanówmy się do czego to może być potrzebne? Zastosowań jest bardzo dużo:

zaszeregowanie gatunków roślin na podstawie parametrów typu długość liścia (bardzo popularny zestaw danych iris opisujący pąki irysów trzech odmian)
nieco ryzykowne - określanie czy grzyb jest jadalny czy też nie
filtrowanie spamu na podstawie nadawcy i zawartości maila
określanie autora tekstu na podstawie samego tekstu (w uproszczeniu na podstawie częstości występowania słów - pojedynczych jak i zbitek wyrazów)
wykrywanie nadużyć w bankach lub firmach ubezpieczeniowych - tutaj ilość cech (parametrów określających np. transakcję kartą kredytową) jest ogromna
podział klientów sklepu na określone grupy na podstawie zawartości koszyków
i tak dalej, i tak dalej

My będziemy testować algorytmy klasyfikujące. Narysujemy sobie pięć “rozedrganych” kółek (precyzyjniej: okręgów) nachodzących na siebie (jak generator losowy pozwoli :-) i później dla każdego narysowanego punktu określimy do którego kółka należy. Coś, co widać gołym ludzkim okiem na obrazku nie zawsze jest takie łatwe do zobaczenia dla maszyny. Post jest stricte edukacyjny, chyba niewiele ciekawych wniosków z danych tutaj wysnujemy. Chcę pokazać jakie są algorytmy (bez wchodzenia w ich szczegóły - klikaj w linki jeśli chcesz zgłębić wiedzę) i jak w najprostszej wersji użyć ich w R. Jeśli Cię to trochę zniechęciło, to skroluj dalej, pooglądaj kolorowe okręgi. I to bez wychodzenia na pole (w sensie “w zboże”)! Zaczynamy od przygotowania kółek. Danych.

Pulp Fiction - analiza filmu

Fri, 03 Mar 2017 16:59:47 +0000

Jak dobrze znacie Pulp Fiction? Ja widziałem ten film chyba ze 20 razy. Ciekawe jak widzi go maszyna… Jeśli nie oglądaliście jakimś cudem filmu uprzedzam - poniżej są spoilery. Nawet maszyna je wychwyciła ;) Zajmiemy się analizą scenariusza. Podobnie jak było z twittami przy Oscarach - nie będziemy go czytać (no, prawie - do uporządkowania danych przyda się znajomość filmu - jak widać poniżej wskazuję konkretne linijki), pozwolimy na mechaniczną analizę. Na początek potrzebny będzie tekst scenariusza. Jest kilka serwisów, na których można znaleźć takie rzeczy, wczytajmy więc gotowy tekst. Potrzebujemy tekstu angielskiego - w drugiej części wpisu pokusimy się o analizę emocjonalną tekstu, a tutaj o polskie słowniki trudno. Trudno byłoby też pewnie znaleźć przetłumaczony scenariusz.

Jesienna deprecha

Wed, 01 Mar 2017 16:35:06 +0000

Mam znowu doła Znów pragnę śmierci Wracają stare lęki I nie mogę w nocy spać Czy “jesienna deprecha” ma odbicie w słuchanej muzyce? Zacytowany na początku tekst to oczywiście piosenka “Jesienna deprecha” Kur z niesamowitej płyty P.O.L.O.V.I.R.U.S.. Zadanie na dzisiaj to weryfikacja czy pora roku albo pora dnia mają wpływ na nastrój słuchanej muzyki. Ktoś może powiedzieć, że oczywiście, że tak, że jasne, że “jesienią to ja tylko Radiohead i Portishead, a na wiosnę to ABBA, latem zaś Jamajka i Bob Marley”. Dowody? Historia przesłuchanych utworów, z datą i godziną? Ma? Ja mam. Serwis się nazywa Last.FM i pozwala przy pomocy różnych wtyczek (albo bezpośredniego połączenia konta np. w Spotify z LastFM) zbierać statystyki. Jak się ma dane od tysięcy (tfu! 43 milionów - przynajmniej tak donosił TechCrunch, chociaż przy nieco innej okazji) słuchaczy muzyki, to można robić z nimi cuda. Można je też sprzedawać wytwórniom płytowym albo stacjom radiowym, dzięki czemu wiedzą co jest “na topie” bezpośrednio od użytkowników. I dzięki temu produkują, to co produkują. Można też dowiedzieć się, kto słucha muzyki przed oficjalną premierą płyty i ścigać takie osoby. Polecam hasło Last.fm w angielskiej Wikipedii, o ile oczywiście nie znacie samego serwisu. Ale wracjamy do tematu. Potrzebna jest historia przesłuchanych utworów, którą weźmiemy z Last.fm. Użyjemy do tego pakietu, który został już wycofany z CRANa… Trzeba zainstalować ręcznie paczkę pobraną z archiwum CRANa. Potrzebny jest też klucz API dla LastFM - zdobyć można go na stronie API Last.fm, a jego wartość należy wpisać zmiennej lastkey. Później dane z Last.fm będziemy łączyć z danymi ze Spotify (zwracanymi jako JSON) - stąd odpowiednie biblioteki.

Oscary 2017 - kto wygrał? Bez czytania wiadomości!

Mon, 27 Feb 2017 15:44:51 +0000

Jak dowiedzieć się kto wygrał Oscara? Bez czytania wiadomości. W każdej z kategorii. Korzystając tylko z Twittera, ale bez czytania poszczególnych twittów! Da się? Oczywiście, że się da. Potrzebujemy tylko danych i odrobiny sprytu przy ich przetwarzaniu. Najpierw dane. Napisałem skrypt, który pobierał co 5 minut wszystkie nowe twitty z hashtagu #Oscars i zapisywał je w pliku “Oscars_hash.Rds” lokalnie na dysku. Sposobów na pobranie danych z Twittera jest wiele, ja wybrałem ten - najszybciej było mi napisać odpowiedni skrypcik (w R - mniej więcej robiący tyle: wyszukaj najnowsze twitty z określonym hasłem, dodaj je do już znalezionych) i po prostu zostawić komputer na noc. Te same dane można pobrać i wpakować do bazy danych. Można też przygotować skrypt, który pobierze wszystko na raz. Skrypt możecie przygotować sobie samodzielnie, zachęcam. Tak czy inaczej - w R polecam bibliotekę twitteR. Trzeba jednak liczyć się z ograniczeniami API Twittera - określona liczba zapytań w czasie, określona (maksymalna) liczba wyników zwracanych dla jednego zapytania. Z powodu tych ograniczeń dane przygotowane przeze mnie zawierają maksymalnie 3200 Twittów pobranych raz na 5 minut. Do naszej analizy to wystarczy. Poza tym - moją ideą przy prezentowaniu kolejnych postów jest pokazanie, że bez płacenia za jakiekolwiek dane można fajnie się pobawić i czegoś nauczyć. Dzisiaj korzystamy jak zazwyczaj z bibliotek ggplot2, dplyr, lubridate oraz tidytext do operacji na słowach. Fajna biblioteka, dużo przykładów, jeszcze się będziemy nią bawić. Pobieramy dane zapisane przez skrypty zapisujące to, co działo się na Twitterze i rozdzielamy czas opublikowania twittu na dzień, godzinę i minutę (po tym będziemy później szukać i grupować). Przy okazji wytniemy dane tylko dla 27 lutego (ceremonia była już 27 lutego naszego czasu), żeby nie ciągnąć za dużego ogona ze sobą.

Oscar 2017 "Best Picture" - kto wygra?

Fri, 24 Feb 2017 19:00:35 +0000

Czy da się wytypować zdobywcę Oscara za pomocą matematyki? Spróbujmy odpowiedzieć na tak postawione pytanie. I sprawdźmy, czy model oparty na dostępnych danych wskaże faworyta “La la land” jako zwycięzcę w kategorii “Najlepszy film”. Na początek rozważmy czego możemy się dowiedzieć z ogólnodostępnych źródeł? Weźmy na przykład bazę filmów z serwisu IMDb.com. Mamy tam takie informacje:

średnia głosów społeczności
ilość oddanych głosów
mamy ocenę krytyków (wskaźnik MetaScore)
informacje o obsadzie, reżyserze, gatunku
informacje o czasie trwania
koszt (budżet) filmu
mamy przychód z kin - w weekend otwarcia oraz całkowity
wreszcie - wiemy czy film zdobył Oscara wcześniej czy nie (w odpowiednim roku)

Spróbujmy zatem na początek pobrać potrzebne informacje wprost z IMDb.com. Te biblioteki nam się przydadzą:

Grudniowe dzieci

Thu, 23 Feb 2017 22:49:16 +0000

Czy zastanawialiście się w jakim miesiącu najczęściej bywacie na urodzinowych imprezach? Wtedy, kiedy mają te urodziny, prawda? A kiedy mają? Wtedy, kiedy rodzi się najwięcej dzieci, czyż nie? Sprawdźmy to - korzystając z danych GUS oraz stosunkowo prostego skryptu w języku R. Na początku potrzebne będzie kilka bibliotek do wygodnego przetwarzania danych. Jeśli nie masz ich - zainstaluj.

tidyverse - to biblioteka wywołująca inne biblioteki, taki skrót. My będziemy potrzebować konkretnie dplyr (do szybkich operacji na danych) oraz ggplot2 (do rysowania wykresów)
XLConnect - jedna z wielu pozwalająca na czytanie arkuszy Excela (dane GUS są zapisane w tej formie), ja lubię ją najbardziej (jest wygodna w użyciu). Uwaga - wymaga Javy
reshape2 - kolejna do manipulacji danymi, w tym przypadku do będzie potrzebna do rozpivotowania danych (funkcja melt())
lubridate - do transformacji dat

Po ewentualnej instalacji (poprzez install.packages()) możemy załadować biblioteki do R:

Wracam

Thu, 23 Feb 2017 21:04:26 +0000

Wróciliśmy z Chin. 6 lat temu, relację można przeczytać na blogu Made in China. Przez te sześć lat zdążył urodzić się Szymon, potem Hubert. Kilka razy zmieniłem pracę. W między czasie blog leżał odłogiem - nie było tematów, nie było czasu i weny. Mogłem co prawda pisać blogaska o wszystkim i o niczym, ale po co? Teraz mam wrażenie, że znalazłem coś, czym warto się podzielić. Zainteresowałem się analizą danych, predykcją i tym podobnymi zagadnieniami związanymi z szeroko pojętym data mining i data science. Próbowałem sił w PowerBI, Tableau, aby na koniec dojść do R, przy którym zostałem (jak na razie - Python pewnie następny). Ostatnio zawodowo grzebię też w VBA w Accessie i Excelu. I to jest ta nisza - dane, ich przetwarzanie i wizualizacja. Takiego polskojęzycznego bloga nie znalazłem, sporo fajnych jest po angielsku (ale co to za problem czytać po angielsku?). Może kogoś zainteresuje, może komuś się przyda do nauki, chociaż nie zamierzam prowadzić tutaj jakiegoś kursu, a publikowane kody źródłowe będą raczej dla zaznajomionych z R. A jeśli nie przyda się nikomu - “będzie do portfolio”, “wpiszę sobie do CV”.

Jedziemy do Chin!

Wed, 22 Sep 2010 11:38:12 +0000

Dokładnie tak - za nieco ponad tydzień ruszamy z małżonką na wschód, tym razem poza europejski kontynent - do Kraju Środka.

Drugiego października wylatujemy z warszawskiego lotniska im. Chopina, lądujemy w Kijowie, przesiadamy się i po kilku godzinach lotu - lądujemy w Pekinie. Zwiedzamy Pekin przez jakiś tydzień (Zakazane Niasto, Wielki Mur), później Xian (terrakotowa armia), mały wywczas w Hangzhou, Szanghaj (razem z wizytą na Expo 2010) i na koniec Hong Kong (jak się uda to z wizytą w Macau).

Kurs scenariopisarstwa

Mon, 21 Jun 2010 14:31:16 +0000

Byłem, skończyłem, napisałem i teraz poprawiam “trzydziestkę” - czyli o tym jak uczyłem się pisać scenariusze w Bahama Films. Gdzieś pod koniec lutego trafiłem na kurs pisania scenariuszy filmowych dla początkujących. Kurs prowadzony był przez Wiktor Piątkowski i Krzysztofa Maćkowskiego pod szyldem Bahama Films. Obaj brali udział w Laboratorium Scenariuszowym przy Studiu Munka w 2008 roku, napisali serial (który chcą nakręcić), Krzysztof “dodatkowo” wydał książkę “Raport Badeni”, Cały kurs to kilka grup, w tej do której chodziłem było nas siedmioro. I siedem było też spotkań – co dwa tygodnie, po cztery godziny.

Kiedy miałem... 5-10-15 i więcej lat

Fri, 11 Dec 2009 21:50:37 +0000

Zainspirowany wpisem Pawła o tym co działo się w Polsce kiedy on miał 5, 10 czy 15 lat postanowiłem zrobić to samo, tylko szerzej. Skorzystałem z polskiej Wikipedii i oto co mi wyszło. Jak się urodziłem, w 1978 roku to się działo co nie co. Był to rok,w którym było aż 3 papieży: Paweł VI, Jan Paweł I (po wyborze na papieża przeżył 33 dni) i wybrany 16 października Jan Paweł II. Dzień przed moimi urodzinami, 6 lutego, GUS podał w komunikacie o 1977 roku, że średnia płaca wyniosła 4384 zł. To były “stare złotówki”. W nowych jeszcze nam nieco do tego brakuje (za październik 2009 roku jest to 3312 PLN). A poza tym:

Tanie noclegi w Krakowie

Tue, 07 Jul 2009 18:33:47 +0000

…czyli o tym jak to hostel Trzy Kafki PLUS maila reklamowego słał Czasem trzeba jechać do Krakowa i zatrzymać się na kilka nocy. Nawet jeśli się tam studiowało i ma kilkoro “starych, dobrych znajomych” to lepiej spać w hostelu – chociażby dlatego, żeby się nie “napraszać”. Człowiek szuka wtedy miejsca w hostelu. Wysyła maila do kilku takich placówek, dopytuje się o miejsca, ostatecznie rezerwuje, płaci, jedzie i jest zadowolony (osobiście polecam dla większych grup Blue Hostel w którym spałem już kilka razy a dla wyjazdów w parze – coś z tej oferty). A później mija jakiś czas i przychodzi mail promocyjny. Na przykład od hostelu Trzy Kafki PLUS, który kiedyś odpowiedział, że nie ma wolnych miejsc w podanym terminie. I super – jest kryzys, turystów ponoć coraz mniej w Krakowie, trzeba się promować, a Internet to świetne do tego narzędzie. Więc mailing! Pewnie – najlepiej do tych, którzy mieli już z nami kontakt. O takim podejściu pisała kiedyś Shrew. Pisała też jak wysyłać newslettery. [ad#postad]No to ślemy. Klienci (byli oraz potencjalni) dostają maila. Tak oto znalazłem się na liście 514 odbiorców (takich na litery L, Ł oraz M, to trzy literki – powiedzmy jakaś 1/8-1/10 całej bazy) mailingu o tym jak to tanio będzie dla rodzin do końca września. Super, ale dlaczego mój (oraz inne 513; w tej jednej paczce) mail był w polu “Do” a nie w “Ukryta kopia”? Dlaczego mogłem zobaczyć inne maile? Przecież to “nic takiego”… nic się nie stało, przecież to tylko mail. Dziękuję hotelowi Trzy Kafki za udostępnienie mojego maila 513 innym osobom… Zastanawiam się czy nie utworzyć serwisu społecznościowego z opiniami o hostelu Trzy Kafki – bazę do wysłania zaproszeń już mam… A może wysłać konkurencyjną ofertę? Na taką wiadomość hostel odpisał nawet “Przepraszamy za błąd. Już się zorientowaliśmy”. Brawo! Ktoś jednak tam myśli… Ciekawe co na to Generalny Inspektor Ochrony Danych Osobowych? Mam nadzieję, że się dowie i coś z tego będzie – jeden z uczestników mojej części (a było ich więcej, jak sądzę) “listy mailingowej hostelu Trzy Kafki” napisał, że skieruje sprawę do GIODO “za doskonałą ochronę danych klientów” – ja nie mam na to głowy i czasu. Swoją drogą – może sprawdzić te osoby na Naszej klasie albo w Facebooku?

Suwalszczyzna

Sat, 09 May 2009 15:49:09 +0000

W majowy weekend byliśmy w Suchej Rzeczce na Suwalszczyźnie, w gospodarstwie agroturystycznym.

[ad#postad]

A Sucha Rzeczka i samo gospodarstwo Państwa Królów - cudowne. Z dala od zgiełku, cisza, spokój. Miejscowość leży w Puszczy Augustowskiej, dwa kilometry od jeziora Serwy i 400 metrów od Kanału Augustowskiego.

Świetne warunki w stosunkowo tanich domkach (jak na standard - pełen komfort, kabina prysznicowa z hydromasażem, drewniane domki z bali, lakierowane drzewo, TV satelitarna…), do tego bardzo mili gospodarze serwujący ogromne ilości smacznego jedzenia. Rowery i kajaki gratis; na terenie gospodarstwa boisko do siatkówki, stół do ping-ponga i bilarda, miejsce na grilla i… fińska łaźnia!

Wady i zalety iPhone

Sun, 15 Mar 2009 16:00:12 +0000

Od około trzech miesięcy jestem posiadaczem iPhone 3G 16GB. Używam go codziennie, korzystając głównie z wbudowanego w niego odtwarzacza muzyki (czyli właściwie iPoda), telefonu, SMSów czy Internetu (WWW i czasem komunikator). Ten telefon jest też dla mnie książką adresową i kalendarzem. Co mogę powiedzieć po trzech miesiącach? Na początek wygląd – Apple jest mistrzem designu i marketingu. Zacząłem od iPoda Nano, teraz iPhone, a już zastanawiam się czy nie kupić jakiegoś MacBooka. Te urządzenia są ładne (co prawda to subiektywne odczucie), wygodne i intuicyjne w użyciu. Najlepszy dowód to instrukcja dołączona do telefonu – właściwie nie mówi niczego. Odtwarzacz mediów – to po prostu iPod plus YouTube. Jest to zwykły odtwarzacz muzyki i wideo z możliwością zarządzania utworami, listami (inteligentne listy to coś cudownego), i zawartością mediów, ale tylko za pomocą iTunes. To niestety wada. I to dość poważna, szczególnie jak podłączysz iPhone’a do innego komputera. Sam mam włączone ręczne zarządzanie mediami, jednak mam wrażenie, że ustawienia dotyczące synchronizacji zapisane są w iTunes, a nie w urządzeniu. Dodatkowo - w porównaniu z iPodem Nano - gorzej dodaje się utwory do listy „On the Go”. Jako telefon iPhone sprawuje się normalnie – czyli niczego nie mogę mu zarzucić. Jedyne co irytuje to fakt, że nie można odrzucić połączenia przy zablokowanym ekranie! Odblokowanie ekranu przy przychodzącym połączeniu oznacza jego odebranie (co w sumie jest wygodne)… [ad#postad]SMSy – ich pisanie to udręka. Dość niewygodna klawiatura (szczególnie kiedy w autobusie trzymasz się jedną ręką, a piszesz tą samą w której jest telefon), dziwaczny słownik (nie wiem czy potrafię dodać jakieś słowo i nie wiem jak usunąć “sie” które mi się automagicznie dodało) czy treść przychodzącego SMSa widoczna od razu na ekranie, albo brak możliwości „przekręcenia” telefonu na bok to największe moim zdaniem wady. Chociaż z drugiej strony – przychodzący SMS widoczny od razu to fajna rzecz. Szkoda tylko, że i tak muszę wejść do SMSów, żeby został oznaczony jako przeczytany (a wchodzenie do SMSów trwa u mnie kilka sekund – nie mam pojęcia dlaczego). Niestety nie ma też dość praktycznych rzeczy – jak chociażby wysyłanie „wizytówek” kontaktów (albo chociaż samych numerów telefonów) – tego nie da się zrobić ani przez SMS, ani przez maila. Podobnie z przesłaniem otrzymanego SMSa. Nie ma też raportów o doręczeniu SMSa - czasem ta funkcja się przydaje. Na co dzień używam kalendarza Google i ostatnio też (po próbie synchronizacji z iPhone’m właśnie) wszystkie kontakty trzymam w GMailu. Świetne rozwiązanie – zmiana na komputerze od razu (po automatycznej synchronizacji) widoczna jest w telefonie i vice versa. Jedyny feler tego rozwiązania to właściwie każdorazowe łączenie się telefonu z Internetem przy otwarciu kalendarza lub kontaktów. Telefon ten ma wbudowany aparat do robienia zdjęć (bo nie nazwę tego „aparatem fotograficznym”) – 2Mpix jest wystarczające. W sieci znaleźć można opinie, że to za mało, że aparat jest kiepski. I tak i nie – ja nie narzekam, ale też uważam robienie zdjęć komórką za chybiony pomysł. Do tego celu służą konkretne urządzenia. Dziwi mnie jednak brak możliwości nagrania filmu wbudowaną w telefon kamerą – skoro jest to urządzenie multimedialne (a jest) i to wyposażone w oko kamery to dlaczego nie można nagrać krótkiego filmiku? Na szczęście są odpowiednie aplikacje, które to umożliwiają. Inne rzeczy to braki. Brak sensownego modułu bluetooth - jakiś jest, ale nie wymienię się plikami z komórką kolegi, tak samo nie zsynchronizuję iPhone’a z iTunes bez połączenia go z komputerem kabelkiem… Brak możliwości (bez dodatkowego oprogramowania) zrobienia z telefonu modemu (po kablu lub najlepiej po bluetooth) to też wada. Braku MMSów (bez SwirlyMMS :) zbytnio nie odczuwam - dostałem może z 5 w ciągu kwartału, wysłałem może dwa. Copy & paste – to powinien być standard, a nie rozwiązanie nielegalne. Oczywiście - wszystkie cztery powyższe braki załatwiają aplikacje z Cydii. Być może coś poprawi się z planowanym na 17 marca iPhoneOS 3.0?

Przegląd internetu, 15 lutego 2009 r.

Sun, 15 Feb 2009 14:16:55 +0000

Dzisiaj pierwszy wpis z cyklu „Przegląd Internetu”. Będzie to wybór najciekawszych i najpopularniejszych tematów z tygodnia. Oczywiście wybór subiektywny. Ponieważ zazwyczaj jest tak, że to o czym chciałbym napisać napisali już inni, a zazwyczaj brakuje mi czasu na napisanie tego samodzielnie – będę linkował do tych innych. Na początek – zmiany w Gmailu. Google wprowadziło możliwość dodania kilku widoków na skrzynkę pocztową. Możemy teraz dodać panele, w których zobaczymy maile wybrane wg dowolnego klucza wyszukiwania – np. oznaczone etykietami „do zrobienia” czy też (tak jest w moim przypadku) „mailing”. Więcej:

Muzyczne podsumowanie roku 2008

Fri, 26 Dec 2008 15:10:09 +0000

Najlepsze podsumowanie tego co grało mi w uszach to moje statystyki ostatniego roku na Last.fm Ale nie tylko to, chociaż moje podsumowanie krąży wokół tego co w tych statystykach się zapisało. W polskiej muzyce w 2008 roku pojawiły się dwie płyty, które odbiegają znacznie od tego do czego przyzwyczaili nas “majorsi” i stacje radiowe typu RMF, Zet czy Eska. Bardzo dużą popularnością cieszyły się płyty Czesława, który śpiewa oraz Marysi Peszek - Maria-Awaria (w tym przypadku raczej nie sądzę, żeby znacząco szum przełożył się na sprzedaż). Wreszcie coś, co poza melodią wpadającą w ucho ma tekst… i jest popularne. Jednak dla mnie ani jedna ani druga płyta nie była specjalnie ważna. Czesław jest muzyką popularną, która jest odmienna od mojego gustu. Marysia Peszek nagrała płytę z fajnymi (chociaż dość prostymi jeśli chodzi o rymy) tekstami i… tyle; “Miastomania” podobała mi się bardziej, ale też do niej nie wracam. [ad#postad]Wracam i zawsze będę wracał do Pink Floyd. Kiedyś wspominałem o wielkim boksie A Tree Full of Secrets, a w tym roku wróciłem to The Wall w wersji Under Construction, czyli w wersji demo albumu który uważam za najlepszą płytę w historii muzyki. Różnic pomiędzy wersją demo a finalną jest kilka: przejścia pomiędzy utworami są chropowate, zmieniona jest nieco kolejność utworów (np. “Hey You” po “Confortably Numb”) a całość jest bardziej dołująca i przygnębiająca. Dla mnie idealnie - bo właśnie za klimat i treść opowieści Watersa lubię “Ścianę”. Wracając do płyt nowych, których słuchałem w kończącym się roku… Za najlepsze uważam dwie. Pierwsza to “Third” - trzecia studyjna płyta Portishead (trzeba było na nią czekać aż 10 lat). Fani głosu Beth Gibbons z pewnością obawiali się tego co znajdą na płycie. Ale nie potrzebnie - płyta jest świetna, w klimacie wcześniejszych “Dummy” czy “Portishead”, a jednocześnie z nutką nowoczesności. Warto było czekać, ot co. Ważne zagraniczne płyty to nowa Metallica czy “Chinese Democracy” - album Guns N’ Roses nagrany aż po 15 lat przerwy! Jednak żadna z tych (i kilku innych) nie zasługuje moim zdaniem na uwagę tak, jak “Trójka” Portishead. Wśród polskich płyt zdecydowanym liderem dla mnie jest “Gospel” formacji Lao Che. Chłopcy przeszli samych siebie. Nagrali płytę energetyczną, będącą miksem kilku styli, z doskonałymi tekstami… i można tak długo. “Chłopacy”, “Bóg zapłać” czy “Hiszpan” to zdecydowane hity minionego roku w moim odtwarzaczu. Zasłuchiwałem się też płytami z 2007 - “Terroromans” Much i koncertem “MTV Unplugged” Heya. Oprócz dźwięków samych w sobie w 2008 roku miała miejsce ciekawostka związana ze sposobem dystrybucji muzyki. 2008 to dwie płyty Nine Inch Nails - czteroczęściowy “Ghosts I-IV” oraz “The Slip”. Album “Ghosts” został w całości wydany w sieci, na licencji Creative Commons. Pierwszą część albumu (Ghosts I) można ściągnąć bezpłatnie ze strony zespołu, zaś za pięć dolarów dostępna jest pełna, czteroczęściowa wersja albumu. Dwa miesiące po “Ghost” Trent Reznor wydał płytę “The Slip” - też w formie plików umieszczonych w internecie, za zupełną darmochę. O NIN pisałem wcześniej. Muzyka to nie tylko płyty, ale też koncerty. Najlepsza trójka jaką widziałem na żywo to:

Filmowe podsumowanie roku 2008

Thu, 25 Dec 2008 15:10:26 +0000

Koniec roku to czas podsumowań (i postanowień na nowy rok). W tym roku postanowiłem przygotować takie podsumowania w dziedzinach, które mnie interesują najbardziej i które jednocześnie są mniej lub bardziej dla mnie ważne. Proszę Państwa - podsumowanie roku 2008 w filmie. W 2008 roku najważniejsze filmy to pop-kulturowe produkcje: czwarta część Indiany Jonesa, kolejny Batman i kolejny James Bond (którego nie widziałem). O kolejnym Indiana Jonesie napiszę tylko tyle, że zabawa w dawnym stylu skopana została przez słaby scenariusz. A końcówka to już masakra… niestety. Mroczny Rycerz czyli kolejna część Batmana - dla mnie ten film to kilka mocnych punktów w ekipie, z powodu których musi być dobry: Reżyseria - Christopher Nolan czyli twórca świetnego i (jak na rok 2000) innowacyjnego “Memento” W głównej roli znakomity Chistian Bale którego uwielbiam od czasów American Psycho i późniejszymi Equilibrium czy Mechanikiem na czele. A w 2009 roku ma być kolejny Terminator, z którym Chistian Bale zagra Johna Connora. A do kompletu w roli Alfreda Michael Caine, którego lubię coraz bardziej - im starszy tym lepszy (gorąco polecam film Pojedynek (Sleuth) gdzie zagrał właściwie tylko z równie dobrym Jude Law). Nie rozumiem z kolei całego zachwytu nad Heathem Ledgerem - jako Joker świetny, to prawda, ale ten aktor nie kojarzy mi się z niczym poza tym, że zmarł z przedawkowania narkotyków czy środków nasennych. Z “Tajemnicy Brokeback Mountain” go wcale nie pamiętam (w ogóle średnio pamiętam ten film - nie przypadł mi do gustu, nie ujął mnie za serce itd.). Zresztą znalazł się na pierwszym miejscu “Rankingu najbardziej przecenianych gwiazd kina” przygotowanym przez portal Film Threat. Dla mnie odkryciem roku (częściowo na nowo - kilku filmów nie widziałem wcześniej) są bracia Coen. Rok zaczął się od To nie jest kraj dla starych ludzi (No Country for Old Men) - film znakomity, powolny, mroczny, bez muzyki… idealny. A Javier Bardem powoli robi się dla mnie takim Bale’em albo Cainem ;) Pamiętacie policjanta na wózku z Drżącego ciała Almodovara? A nieco ponad pół roku później bracia Coen serwują nam film Tajne przez poufne (Burn After Reading) który jest powrotem do klimatów znanych z np. Fargo (to chyba wciąż najlepszy ich film w moim rankingu). Mamy więc jakąś historię kryminalną i całą serię idiotów przewijających się przez ekran, z których najbardziej chyba bawi Brad Pitt. Do niego z gwiazd jest Clooney i Malkovich. Trochę to podobne (układem i filozofią) do Fargo, z którym łączy (poza Coenami oczywiście) chociażby Frances McDormand (Oscara dla najlepszej aktorki za rolę w Fargo, a prywatnie - żona Joela Coena). Poza tym godne uwagi filmy:

Notowania akcji na bieżąco

Sun, 16 Nov 2008 16:59:05 +0000

Ostatnio powstało kilka serwisów ułatwiających zarządzanie domowym budżetem. Z tych najnowszych to: Benefi.pl, MojeGrosze.pl, Figgy.pl, CashControl.pl czy zapowiadany przez Artura Kurasińskiego Bankomierz.pl. Niestety żaden z nich nie pozwala na kontrolowanie portfela akcji. A bieżąca wartość portfela jest dość podstawową funkcjonalnością dla ludzi, którzy z finansami robią coś więcej niż płacenie rachunków czy trzymanie funduszy w skarpecie. Żaden (może poza Bankomierzem, który jeszcze właściwie nie istnieje) z wymienionych serwisów nie pozwala na bieżące kontrolowanie stanu portfela giełdowego lub funduszy inwestycyjnych. Dodatkowa wada tych serwisów to “obsługa” zadłużenia na karcie kredytowej. Być może serwisy te projektują studenci, a - z tego co pamiętam z czasów studiów ;) - podczas studiów potrzebne do życia instrumenty finansowe ograniczają się do rachunku bieżącego i karty debetowej do tegoż rachunku ;) [ad#postad]Od ponad dwóch lat na prywatne potrzeby mam sprytny arkusz (właściwie dwa spięte ze sobą) w Excelu, dzięki któremu każdego dnia wiem ile mam na koncie, ile w akcjach (oczywiście z informacją o ewentualnym zysku czy stracie) a ile w jednostkach TFI. Zadłużenie na karcie kredytowej też kontroluję. Przygotowałem więc prostą wersję arkusza w Google Docs, która online policzy nam wartość naszego portfela akcyjnego. Zarówno dla akcji z rynku podstawowego jak i z rynku New Connect. Jedyne co potrzebujemy wiedzieć to ile akcji kupiliśmy i ile na to wydaliśmy. Oczywiście dla każdej spółki z osobna :) Arkusz znajduje się pod adresem http://spreadsheets.google.com/ccc?key=pNf042T4JPWigiBwUhHMmXQ i zawiera przykładowe dane, które przeliczają się podczas trwania sesji. Oczywiście dane o aktualnych cenach są opóźnione o 15 minut, a nie są danymi online. Do arkusza importuję dane z oficjalnych stron obu rynków - www.gpw.pl oraz www.newconnect.pl. Aby użyć arkusza dla własnych danych należy go zapisać w swoich dokumentach Google tworząc kopię. Jak zwykle - czekam na opinie i sugestie.

Kolorowy #Blip w #Miranda z obrazkami i cytatami

Sat, 11 Oct 2008 16:00:01 +0000

O co chodzi? I po co?

Od ponad roku korzystam z Blipa. Przez ten rok chyba na każdy możliwy sposób z niego korzystałem – przez kokpit na WWW, przez GG i JID jabbera, przez BlipFoxa (w którejś zdecydowanie wcześniejszej wersji) oraz przez dwie aplikacje – Blippera i AirBlipa. Każde z tych rozwiązań ma swoje zalety i wady. Ostatecznie wybrałem Blipa przez jabbera, a dokładniej przez konto GoogleTalk w Mirandzie. W Mirandzie, bo pozwala korzystać z kilku transportów: nie każdy znajomy chce przesiąść się na jakiego Jabbera, a i nie wszyscy mogą korzystać z GG – chociażby pracujący w różnych korporacjach (GoogleTalk jest wtedy rozwiązaniem idealnym). Przez JID GoogleTalka, bo mam historię w skrzynce GMailowej (i jak mnie nie ma to mogę zawsze zobaczyć co się działo). [ad#postad]Długo jednak korzystałem z Blippera (tak samo jak inne aplikacje), który miał tę niezaprzeczalną przewagę nad komunikatorem że pokazywał zdjęcia i obrazki bez konieczności wchodzenia na www. Niestety wszystkie aplikacje mają też wadę – są dodatkowymi aplikacjami, a z ich instalacją nie zawsze jest tak łatwo, szczególnie w pracy ;). Mirandy nie trzeba instalować – działa nawet z pendrive’a… Rozwiązaniem problemów byłoby coś, co wyciągnie z Blipa i pokaże w komunikatorze obrazki. Tylko co i jak?

Szukasz czegoś?

Tue, 30 Sep 2008 21:12:34 +0000

Mała ściągawka dla trafiających tutaj z Google. A z tego co obserwuję szukacie: Kilku słów o sobie – nie wiem czy “o sobie” znaczy “o tym, który szuka” czy też chcecie dowiedzieć się czegoś o mnie? Jeśli o mnie – zapraszam do strony Autor. Podobno jestem idiotą – hmm… zapewne się nie znamy (nie znam zbyt wielu idiotów ;) więc nie jestem w stanie sprawdzić i ewentualnie potwierdzić prawdziwości tego faktu… Ale może chodzi Ci o ostatnią kampanię reklamową sklepu Agito.pl? Jeśli tak – reklamy znajdziesz chociażby u ^Fanatyka. Jeśli już jesteśmy przy reklamie – kiedyś zamieściłem tutaj filmy z internetowej i w zamierzeniu wirusowej kampanii mBanku z Grzegorzem Halamą. Filmy są tutaj i tutaj Jakie możemy zobaczyć zabytki w Moskwie? W Moskwie możemy zobaczyć wiele interesujących zabytków. Coś o nich oraz o Instytucie Puszkina pisała w zeszłym roku Ania. Zaś pomniki i zdjęcia Warszawy mego autorstwa są w galeriach na Picasie – linki znajdziesz na tej stronie Interesuje Cię więcej zdjęć? Na przykład z weekendu na Mazurach? Proszę bardzo! I na koniec coś filmowego - Marcel Łoziński nakręcił całkiem niezły film o kulisach przygotowania medialnego polityków – pisałem o tym filmie w grudniu 2006 roku. W styczniu 2008 roku pisałem zaś o filmie “Rezerwat” z Sonią Bohosiewicz. Resztę Grupy Rafała Kmity znajdziecie na ich stronie, a zespół rewelersów stworzony przez Arka Lipnickiego – na stronie Voice Bandu. Jeśli jeszcze w czymś mogę być pomocny - zapraszam do kontaktu.

Blog Day 2008

Sun, 31 Aug 2008 09:00:32 +0000

Jak pisałem wczoraj, dzisiaj jest dzień bloga.. Podobnie jak rok temu przedstawiam listę blogów, które uważam za godne polecenia:

Zsyp - za styl
Nie-pracuj - Twój psychoterapeuta - obok Reklamy od kuchni mój ulubiony web-komiks tego roku
eM jak Media Marka Millera - ciekawostki ze świata mediów
Czarno na białym, czyli zapiski brand managera Piotra Jakubowskiego
Żółta koparka od ^Lavinki - bo chciałem coś lavinkowego, a przez tego bloga zacząłem zwracać uwagę na żółte koparki ;)

Blog Day 2008 - zapowiedź

Sat, 30 Aug 2008 09:50:33 +0000

Już jutro - 31 sierpnia - jest dzień bloga. Tego dnia blogerzy z całego świata zamieszczą na swoich blogach wpis, w którym polecą 5 innych blogów swoim czytelnikom. W ten sposób czytelnicy będą mieli okazję trafić na nowe, nieznane im blogi. Wymieniając się linkami blogerzy wzmocnią blogosferę, tworząc większą ilość połączeń między swoimi stronami. Mój blog weźmie oczywiście udział w tej akcji, podobnie jak rok temu. Jutro lista blogów, które polecam (a pewien klucz sobie już wymyśliłem :) A oto zasady Blog Day 2008:

Weekend na Mazurach

Tue, 22 Jul 2008 22:10:19 +0000

W weekend byliśmy na Mazurach, nieopodal miejscowości Orżyny. Kilka fotek z tego wyjazdu znajdziecie tutaj, zapraszam do oglądania i komentowania.

Firefox 3

Tue, 03 Jun 2008 20:07:29 +0000

Zainstalowałem RC1, testuję (część rozszerzeń jeszcze nie działa, ale pomaga w większości przypadków Nightly Tester Tools). Zaś Mozilla rozgrzewa sytuację PRem i biciem rekordu ilości ściągnięć nowej wersji. I tak zainstaluję “pełnego” FF3, więc co mi szkodzi - zarejestrowałem się i dostałem maila:

Dziękujemy, że zdecydowałaś/eś się wesprzeć Firefoksa

Dziękujemy za Twoje wsparcie dla naszej próby ustanowienia rekordu Guinnessa w liczbie pobrań programu komputerowego w ciągu 24 godzin. Nie zapomnij powiedzieć swoim przyjaciołom, rodzinie i kolegom, aby wsparli nas pobierając Firefoksa 3 podczas Dnia Pobierania!

iPhone w Polsce

Fri, 16 May 2008 13:44:04 +0000

Dzisiaj wszyscy w blogosferze żyją informacją Orange o tym, że w Polsce (i kilku innych krajach) będzie “later this year” oficjalnie sprzedawać iPhone’a. Dla mnie “later this year” oznacza okolice października-listopada, tak aby rynek był już dobrze nakręcony na gwiazdkę, a konsumenci uświadomieni czym iPhone jest. Pierwszy (przynajmniej dla mnie) był Marcin Jagodziński ze swoim blipnięciem i (początkowo) krótką notką. Notka szybko trafiła na Wykop (o 10:15) i już o 12 była na stronie głównej Wykopu (a przynajmniej w moim Google Readerze ;). Chwilę po publikacji notkę netto przepisała Manageria, a na blipie i w trackbackach wszystkich pokolei pojawiły się kolejne wpisy:

Nowa praca

Wed, 07 May 2008 20:00:28 +0000

Jak już pewnie niektórzy wiedzą (a niektórzy nawet rozgłaszają), od początku maja zacząłem nową pracę. Tym razem (to już piąte miejsce pracy w mojej karierze…) jest to rola projektanta w Internetowym Centrum Projektowym Agory, czyli miejsce gdzie powstają plotki, ciacha, gdzie jedzie się po bandzie i nosi groszki (ale nie tylko to).

Chór męski z akordeonem - Voiceband

Tue, 15 Apr 2008 09:49:04 +0000

Dziś rano ruszyła strona Voiceband – zespołu pięciu mężczyzn o świetnych, mocnych głosach śpiewających do akompaniamentu akordeonu. Piszę o tym, bo strona jest mojego dzieła.

Voiceband to zespół założony ponad rok temu z inicjatywy Arka Lipnickiego – członka kabaretowej Grupy Rafała Kmity, a prywatnie brata Anity :) Słyszałem na razie tylko trzy utwory (ich fragmenty są na stronie Voiceband) i szczerze mówiąc - jestem zachwycony. Dla osób mieszkających w okolicach Konstancina czy też w Warszawie: Arek wspominał mi niedawno o koncercie jaki ma odbyć się w Konstancinie w okolicach 18 maja, a 20 kwietnia mają pojawić się rano w TVNie (zapewne w „Dzień Dobry TVN”). Update: pojawili się, zobaczyć można tutaj.

Ludzie z piaskowca i Powstanie Warszwskie

Wed, 02 Apr 2008 12:46:52 +0000

Dodałem do swojego albumu w Google Picasa kilka zdjęć zrobionych wczoraj na spacerze.

Głównie zdjęcia pomników przy Pałacu Kultury i Nauki oraz kilka ujęć pomnika Powstania Warszawskiego (to mój ulubiony pomnik) - zapraszam do oglądania i komentowania.

Kolejny raz docenieni

Wed, 26 Mar 2008 18:08:11 +0000

Najpierw było sporo pracy. Później, w grudniu 2006 roku uruchomiliśmy portal BRE Banku – była konferencja prasowa, multimedialne prezentacje dla pracowników w centrali banku (ramki cyfrowe z animacjami zamontowane w windach), a później przyszły nagrody. Pierwsza – to wyróżnienie w rankingu Gazety Prawnej, w kwietniu 2007 roku. Był to pierwszy ranking serwisów internetowych spółek giełdowych – ograniczał się tylko do spółek z WIG20. Druga to październik 2007 roku i wyróżnienie w konkursie „Złota Strona Emitenta” w kategorii spółek dużych. Ten konkurs polegał na ocenie wszystkich serwisów polskich spółek notowanych na Giełdzie Papierów Wartościowych, a w jury zasiadało kilkanaście osób. A ja nawet załapałem się na zdjęcie, choć sama impreza finałowa była ~~żenująca~~ kiepska, byliśmy z ekipą na niej może z 20 minut ;-) Trzecim było wyróżnienie w WebStarFestival w grudniu 2007. Dzisiaj dotarła do mnie informacja o drugim miejscu (ale tylko pół punktu na 100 możliwych zabrakło do pierwszego) w zestawieniu 16 serwisów korporacyjnych przygotowanym przez szwedzką firmę konsultingową Hallvarsson & Halvarsson. Więcej informacji o tym rankingu:

Koniec muzyki jaką znamy?

Tue, 04 Mar 2008 12:19:37 +0000

Najpierw Nine Inch Nails opublikowali w sieci album, z którego prawie 200 fanów przygotowało swoje remiksy. NIN wybrali 21 utworów i za darmo udostępnili je w sieci, także poprzez sieć torrent. Później swoją płytę “In Rainbows” za przysłowiowe “co łaska” w sieci wydał Radiohead, na czym zarobił ponoć (wg comScore) 10 mln dolarów, sprzedając płyty za średnio $2,26, przy czym 62% osób “kupujących” płytę na stronie Radiohead zadeklarowało cenę równą zero. Dwa dni temu, drugiego marca, Nine Inch Nails wydali płytę “Ghost I-IV”. Jest to czteroczęściowy album na który składa się 36 utworów. I tutaj ciąg dalszy historii: pierwszą część (9 utworów, w formacie mp3, 320kbps, DRM-free) można za darmo ściągnąć z sieci Torrent (zespół – czyli właściwe Trent Reznor - sam opublikował odpowiedni plik na stronach PirateBay). Paczka pełna, czyli 36 utworów (również w mp3) kosztuje pięć dolarów. Obie wersje zawierają dodatkowo 40-stronicowy PDF i inne elektroniczne dodatki takie jak tapety, logotypy itp. Najdroższa opcja to trzysta dolarów za 4 płyty winylowe plus wszystkie wersje do ściągnięcia z sieci oraz ekskluzywne wydania CD i DVD. W tej opcji tylko 2500 egzemplarzy, każdy podpisany osobiście przez Reznora, z kolejnym numerem… Dwa i pół tysiąca razy $300 daje 750 tysięcy dolarów. Słabo? Według strony, na której można zamówić album - już się sprzedało! W związku z tym co dzieje się w ciągu ostatniego pół roku na rynku dystrybucji muzyki należy zadać inne pytanie – co dalej? Czy oznacza to powolny koniec koncernów muzycznych i płyt CD? Czy teraz wszyscy będą słychać muzyki ściągniętej z sieci (płatnie czy bezpłatnie to nieco inna kwestia) na swoich iPodach i odtwarzaczach mp3? Sądzę, że tak, ale dopiero za około 8-10 lat będzie można powiedzieć, że to koniec płyty kompaktowej. W Stanach iTunes Store to druga pod względem wartości sprzedanej muzyki firma, po sieci Wal-Mart. Apple pod koniec lutego podało, że mają 50 milionów zarejestrowanych użytkowników w iTunes i sprzedali ponad 4 mld piosenek. I to wszystko w niecałe pięć lat działalności. Forrester przewiduje w swoim raporcie, że do 2012 roku wartość sprzedanych płyt CD spadnie do poziomu 3,8 mld dolarów. Dla porównania: w 2011 roku połowa muzyki sprzedawanej w USA będzie sprzedawana w formie cyfrowej. Raport Forrestera przewiduje stały wzrost w ciągu najbliższych pięciu lat rynku muzyki cyfrowej o 23% każdego roku – ma to przynieść 4,6 mld dolarów w 2012 roku. Branża musi przedefiniować, co jest jej produktem - stwierdza James L. McQuivey z Forrester Research - Większość producentów spędziło lata na śledzeniu wyników sprzedaży płyt. Tak naprawdę to artyści są produktem, a nie tylko jego źródłem. Nowe dochody przypłyną z dużo bardziej nieoczekiwanych źródeł. Więcej na ten temat:

Praski "Rezerwat"

Tue, 29 Jan 2008 15:48:26 +0000

Dawno nie było nic w kategorii “film”. Bo i nie było o czym pisać, tak naprawdę. Ostatnio jako godny polecenia uważam nowy film Łukasza Palkowskiego “Rezerwat”. Film przyjemny w odbiorze, miło się go ogląda, ładne zdjęcia i muzyka. Opowiada o życiu na warszawskiej Pradze. Trochę sztampowo pokazanej (co jest nieco śmieszne w zestawieniu z fabułą – główny bohater ma za zadanie zrobić nieszablonowe zdjęcia Pragi) – odrapane kamienice, pijaczkowie szukający frajera, który da na kolejną flaszkę, nocne awantury pod sklepem i tego typu “klimaty” jakie można sobie wyobrazić. Jednak jest w tym filmie ciepło, jakiego dawno w polskim kinie nie wdziałem (ostatnio chyba w “Zmruż oczy”; wychwalane “Sztuczki” były po prostu nudne) i za to wielki plus. Minusy? Kilka się znajdzie – widać, że to debiut, historia jest trochę szablonowa (historia właściciela kamienicy, Grzesio-łobuz zmieniający się po wypadku), czasami rytm zwalnia na chwilę. W każdym razie – jak na film o fotografii znaleźć można cudne zdjęcia (odbitki w zakładzie fotograficznym, czy zdjęcia Grzesia). Oglądanie nie jest na pewno stratą czasu, a świetne kreacje aktorskie (Sonia Bohosiewicz nagrodzona w Gdyni oraz nagrodą im. Cybulskiego) tylko utwierdzają w przekonaniu, że to dobry wybór. Do tego piosenka o kwiatach w wykonaniu Marka Romana.

Miałem o tym napisać...

Mon, 28 Jan 2008 18:48:49 +0000

…ale jakoś nie mogłem się zebrać. Na blogu longway.blox.pl w zasadzie wszystko o czym myślałem na temat naszej-klasy (tak, mam tam konto i jakieś dane podane - ja się nie boję ;).

Minął rok...

Fri, 11 Jan 2008 20:12:31 +0000

…i nic się nie wydarzyło! To straszne, ale rok temu napisałem o zamiarze przepisania prokulski.net od nowa. I nic nie zrobiłem w tym kierunku konkretnego. Jedyne co mam to kompletną wizję jak ma to wyglądać i funkcjonować. Nie mam jednak na tyle samozaparcia, żeby to napisać. Co więcej - nie chce mi się nawet za bardzo poszukać gotowych szablonów Wordpressa… Ehhh… dobrze chociaż, że zechciało mi się zainstalować forum na domenie, którą dostałem od znajomych w ramach żartu. Na nową stronę jeszcze nie zaproszę, ale zapraszam na forum wysiku.

Whrrl.com - gdzie zjeść?

Sun, 04 Nov 2007 14:51:28 +0000

Whrrl.com to nowy serwis pozwalający znaleźć i oceniać miejsca, gdzie można spotkać się ze znajomymi - restauracje, puby, kawiarnie. Jeśli szukasz miejsca, gdzie można iść na obiad w Twojej okolicy (o ile mieszkasz w dużym mieście w USA - przynajmniej na razie) to znajdziesz je na Whrrl. Znajdziesz w sieci i w telefonie komórkowym, razem z lokalizacją na Google Maps.

Oczywiście jak przystało na obecne czasy serwis jest społecznościowy - pozwala tworzyć “sieć” znajomych, zapraszać nowych. Lokale oceniane i recenzowane są przez całą społeczność - daje to w miarę obiektywne oceny. Miejsca można przeglądać pod kilkoma kątami - chociażby według swojego wyboru lub wyboru znajomych. Whrrl posiada też elementy twittero-podobne, a najciekawszy z nich to rozesłanie zaproszenia do spotkania w wybranym miejscu z poziomu tego miejsca. Zgodnie z tym co piszą twórcy serwisu - niedługo będzie możliwe dodawanie nowych miejsc oraz informacji o lokalnych wydarzeniach np. koncertach czy filmach. Kilka dodatkowych informacji:

Radiohead: 10 mln USD w tydzień

Sun, 21 Oct 2007 09:59:49 +0000

…tak donosi Mashable za Wall Street Journal, a za nimi yashke i z kolei ja :) W każdym razie - Radiohead zdecydował się na upublicznienie swojej nowej płyty (nawet, nawet - bliżej temu do “OK Computer” niż późniejszych płyt, np. “Kid A”) w internecie. Nie za darmo, ale za dowolną kwotę. W ciągu tygodnia kupiono płytę ponad milion razy, łącznie za kwotę 10 milionów dolarów - średnia cena to około 8 dolarów, czyli tak jak przeciętnie kosztuje CD. Jeszcze przed premierą płyty Radiohead o podobnym ruchu poinformował Trent Reznor z Nine Inch Nails (krzycząc zresztą “tak, tak, kradnijcie moją muzykę!”) mniej więcej w tym samym czasie publikując torrent Nine Inch Nails Open Source Remixes: The Limitless Potential. Yashke pisze u siebie:

Amerykańscy studenci

Thu, 18 Oct 2007 11:04:33 +0000

Kuba Filipkowski (yashke.com) wynalazł film, który w przyjemny sposób obrazuje wyniki badań na temat amerykańskich studentów.

Badanie przeprowadzone zostało na grupie 200 studentów. Kilka ciekawych liczb (oczywiście dane średnie):

w ciągu roku amerykański student czyta 8 książek
2300 stron internetowych
i 1281 profili w Facebook (a ja nigdy tej strony nie zgłębiłem, na MySpace byłem kilka razy - w obu nie mam profilu i nie zamierzam mieć)
napisze 42 strony prac semestralnych
i 500 stron e-maili

Więcej we wpisie “A Vision of Students Today” (po angielsku).

Krytyka Krytyków.pl

Mon, 01 Oct 2007 19:37:23 +0000

Dzisiaj ruszył nowy serwis w polskiej blogosferze – krytycy.pl. Jest to (przynajmniej znany mi) jedyny tego typu serwis – łączy blogerów i reklamodawców. Taki (z bardzo dużą swobodą skojarzenia) “adserver” dla blogerów. Serwis trafił idealnie w toczącą się dyskusje o tym czy bloger może się “sprzedać” i napisać recenzję jakiegoś produktu w zamian za taki czy inny sposób gratyfikacji. Od jakiegoś czasu wiadomo, że blogerzy cieszą się znacznie większym zaufaniem niż standardowa reklama; więc dlaczego reklamodawcy nie mieliby tego faktu wykorzystać? I wykorzystują – mniej lub bardziej po cichu; czasem z tego wychodzi większa afera o tym jak jakaś firma chce przekupić wpływowych blogerów. Nie ukrywajmy jednak, że wielu blogerów chętnie zgarnęłoby “pewną sumę” za swoją – było nie było – pracę. W Polsce jest to jeszcze mało popularne (chociaż EIrena prowadząca bloga zjadamy reklamy otwarcie na TUBIE powiedziała, że m.in. ze względu na swojego bloga o reklamach pracuje w gazeta.pl, gdzie prowadzi bloga… również o reklamach), a dyskusja na temat “czy blogerowi wypada brać kasę za promocję” wciąż trwa. Jedni są za, inni są przeciw. Trochę np. tutaj. Krytycy.pl są pewnym lekarstwem na nieco chorą sytuację. Powstała platforma pozwalająca chętnym do pisania znaleźć tematy podrzucane przez chętnych do płacenia. Wydaje mi się, że interes będzie się kręcił. Serwis podpiera się etyką, która brzmi dla mnie całkowicie sensownie (w skrócie: bloger wybiera czy i o czym pisze, reklamodawca daje odpowiednie materiały źródłowe, a czytelnik wie, że ma do czynienia z artykułem sponsorowanym). Zastanawia mnie tylko co będzie jak np. o modelu telefonu napiszę, że jest super fajny i w ogóle “biegnij do sklepu i kup go natychmiast”, jednak nie działa to czy tamto, a klapka się urwała? Będzie to reklama czy recenzja? Reklamodawca będzie zadowolony? To są moje obawy – bardziej po stronie płacących niż piszących. Boję się, że reklamodawcy będą chcieli na autorach wymóc, żeby pisali tak, jak agencje reklamowe… a nie o to moim zdaniem chodzi. Tyle jeśli chodzi o blogerów. Co daje taki serwis reklamodawcom? W notatce prasowej autorzy serwisu napisali tak: “Reklamodawcy otrzymują możliwość dotarcia do swojej grupy docelowej z niezwykłą skutecznością jaką gwarantują blogi. Produkty i usługi naszych klientów opisują blogerzy, w swoim własnym stylu, na swoim blogu co gwarantuje świeżość i autentyczność przekazu. Śledząc przebieg kampanii w Krytycy.pl reklamodawca ma dostęp do informacji zwrotnych od czytelników blogów. Jednocześnie taki rodzaj kampanii daje pozytywne efekty SEO.” Sam serwis prezentuje się przyzwoicie – mało grafiki, duże literki, ładnie skomponowane. Mi się podoba. Same zasady korzystania z serwisu są jasno opisane w Poradniku Klienta i Poradniku Blogera (ten ostatni wzbogacony nawet o filmy instruktarzowe). Rejestracja przebiega szybko i sprawnie (jak się jest użytkownikiem testowym to oczywiste ;). Po rejestracji i wszelakich weryfikacjach dostajemy się (jako bloger) do swojego panelu, gdzie należy wypełnić odpowiednie dane i wybrać kampanię, w której chcemy uczestniczyć. Zastanawia mnie wartość “Ranking Krytycy.pl” (przede wszystkim jego skala – opis na blogu serwisu ~~wpis się zgubił :(~~). Wybieramy kampanię i piszemy tekst. Następnie generujemy oznaczenie, że jest to tekst sponsorowany, zgłaszamy link i… czekamy na kasiorkę :) Sprawy prawne – umowa i podatki. Twórcy serwisu pomyśleli o tym i – przynajmniej jeśli chodzi o osoby fizyczne (czyli nie-firmy) – wybrali najprostsze rozwiązanie: umowę o dzieło. Oznacza to mniej więcej tyle, że po napisaniu tekstu reklamowego dostajemy umowę (zapewne “umowa o dzieło – przygotowanie tekstu reklamowego”), rachunek i pieniądze. Nie musimy martwić się o podatek – dostajemy kasę już po potrąceniu podatku. Hmm… tylko nie doszukałem się w Regulaminie niczego o formularzu PIT-8b (bodaj na nim rozlicza się umowy o dzieło). Podsumowując: serwis przyzwoity, pomysł bardzo ciekawy. Zobaczymy jak wyjdzie w praniu. Chłopakom (twórcom) życzę powodzenia!

Halama w mBanku

Fri, 28 Sep 2007 09:25:24 +0000

mBank przygotował dwie wirusowe reklamówki z Halamą.

Komentarze mile widziane, ja się powstrzymam z racji relacji ;) Oprócz tego pojawił się też nowy spot (wzorowany nieco na wcześniejszym facecie na kanapie):

Społeczne czytanie

Mon, 03 Sep 2007 18:19:33 +0000

Od jakiegoś czasu przeniosłem się z czytnika RSS w Thunderbirdzie do Google Readera. I chwalę sobie, chociaż byłem sceptyczny (chociażby w pracy można poczytać część, a potem nie sprawdzać co przeczytałem a czego jeszcze nie; ciekawostki zawsze można oznaczyć gwiazdką i doczytać spokojnie w domu). Dzięki temu mogę się podzielić z Wami tym co czytam i uważam za interesujące - od jakiegoś czasu w linkach na blogu znajduje się coś zatytułowane Znalezione w RSSach. Poza tym coraz bardziej przymierzam się do napisania swojej strony na nowo (nawet mam już prościutki projekt graficzny), gdzie znajdzie się zapewne swego rodzaju połączenie GReadera (“Znalezione w RSSach” wyciągane RSSem :), blipa, del.icio.us, Flickra (gdzie również ulokowałem ostatnio swoje zdjęcia), muzyki z last.fm plus oczywiście starych treści z samej strony. Pomysł jest mniej-więcej taki, żeby moja prywatna strona była w pewnym sensie stroną społecznościową - ale nie uzupełnianą przez społeczność, a raczej przez moją “społeczną” działalność (bardziej precyzyjnie powinno być: moją działalność na innych stronach).

Blogowe święto

Sat, 01 Sep 2007 13:20:01 +0000

Wywołany wczoraj do tablicy przez Dominika Kaznowskiego zgodnie z zadaniem świątecznym podaję kilka linków:

Koncert Tori Amos

Sun, 24 Jun 2007 17:47:49 +0000

Tori Amos zagrała w tym tygodniu świetny koncert w warszawskiej Sali Kongresowej. Byłem, cieszyłem ucho i oko, a do tego zrobiłem kilka zdjęć. Jak znajdę chwilę czasu i odrobinę natchnienia to napiszę coś o muzyce - wiele ciekawego ostatnio (m.in. koncertowa płyta Archive, nowa płyta The White Stripes). Dla ciekawskich i precyzyjnych - lista utworów:

Body & Soul
My Posse Can Do
God
Dragon
Secret Spell
You Can Bring Your Dog
Professional Widow (remix, Tori zmienia strój)
Big Wheel
Crucify
Caught A Lite Sneeze
Cornflake Girl
Bells for Her
Glory of the 80s
Winter (solo)
Baker Baker (solo)
Putting the Damage On
Black Dove (January)
Code Red
Precious Things (pierwszy bis)
Bouncing Off Clouds (pierwszy bis)
Pancake (drugi bis)
Hey Jupiter (drugi bis)

Przeczytane dziś

Thu, 24 May 2007 18:36:24 +0000

Dzisiaj krótko - tylko linki do kilku ciekawych informacji. Najpierw na Wirtualnych Mediach:

Ja nie mam słów, ręce mi opadają (i skarpetki)… Czekam z niecierpliwością na kolejne chore pomysły PiSu. Ktoś w komentarzu do tego drugiego wpisu napisał “Juz nie wiem jak mam komentować kolejne to pomysły PIS’owcow. Nudzi im się i to zajebiście!” no i jakby nie patrzeć - taka jest prawda. Ale to jeszcze nie wszystko na dziś. “Hitem” ostatniego tygodnia był fakt, że premier Jarosław K. nie posiada konta bankowego, a pieniądze trzyma razem z mamą (na jej koncie). Nie do końca wiadomo czy powinien płacić podatki od darowizny z tego względu czy też nie… Cóż, ja mam konta w 2 bankach (w sumie to wychodzi mi, że 3 numery konta), karty debetowe i kredytową, gram na giełdzie i inwestuję w fundusze, hmm… ale to pewnie kwestia wyboru. Sprawę “braku konta” zauważyły też media zagraniczne - oto materiał z Fox News:

Zdjęcia z Kazimierza Dolnego

Sat, 12 May 2007 13:48:07 +0000

Na ~~foto.prokulski.net~~ flickr powiesiłem nowe zdjęcia - tym razem z wycieczki do Kazimierza Dolnego. Zapraszam do oglądania.

Multibank ruszył z kampanią wizerunkową

Sun, 06 May 2007 14:49:19 +0000

Od pierwszego maja w mieście widać billboardy z reklamami Multibanku. Kreacje są proste: wielki czerwony prostokąt z dwoma linijkami tekstu. Wszystkie kreacje znajdziecie na stronach Multibanku. Od 7 maja ma ruszyć kampania w telewizji – według informacji prasowej właściwie w każdej stacji telewizyjnej pojawią się spoty (są dwa – o książkach i o jazzie). Kampania skierowana jest do segmentu Mass Affluent, czyli „klientów masowo zamożnych” – w Polsce przyjmuje się za takie osoby o dochodach 5 tysięcy miesięcznie. Według różnych szacunków w Polsce jest to od 350 do 500 tysięcy osób, a roczny wzrost segmentu kształtuje się na poziomie 4-5%. Moje zdanie na temat tej kampanii jest krytyczne. Duży format niczego nie mówi, do niczego nie zachęca, a chociażby adres strony Multibanku (i logo) są za małe. Poza tym w dwóch egzekucjach jest ta sama pointa („U na ta mniejszość to większość”), co sprawia wrażenie, że agencji (BBDO Warszawa) zabrakło pomysłu. Dodatkowo w jednym przypadku znalazłem poważny błąd – reklama mówi, że co 20-ty Polak przekazuje 1% podatku na organizacje dobroczynne, co spointowane jest „W tym trzy czwarte naszych Klientów”. Zrobiłem małe badanie focusowe ;) i wychodzi na to, że wszyscy rozumieją to tak, jakby te 3/4 z „co 20-tego Polaka” było klientem Multibanku. Oznaczałoby to ni mniej ni więcej tyle, że klientów jest około 900 tys. (jeśli płacących podatki jest 24 mln co wydaje mi się realną liczbą, wziętą ze statystyk Ministerstwa Finansów za 2005 rok). Jest to nieprawdą – wg FKF.pl jest ich około 340 tysięcy… coś jest jednak nie tak… Albo z moim liczeniem (i rozumieniem) albo z tą kreacją. Jeśli zaś chodzi o spoty telewizyjne – nikt z osób, które spoty już widziały nie zwrócił uwagi na ilość pojawiających się na ekranie osób… Spot „książkowy” podoba mi się bardzo pod względem plastycznym i byłby świetny gdyby chodziło o kampanię społeczną na temat czytania książek; jednak jako reklama banku do mnie nie przemawia…

Współtworzyłem jeden z najlepszych serwisów WWW spółek z WIG20 :)

Thu, 26 Apr 2007 10:00:00 +0000

Muszę się pochwalić - Gazeta Prawna przygotowała pierwsze porównanie stron WWW spółek z indeksu WIG20. Krótko:

Liderzy: TVN i BRE Bank zdobyli tylko 17,7 na 25 możliwych punktów.
Dziewięć firm należących do WIG20 otrzymało oceny wyższe niż 3.
Strony poniżej normy ma aż 11 największych spółek warszawskiej giełdy.

Przeczytaj cały artykuł w Gazecie Prawnej lub w portalach TVN24.pl i Money.pl PDF do ściągnięcia.

Euro 2012 i.. giełda

Wed, 18 Apr 2007 17:56:03 +0000

Kilka minut przed południem dowiedzieliśmy się, że Polska razem z Ukrainą będą organizować Mistrzostwa Europy w piłce nożnej w 2012 roku. Wszyscy o tym piszą i pisać będą, więc ja sobie daruję. Za to ciekawostka - jak reagują rynki finansowe na informacje sportowe?

TVN24.pl

Mon, 19 Mar 2007 20:22:32 +0000

Wyrósł dzisiaj na internetowym rynku informacji nowy poważny konkurent dla Onetu, Gazety.pl, WP i Interii – TVN24 uruchomił vortal informacyjny z prawdziwego zdarzenia. Dla mnie to dobra wiadomość – TVN24 jest moją ulubioną stacją telewizyjną (prawie niczego innego w TV nie oglądam) i to właśnie z tej stacji czerpię informacje o tym co dzieje się na świecie. W internecie do tej pory był to przede wszystkim Onet i czasem Gazeta (nie licząc portalów biznesowych – tutaj moim ulubieńcem jest Puls Biznesu i… forum Parkietu, przynajmniej jeśli chodzi o giełdę) plus MediaRun i blogi związane z marketingiem. TVN24.pl ma szanse na zdetronizowanie wiadomości.onet.pl A sam serwis? Przyjemny, chociaż nie wybija się niczym szczególnym. Mam wrażenie, że układ to zbieranina różnych dobrych wzorców, ale bez przemyślanej do końca koncepcji i „świeżego oka” – ot, ktoś poskładał klocki, nieco je szlifując. No, ale serwis z newsami nie ma być ładny czy przeładowany grafiką – ma być aktualny. Aktualności na pewno nie zabraknie. 40 osób pracujących w redakcji vortalu, zaplecze medialne w postaci wiodącej stacji telewizyjnej. Na brak newsów na pewno nie można narzekać. Co mi się nie podoba? Trochę chyba układ i przeładowanie głównej strony. Szczególnie jeśli chodzi o materiały autotematyczne – ścinki i wpadki telewizyjne. Fajne to jest, ale z okazji urodzin stacji lub jako marketing wirusowy, ale nie jako podstawowa treść serwisu na głównej stronie. A takie odniosłem wrażenie. Innych grzechów na razie nie widzę – może wyjdzie coś więcej w praniu. Co mi się podoba? Pokaźna liczba materiałów wideo (ale to nie dziwi – w końcu to telewizja) i fakt, że na dzień dobry dostajemy videocasty. RSS to norma, więc wielkim grzechem byłoby pominięcie ich przy budowie nowego serwisu. Średnio podobają mi się blogi – mam wrażenie, że są wymuszone na dziennikarzach TVN24 i sami autorzy nie do końca są szczęśliwi z powodu kolejnego obowiązku. Może się rozkręcą, co byłoby bardzo miłe – chętnie poczytam persony piszące do TVN24.

AMDS Films

Sun, 11 Mar 2007 19:50:58 +0000

Czyli moje znalezisko na YouTube z krótkimi filmami rewelacyjnie zmontowanymi z Terminatora, Robocopa itd. Trzeba koniecznie zobaczyć! Klasa dla mnie to wszystkie trzy części Neo (tego z Matrixa) czekającego na pociąg…

Oskarowe nominacje i filmy

Fri, 23 Feb 2007 17:35:55 +0000

U RAFiego przeczytałem króciutki wpis (właściwie tylko link) o serwisie poświęconym tegorocznym Oscarom. Takie prawie Oscary w wersji Web2.0 ;) Jest sobie lista, jest głosowanie. I co najciekawsze - są linki do torrentów z filmami (lub wyszukiwaczki tychże torrentów). Piękna inicjatywa ;) Ciekawe czy dotrwa do rozdania nagród? Swoją drogą - ciekawe czy w dobie web2.0 panoszącego się wszędzie kiedyś zniknie coś takiego jak Akademia Filmowa i Oscary przyznawać będą np. internauci? Coś jak ranking na stronach IMDB.com, ale dla filmów z danego roku. Plus filmy do ściągnięcia (nawet za opłatą).

Królicze filmy w 30 sekund

Sun, 11 Feb 2007 22:54:25 +0000

Że ja tego wcześniej nie znałem… Przykład - “Lśnienie”:

A więcej na Angry Alien.

Jestem pasożytem - używam AdBlocka

Sun, 04 Feb 2007 17:51:23 +0000

Zrobiło się w polskiej blogosferze głośno o pewnej akcji. Akcja sama w sobie jest… hmm… idoityczna? Nikt mnie nie zmusi do oglądania reklam (a przecież powinno mi na oglądaniu ich zależeć - w końcu pracuję w marketingu! ot dwulicowy ze mnie pasożyt). Więcej pisał nie będę - wszystko napisali inni, zapraszam więc do lektury blogosfery:

Wieczorny update: Jeszcze linki: 7pl.pl, mastonmp.pl/blog I kolejne: dyskusja na pl.comp.www, komentarze na wykopie - tu i tu.

Ryszard Kapuściński nie żyje

Tue, 23 Jan 2007 23:31:07 +0000

Tytuł wystarczy za wszystko – ten kto czytał Kapuścińskiego wie kim był, jakie miał poglądy. Ja przyznam szczerze nie czytałem. Pewnie przeczytam (przepraszam za szczerość, ale wydawnictwa pewnie będą musiały zrobić dodruk książek…) – chociażby z ciekawości – zawsze chciałem, nigdy nie mogłem się zabrać. Ale z masą książek tak mam, więc w zasadzie nic dziwnego. Ten wpis ma być jednak o czymś innym. O klasie Grzegorza Miecugowa i klasie TVN24. To właściwie jedyna stacja jaką oglądam (nie słucham radia – mam włączony telewizor robiąc wszystko inne) w telewizji, czasem jakiś film na innym kanale. O 22 zaczęło się „Szkło kontaktowe”. Dziesięć minut później na „czerwonym pasku” pokazała się informacja „Ryszard Kapuściński nie żyje”. Panowie natychmiast przerwali temat, przestali wytykać politykom ich błędy i idiotyzmy. Porozmawiali chwilę o Kapuścińskim, Miecugow wspominał wywiad jaki zrobił do prowadzonego przez siebie programu „Inny punkt widzenia”. Przerwa na reklamę. Po przerwie krótki komentarz i zakończenie „Szkła…”, a stacja nadaje powtórzenie wywiadu. Niby proste, niby nic specjalnego. Ale moim zdaniem to jedno z piękniejszych zachowań na jakie mogła sobie pozwolić telewizja. I znakomita reakcja – 5-10 minut i zmieniamy ramówkę. Z to cenię TVN24, za to cenię dobrych dziennikarzy. Jutro rano będą gazety na czarno. Każdy portal internetowy o tym napisze, wszyscy będą wspominać, Onet standardowo wystawi „Księgę kondolencyjną” (świetny sposób na nie-zapychanie ogólnego forum). Ale klasy TVN24 w moich oczach nic nie pobije.

Projekt oddany!

Mon, 18 Dec 2006 21:11:54 +0000

Po około 13 miesiącach pracy - mniej lub bardziej ciężkiej (w zależności od momentu) – oddałem projekt. Projekt, nad którym pracowaliśmy w dość dużym gronie. Projekt nowego, od początku przygotowanego i napisanego portalu BRE Banku. Najpierw była analiza. Dogłębna analiza SWOT plus benchmark serwisów banków w Polsce i zagranicą (głównie w USA) – bodaj 10 serwisów przekopanych dokładnie, z każdego wyjmując wszelakie za i przeciw, ciekawe rozwiązania, interesujące pomysły. Benchmark okraszony lekturą raportów Forrestera, wzajemnym inspirowaniem się „zespołu projektowego”, burzami mózgów. Potem był drugi etap analizy – spotkania z pionami biznesowymi banku. Departamenty odpowiedzialne za sprzedaż, za analizy rynkowe, za kadry i za marketing. Przy okazji nasze wymysły z pierwszej części analizy rozbijały się o ścianę, albo dostawały nowych skrzydeł. Ludzie związani z „biznesem” i mający mniejsze pojęcie o internetowych trendach inspirowali w różny sposób. Po tych analizach przyszła pora na podsumowanie. Powstał przeszło 100-stronicowy dokument opisujący dokładnie co i jak należy zmienić i poprawić. Oraz co zrobić od początku. Po małej przerwie nadszedł czas na przygotowanie do programowania i tworzenia serwisu. Przeszliśmy bardzo szczegółową analizę wszelakich narzędzi i funkcjonalności („W tym narzędziu ma być 5 pytań czy 6?”, „dokumenty publikowane w CMSie mają mieć załączniki binarne? Ile maksymalnie?”, „Co ma trafiać do RSS? Z załącznikami?” - tego typu pytania to codzienność przez około półtora miesiąca), przy okazji zaczepiając o serwisy nie tylko bankowe, ale też np. life-stylowe. Kolejny krok to projekt graficzny. W sumie powstało pewnie ze 40 obrazków, które szlifowaliśmy w sumie około 3 tygodni. Nie pamiętam już ilości „wariacji na temat”… Ostatnie dwa miesiące to wytężona praca developerska. A dla nas w banku – przygotowanie i opiniowanie tekstów, kontrola merytoryczna, rysowanie schematów… ogólnie – poganianie tzw. „biznesu” („a bo marketing nie ma co robić i zawraca głowę jakimś Internetem…”). Nie było łatwo i – przyznam szczerze – to był najbardziej męczący etap projektu. Przed dzisiejszą premierą trzeba było wprowadzić nowe treści, przetestować narzędzia i funkcjonalności, zachować niektóre elementy ze starego portalu, połączyć je z nowymi. Trzy tygodnie siedzenia w pracy minimum po 3-4 godziny dziennie więcej. Ostatni tydzień to przygotowanie promocji portalu – wewnętrznej i zewnętrznej. Przygotowanie dzisiejszego otwarcia i konferencji. Ostatnie szlify w sobotę, niedzielę… Dziś około 11:30 ruszył nowy portal BRE Banku.

Lubelski Full

Sun, 17 Dec 2006 19:58:24 +0000

Kiedyś było już coś “klasycznego”, czas na kolejną wspaniałą produkcję:

Spieprzajcie, dziady

Mon, 23 Oct 2006 18:13:15 +0000

Dziś będzie tylko link.

Jak powstaje serwis internetowy?

Sun, 27 Aug 2006 12:43:41 +0000

Przez ostatnie dwa miesiące pracowałem nad jubileuszowym serwisem BRE Banku. Poniżej kilka słów o tym jak powstawał ten serwis – odzwierciedla to mniej więcej standardowy sposób pracy przy budowie każdego właściwie serwisu. Pierwszym etapem było zdefiniowanie co tak naprawdę chcemy pokazać, w jaki sposób, jakie mają być funkcjonalności. Główne założenie to spójność z całą kampanią towarzyszącą obchodom 20-lecia BRE Banku. Nad koncepcją kampanii prace trwały o wiele dłużej, serwis internetowy ciągle się w nich przewijał – czekaliśmy tylko na ostateczną formę kampanii. Po zatwierdzeniu linii komunikacji, wstępnych projektów graficznych layoutów prasowych można było ruszyć z przygotowywaniem serwisu. Początkowo planowaliśmy dwa oddzielne serwisy – dla Klientów Grupy BRE oraz dla jej pracowników. Oba miały mieć kilka elementów wspólnych, część była jednak rozbieżna. I tak: Serwis dla Klientów Serwis ogólnodostępny, z możliwością publikacji i edycji treści (CMS), zawierać miał takie elementy:

Statystyki

Tue, 01 Aug 2006 19:27:35 +0000

Do tej pory nie publikowałem statystyk oglądalności mojej strony (patrząc na nią jako dwie osobne - blog i www). No to opublikujmy :) Oto wykresiki:

Czy to dużo, czy to mało - nie mnie oceniać. Jeśli chcesz to jakoś skomentować - zapraszam.

Klikadełko

Fri, 28 Jul 2006 18:26:15 +0000

W ciągu ostatnich dwóch dni na Wykopie trafiłem na dwa ciekawe linki. Pierwszy to http://blog.outer-court.com/click2/ który na podstawie kliknięć w regularne (w miarę) kształty rysuje “mapę kliknięć”. Ciekawie to wygląda dla kliknięć w - bądź co bądź - kwadraty albo kółka. Drugi link to http://www.clickdensity.com/ - tym razem jest to serwis, który pozwala na stworzenie dokładnie takiej samej “mapy kliknięć” dla gotowej strony. Zawsze chciałem takie badania przeprowadzić. To gdzie ludzie klikają daje według mnie najlepszą i najbardziej bliską prawdy informacje o tym czego na stronie szukają i jak reagują na nawigację. ClickDensity pozwala na darmowe wypróbowanie swojego narzędzia, co nie omieszkam zrobić. Odwiedzajcie więc www.prokulski.net i… podróżujcie po stronie, a ja sobie pooglądam i przedstawię za jakiś czas wyniki klikalności na głównej stronie.

Google - Behind the screen

Sun, 16 Jul 2006 12:48:46 +0000

Za Wykop.pl znalazłem coś takiego - film o Google. Poniżej 5 kolejnych części:

a całość w AVI (jakieś 350mb) tutaj.

IV RP zbliża się!

Wed, 12 Jul 2006 19:25:11 +0000

Już Wirtualne Media oraz Onet o tym napisały, a ja powtórzę - Polsat zrezygnował z emisji zakupionego za 30 tys. dolarów serialu dokumentalnego tudzież reality-show o gejach w armii. Ponoć na wniosek telewidzów… A jak ja to widzę?

Przenajświętrza Krajowa Rada dała Polsatowi jasno do zrozumienia, że narobi smrodu i nałoży kary na stację, jeśli ta wyemituje ów serial. No szkoda tylko, że mówi się o protestach widzów, którzy jeszcze nie widzieli programu… No i program miał być po 23, więc w paśmie “rzeczy zakazanych” ;) Baaardzo dziwne. Dziwnie też związane ze zmianami w TVP - krótsza Panorama, zdjęcie z ramówki “Wielkiej Gry” (teleturniej od 1962 roku w telewizji! - nie żebym był fanem i oglądał, ale jednak to jakiś symbol i póki ma go kto prowadzić i są widzowie i chętni do udziału to powinien trwać w TV) i “Linii specjalnej”, propozycje “nie do odrzucenia” dla Moniki Olejnik czy też więcej programu Pospieszalskiego… Dziwnie, że mamy nowego premiera, brata bliźniaka prezydenta. Nie podoba mi się ten kraj, a raczej ludzie, którzy nim kierują.

Epic 2014

Fri, 23 Jun 2006 18:59:16 +0000

“In the year 2014, The New York Times has gone offline” “W 2014 New York Times zrezygnował z obecności w Internecie. Czwarta władza chyli się ku upadkowi.” - ośmiominutowy film-wizja tego, jak może wyglądać internet (ale chyba nie tylko internet…) za kilka lat, biorąc pod uwagę kierunki jakie wytycza trend web2.0. Do tego jeszcze to. Dla mnie momentami lekko przerażające, taki nieco orwellowski Wielki Brat… Swoją drogą - chyba jeszcze raz przeczytam “1984”, bo świat coraz bardziej przypomina mi tą wizję…

Zdjęcia z Wilna

Tue, 20 Jun 2006 22:35:27 +0000

Właśnie powiesiłem na ~~foto.prokulski.net~~ flickr zdjęcia z wypadu do Wilna na początku maja. Zapraszam do oglądania.

Zaczęło się!

Thu, 11 May 2006 13:09:00 +0000

Od wyborów, które wygrał PiS (zarówno parlamentarnych jak i prezydenckich) wiedziałem, że wcześniej czy później do tego dojdzie. Mniej więcej w momencie ataków typu dziadek w Wermachcie spodziewałem się, że nie dojdzie do koalicji PiS-PO (w sumie szkoda, moim zdaniem, bo PO kontrolowałoby dyktatorskie zapędy PiSu), a kwestią czasu będzie przehandlowanie stołków z Samoobroną. No i się ziściło. Chciałem, żeby ten blog był apolityczny, ale chyba się nie da, skoro przerażają mnie zapędy rządzących i szczerze obawiam się o wolność w powstającej IV RP. Na początek mamy: Cenzurę Internetu w szkołach Zakaz sprzedaży alkoholu w Dniu Dziecka. Czekam na to co dalej… Update 24 maja: A jednak… - prohibicja w Dzień Dziecka wprowadzona…

v7ndotcom elursrebmem

Thu, 16 Feb 2006 13:59:32 +0000

Niezły tytuł, co? ;) Ale jaśniej - v7ndotcom elursrebmem - to fraza, “na którą” trzeba spozycjonować bloga, aby wygrać 4 tysiące dolarów za pierwsze miejsce w wynikach Google. Ot po prostu - nowy konkurs na pozycjonowanie. Konkurs zostanie rozstrzygnięty 15 maja 2006. Aktualne wyniki można zobaczyć wpisując hasło v7ndotcom elursrebmem w wyszukiwarkę, albo klikając tu: v7ndotcom elursrebmem, a regulamin na stronie v7n.com. Ja na razie nie biorę udziału (a przynajmniej nie zarejestrowałem się… jeszcze ;).

O ambicji i nowej stronie

Thu, 12 Jan 2006 08:39:53 +0000

Od kilku tygodni chodzi mi po głowie pomysł stworzenia zupełnie od początku nowej strony. Oczywiście swojej strony, bo jakiej by innej? Była by to już bodaj piąta wersja układu graficznego (wiszącego w sieci, bo projektów, które publicznie nie były prezentowane było co najmniej dwa razy więcej). Jednocześnie ze zmianą graficzną mam zamiar wprowadzić całkowicie nowy sposób zarządzania treścią (czyli krótko mówiąc: napisać własnego CMSa). Oto kilka założeń koncepcyjnych:

całość oparta na SQLowej bazie danych;
podział tak jak do tej pory na kilka działów (ostatecznie najprawdopodobniej pozostaną cztery: opowiadania, publicystyka, fotografia oraz blog plus mniej lub bardziej stałe dodatki typu CV);
możliwość komentowania każdego z tekstów;
możliwość wydruku każdego z tekstów (i fotografii), być może też zapisania go (tylko teksty) w formie PDFa (nie znalazłem jeszcze odpowiedniego skryptu), może też przesłanie tekstu (i – być może – fotografii) na wskazany mail (coś w rodzaju “poleć znajomemu”);
część elementów (np. mapa strony) generowana byłaby 100% dynamicznie;
przyjazność dla wyszukiwarek (słowa kluczowe i podobne rzeczy w meta-tagach), być może w połączeniu z przyjaznymi ścieżkami (przy użyciu mod_rewrite serwera WWW);
100% zgodności z XHTML wspartym CSS, co oznaczałoby całkowite oddzielenie treści od warstwy prezentacyjnej, a tym samym pozwoliłoby na przygotowanie różnych “skórek” strony.

Ostatni punkt jest na tyle istotny, że taki system byłby stosunkowo przenośny na inne strony o podobnym charakterze. Na razie prace są na etapie drugiego projektu graficznego i przygotowywania struktury bazy danych. I tutaj wkraczamy w element pierwszy tytułu tego wpisu – ambicję. Ja wiem, że takich systemów jest pewnie kilka i wystarczy tylko odpowiedni zainstalować i dodać to czy owo. No i ok, niech sobie będą – w niczym mi nie przeszkadzają. Chcę jednak taki system napisać tak naprawdę dla siebie, na swoje własne potrzeby. Chcę się zmierzyć z dawno porzuconą materią PHP, z lekko liźniętą materią SQL. Chcę też zastosować kilka rozwiązań, o których nie myślałem wcześniej, a wydają mi się standardem we współczesnym WWW (owo “poleć znajomemu”). Zapewne przygotowania potrwają jeszcze… kilka miesięcy. Zapewne nie odbije się to znacząco na oglądalności mojej strony. Na pewno za to przyniesie mi frajdę i satysfakcję, kiedy wszystko pójdzie tak, jak to sobie zaplanowałem. A co dalej?, co później? Później (tak po około 2-3 tygodniach) stwierdzę, że jestem niezadowolony, że to czy owo można poprawić czy też napisać inaczej. A co więcej (i tego w tym momencie się obawiam – tworzę projekt „pod siebie”) – że można było to napisać lepiej i bardziej skalowalnie, bardziej przenośnie; z możliwością edycji wszystkiego przez taki czy inny CMS. No cóż… może wtedy zabiorę się za rozbudowę? Na tym polega właśnie rozwój.

Podcasting

Thu, 05 Jan 2006 22:24:43 +0000

Podcasting to słowo, które zrobiło furorę w Internecie w 2005 roku. Nie tyle samo słowo, co to co za nim się kryje. A co się kryje? Najpopularniejszy podcasting to dźwięk (nagrania głosowe) dodawany do blogów, czy wręcz blogi prowadzone tylko w takiej formie. Świetna sprawa, jak na to popatrzeć boku. Autor tworzy nagranie (w formacie mp3, wystarczy słaba jakość kodowania - powiedzmy CBR 96kbps @ 22kHz), umieszcza je w Internecie i… to wszystko. Użytkownik serwisu w dowolnym momencie może sięgnąć po to nagranie, ściągnąć do swojego komputera (bądź - co bardziej popularne - odtwarzacza MP3) i odsłuchać w wybranej przez siebie chwili (bądź kilku chwilach, tudzież kilku minutach - wszystko oczywiście zależy od długości nagrania). Coś jak “TV on demand”, o którym to pomyśle kiedyś się rozwodzono, a który to pomysł jeszcze nie jest wystarczająco popularny; chociażby ze względu na przepustowość łącz i wielkości plików video (10 minutowe nagranie w mp3 przy parametrach jak powyżej to około plik 3,5-4MB); zresztą pierwsze video-blogi już w Internecie istnieją, TVP pozwala na ściągnięcie ze swoich stron nagrań serwisów informacyjnych (Teleekspressu, Panoramy i Wiadomości), Onet.pl udostępnia fragmenty materiałów reporterskich TVN24 w swoich serwisach z wiadomościami. Ostatnio TVN24 na stronach transmituje na bieżąco dźwięk z przekazu (i czasem trudno tam się dobić). O zaletach nie muszę chyba mówić - najważniejsza to niezależność od nadawcy. Powiedzmy, że ktoś (tak jak ja) jeździ do pracy i z pracy w sumie około godziny dziennie. W ciągu dnia nie mam czasu albo możliwości żeby słuchać radia (zresztą - ja nie mam nawet odbiornika radiowego…), a jeśli się już ten czas znajdzie to najczęściej nie ma w danym momencie audycji, która mnie interesuje. Nie wspominając już o audycjach nadawanych w godzinach nocnych. Ściągamy więc sobie z odpowiedniego serwisu interesujący nas podcast, wrzucamy do przenośnego odtwarzacza mp3 i już można nadrabiać zaległości w drodze z/do pracy (ale oczywiście nie tylko). Dodatkowa zaleta to dowolny wybór z archiwum (o ile oczywiście serwis to umożliwia), brak reklam (o tym za moment), i coś czego radio nie ma i nie będzie nigdy miało - treści nie są ulotne; można do nich wrócić zwyczajnie przewijając utwór, jak taśmę w magnetofonie. Marzyłoby mi się, żeby Trójka “produkowała” podcasty z moimi ulubionymi audycjami (chociażby “Sjestą” Kydryńskiego, “Trójkowym ekspresem” czy “Mini-maxem”)… a wracając do wiadomości - TVN już dawno bombardowałem mailami o udostępnienie na swoich stronach zapisów Faktów (19 to dla mnie zła pora na oglądanie wiadomości), niestety jak na razie bezskutecznie (i oczywiście bez odpowiedzi). Chętnie też ściągałbym sobie przed wyjściem z pracy informacje z pełniejszego serwisu (z komentarzami, wywiadami) radiowego i przesłuchiwał go w drodze do domu. W niektórych przypadkach (mam na myśli audycje radiowe) problemem mogą się okazać niestety prawa autorskie i wszelakie tantiemy, ZAIKSy itp. Wspomniałem o reklamie i jej braku. Na razie. Marketerzy jeszcze nie wykorzystują podcastów do przekazywania treści reklamowych. Zaczęło się to już dziać w sferze kanałów RSS, ale z podcastami reklamowymi się nie spotkałem. A przecież to żaden problem wpleść w określoną audycję mały (literatura fachowa mówi o “spotach” długich na 15 sekund) przerywnik reklamowy, na zasadzie identycznej z reklamą radiową. Co więcej - jeśli treść nagrania jest autorstwa określonej firmy to wcale nie jest powiedziane, że reklamy muszą być oznaczone i oddzielone od normalnego programu (tak jak to ma miejsce w przypadku nadawców radiowych czy telewizyjnych, bądź prasy). Zresztą - wierzę, że cenny merytorycznie przekaz jest w stanie zbudować chociażby zaufanie do marki i lojalność użytkowników serwisów WWW. Powstaje pytanie - dla kogo jest to “medium” (a raczej “forma przekazu”)? Wg badań (nie pamiętam szczegółowych danych, a nie mam ich pod ręką więc nie przytaczam) wszelakich - dla młodych, aktywnych ludzi. To ludzie w wieku powiedzmy 16-34 lata są podatni na nowinki techniczne i to najwięcej z nich korzysta z Internetu i odtwarzaczy mp3. Ten przedział wiekowy (nieco zawyżony) to jednocześnie najbardziej zainteresowani kanałami RSS oraz blogami. I te trzy formy internetowego przekazu uważam za najbardziej interesujące dla ludzi z marketingu, szczególnie marketingu produktów kierowanych do takiej grupy docelowej. Czy trzeba dodawać więcej? Kiedy zatem ruszy podcasting na moim blogu? Na razie nie prędko - ja jednak wolę pisać (co i tak jak widać robię rzadko), a i obecnie możliwości technicznych nie mam za dużych. Prędzej w tym momencie pojawiłyby się nagrania video, tylko kto chciałby oglądać moją gadającą głowę?…

Jak to się stało?

Wed, 26 Oct 2005 16:45:49 +0000

Jestem w lekkim szoku! Wszystko co wiem o pozycjonowaniu właśnie wzięło w łeb, bo drugie miejsce w Google ma strona, która (na pierwszy rzut oka) nie zawiera frazy, o którą pytamy Google. O co chodzi? Proszę kliknąć i sprawdzić na własne oczy: http://www.google.pl/search?hl=pl&q=ptasia+grypa&lr=lang_pl Chociaż z drugiej strony pod hasłem “kretyn” można było dotrzeć przede wszystkim na strony Sejmu poświęcone A. Lepperowi i R. Giertychowi. Wniosek z tego prosty - linki (przede wszystkim tekst pod jakim się znajdują) potrafią zdziałać cuda.

9 Songs

Sun, 18 Sep 2005 16:26:27 +0000

Dziewięć piosenek… może nawet więcej - nie liczyłem. W każdym razie w 9 songs poza takimi sobie piosenkami, całkiem niezłymi zdjęciami i dużą ilością nijakiego, ale za to pokazanego bardzo dosłownie seksu nic nie ma… Totalny nihilizm. Wszystko zamknięte w nieco ponad godzinnym dziele powstałym chyba tylko po to, żeby zaszokować owym dosłownym seksem. Zresztą - seks ów już chyba tak nie szokuje (przynajmniej mnie - prasa pisała nieco inaczej) - po Ostatnim tangu w Paryżu kilkadziesiąt już właściwie lat temu i Intymności kilka lat temu nic w kinie mnie nie zaskoczy. Przynajmniej w sferze pokazywania aktów seksualnych (bo wg mnie trudno nazwać to miłością)… Film, fabuła… a raczej jej brak. Jest sobie para, która poza spędzaniem czasu w łóżku i na koncertach nie ma innego życia. Ktoś z krytyków napisał w prasie, że on zaczynają się kochać, ale zaczynają od seksu - najpierw łóżko, potem być może uczucie. Chyba tak właśnie jest, chociaż nie bardzo można do tego dojść oglądając film. Mnie ten film wprowadził w dziwny nastrój - nastrój nihilizmu i nieobecności. Znudził mnie, ale nie zniesmaczył. Ot - normalne manewry łóżkowe pokazane na ekranie. Seks, kreseczka, koncert, zdjęcia Antarktydy, koncert, seks… taka mniej więcej kolejność ujęć. I nic poza tym! Żadnego sensownego dialogu, żadnej akcji, nawet żadnej zdrady czy morderstwa ;). Nic. Chociaż z drugiej strony - czasem właśnie tak to wszystko wygląda. Niestety.

Broken Flowers

Sun, 18 Sep 2005 16:24:02 +0000

Nowy film Jima Jarmuscha… jest jak typowy, doskonały film Jarmuscha. Wolno płynąca opowieść, specyficzny klimat i narracja. Świetna, choć banalna historia - ot, Don Jonhston (mój ulubiony - szczególnie po Między słowami - ostatnio Bill Murray) dostaje tajemniczy anonim, z którego dowiaduje się, że jest ojcem 19-letniego chłopca. Tylko kto jest matką? Bo Don od kobiet nie stroni(ł) całe życie… Przyjaciel Winston - domorosły detektyw - namawia Dona, aby pojechał na poszukiwanie autorki listu. Przygotowuje całą podróż i prawie wpycha Dona do samolotu. Co dalej? Trzeba zobaczyć. W każdym razie - dalej trochę różowego koloru, maszyny do pisania i kobiety - różne kobiety, ale coś kiedyś musiało je łączyć, skoro Don nimi się interesował. Przynajmniej tak sądzę - uważam bowiem, że jednak szuka się zawsze jakiegoś podobnego typu partnera. Ten film gdzieś w dalekim planie ukazuje jak ludzie się zmieniają z biegiem czasu i tym, co w życiu ich spotyka. Ale nie Don. Broken Flowers to nieco mniej typowe kino drogi. Droga zwykle prowadzi do przemiany bohatera. Nie tutaj, nie u Jarmuscha. Reżyser delektuje się opowiadaniem historyjki, a nie samą historią. Film jest znakomity - nieinwazyjnie wchodzi do głowy, nieco bawi, nieco zastanawia (świetna “dysputa” filozoficzna przy kanapkach na końcu filmu) ale przede wszystkim jest rozrywką, popisem prowadzenia opowieści dość banalnej, tak naprawdę.

Videodrome

Fri, 19 Aug 2005 07:51:47 +0000

Dokładnie pomiędzy 14 a 22 maja 1999 roku obejrzałem jakąś 1/4, może 1/3 filmu Videodrome Davida Cronenberga. Film był w polskiej telewizji, jakoś wieczorem, a ja standardowo zasnąłem podczas emisji. Skąd wiem, że było dokładnie tak, a co więcej - z tak precyzyjną dokładnością? Otóż właśnie na przestrzeni tego tygodnia zapisałem sobie w takim zeszycie (nazywam go “little blue book with my poems in” parafrazując słowa z “The Wall”) pomysł na opowiadanie, który podczas emisji “Videodrome” przyszedł mi do głowy. Odnalazłem to przed chwilą i… niestety pomysł jest niedokończony; urywa się dokładnie w tym miejscu, do którego pamiętam go od lat! Dlaczego nie napisałem tego opowiadania? Chyba dlatego, że pomysł zbiegł się z filmem w TV (szczerze mówiąc nie wiem co było pierwsze – podobnie miałem z Oczami szeroko zamkniętymi i nawet bardziej Equilibrium) i widząc film uznałem, że nie można popełniać plagiatu (choć swoją wersję „Choinki u Chrystusa” Dostojewskiego mam rozpracowaną do końca, tylko siąść i przepisać z głowy), a poza tym będzie to wtórne. Po tym przydługim wstępie należy się sedno sprawy: po co ten wstęp i ten wpis? Ano po to, że wreszcie, po przeszło sześciu latach (!) zobaczyłem „Videodrome” w całości. Nie byłoby plagiatu (…i dlatego nie zdradzam tutaj istoty tego pomysłu na tekst). Film - rewelacja (chociaż nie jest to arcydzieło - późniejszy eXistenZ znacznie lepszy). I co najgorsze - bardzo prawdopodobny w przyszłości. Świat przestał być tylko realny, namacalny. Poza realnością jest też ta wirtualna sfera - jeśli nie ma cię w TV bądź Internecie, to znaczy że nie ma cię wcale. Co więcej - sfera wirtualna wystarczy! Jeśli jesteś w TV i/lub Internecie to znaczy, że istniejesz na pewno w rzeczywistości. Jaka to blaga! Jedna wielka blaga! W takim razie można pokusić się o stwierdzenie, że wszystko można wykreować jedynie wirtualnie. Sądzę, że gdyby zjawił się ktoś kto zechciałby pokazać światu jak łatwo poddać społeczeństwo wirtualnej manipulacji (tj. manipulacja byłaby prawdziwa, ale odbywałaby się w całości jedynie w wirtualnym świecie) mógłby to bardzo łatwo osiągnąć. Wszystko jest kwestią kosztów. I precyzji oraz dobrej reżyserii. Załóżmy sytuację taką jak w Polsce w tym momencie: kampania przed wyborami prezydenckimi. Wymyślamy sobie fikcyjnego kandydata. Z mediami i wyborcami kontaktujemy się jedynie za pośrednictwem elektroniki: Internet oraz gotowe nagrania audio i video dostarczane redakcjom. Problemem mogłyby być akcje typu konferencje prasowe. Bo jestem przekonany, że wszelakie wiece można by obejść. Wystarczy sztab ludzi, jakiś fikcyjny (choć w tym momencie rozwoju techniki jeszcze jednak istniejący realnie) człowiek-kandydat, który użyczyłby swojej twarzy i głosu (niekoniecznie musi to być ta sama osoba) i odpowiednia promocja. Dużo promocji, dużo public relations i jeszcze więcej marketingu (głównie w sensie reklamy - billboardy, spoty telewizyjne i radiowe). Mogę iść o zakład, że odpowiedni program podparty odpowiednio medialnym (odpowiedni głos, wygląd, zachowanie, słowa, gesty i mimika) i wyszkolonym człowiekiem byłby w stanie zgromadzić 10-15% poparcia społeczeństwa. Skoro może istnieć bank (jakże wymagająca zaufania instytucja!) nie mający placówki to może też zaistnieć nieistniejący kandydat na prezydenta. Coś działającego w drugą stronę (świat wytworzony wokół nieświadomego człowieka) to The Truman Show. Sądzicie, że jest to tylko niemożliwa do realizacji (w tym momencie) fikcja filmowa?…

Nowa praca i nowe miasto

Tue, 26 Jul 2005 21:26:13 +0000

Od prawie trzech tygodni pracuję w nowym miejscu. I to nie tylko w “nowym zakładzie pracy” tudzież w “nowej firmie”, ale całkowicie w innym miejscu. Zmieniłem z dniem 4 lipca (heh… może to zbieg okoliczności, ale tak na prawdę w tym momencie właśnie zauważyłem, że to właśnie 4 lipca! A nie tak dawno oglądałem po raz kolejny Born on the 4th of July, ale mniejsza o to) miejsce zamieszkania, a nieco później zacząłem pracę w centrali pewnego banku. I teraz już nie mieszkam w moim ukochanym Krakowie, a w Warszawie… Na razie tylko “Warszawie” - bez żadnych epitetów. Czy lepiej? Jeśli chodzi o pracę to na pewno - jestem osobą odpowiedzialną (przede wszystkim) za treści ukazujące się na stronach portalu tegoż Bardzo Wielkiego Banku ;) oraz za kilka innych spraw (ostatnie dwa dni w pracy to - nie licząc pomniejszych spraw - analiza rocznych statystyk portalu; wcześniej przygotowanie nowego layouty newslettera). Podoba mi się. Podoba mi się praca, to co mam do roboty i jak to wygląda; podoba mi się wiedza którą już zdobywam i cała ta wiedza, która jeszcze przede mną. A sporo jej. Czy lepiej, jeśli chodzi o miasto? Jeszcze nie wiem. Od 4 lipca nie wyjechałem z Warszawy (nie licząc jakiegoś drobnego popołudnia nad jeziorem). Nie czuję się tutaj tak swobodnie jak czułem się w Krakowie (no, ale w Krakowie mieszkałem w sumie dziewięć lat), ale nie czuję się też specjalnie wyobcowany. Może dlatego, że mam się z kim spotkać? Może dlatego, że poza pracą i kilkoma osobami tak na prawdę nie bywam w mieście? Nie chodzę po klubach, nie rozmawiam z ludźmi? Może po prostu jeszcze się nie oswoiłem… Sam nie wiem, trochę też nie ma na to czasu. Nie ciągnie mnie za bardzo do Krakowa (ale do ludzi, którzy w Krakowie zostali jak najbardziej - to dwie różne sprawy) - bardziej ciągnie mnie do zwiedzania Warszawy i poznawania jej. Tak po prostu chodzenia po niej, poruszania się i poznawania. Ulic, placów, parków, knajp i pubów.

Ciekawy spam

Wed, 29 Jun 2005 20:16:05 +0000

Bardzo zdziwiło mnie coś, z czym ostatnio spotkałem się w tym blogu. Otóż w którymś momencie zaczęły pojawiać się komentarze do postów podpisywane “online casinos” czy coś w tym stylu. Nie znadziecie ich, bo je usuwam :). Ale nie w tym rzecz - rozumiem spamowanie skrzynek pocztowych, ale nie spotkałem się jeszcze z automatami robiącymi wpisy w komentarzach czy książkach gości. Po co to? Oczywiście chodzi o linki do stron i nic poza tym. W tym momencie (po małych “tańcach” google) blog.prokulski.net ma PageRank równy 2/10. Nie jest to dużo, ale jednak jest. Wiadomo, że linki ze stron z wysokim PageRank powodują wzrost pozycji strony (do której te linki prowadzą) w wynikach wyszukiwania. Cel takich wpisów jest wiadomy. Spotkał się ktoś z tym? Może podzielić się uwagami? Zachęcam do dyskusji!

Nowe zdjęcia

Tue, 07 Jun 2005 10:59:24 +0000

Na stronie pojawiło się kilka nowych zdjęć. W sumie jest ich już 140 (co w zasadzie nie jest jakąś szokującą liczbą, ale trochę tego jest, jakby nie patrzyć). Te nowe fotki pojawiły się w działach Kraków (sporo zdjęć z Kazimierza takiego jakim go lubię - rudery, brud itd), Kwiatki, Inne~~, jedno w Portret i dwa w Autoportret~~. Zapraszam do oglądania i być może komentowania (tutaj, w blogu).

Nine Inch Nails - [WITH_TEETH]

Sat, 07 May 2005 21:05:14 +0000

Cudne! Miażdżące! Piękne w swym brudzie. Tak mogę określić nową płytę NIN - premiera była 2 maja, płytki słucham od jakiegoś tygodnia. Nigdy za Nailsami nie przepadałem, byli za głośni, za bardzo jazgotliwi. Ceniłem jednak “The Perfect Drug” z “Zagubionej…” czy też kilka innych znanych utworów (“Closer”, “Sin” czy “Burn” wykorzystany w “Urodzonych…” albo “Starfuckers, Inc.” z poprzedniej płyty). Ale nigdy nie przebrnąłem przez całą płytę - po prostu było to dla mnie za głośne i tyle. No, ale “With teeth” zacząłem poznawać właściwie od słuchania na słuchawkach - zupełnie inny odbiór niż moje nędzne głośniczki przypięte do komputera. Słychać każdy dźwięk, każdy brud, każdy szczegół całej tej układanki. I właśnie za te szczegóły i ich mnogość (jak to ktoś na grupie pl.rec.muzyka.rock stwierdził - nie ma gdzie już szpilki wetknąć) cenię tę płytkę. Momentami ściana dźwięku. Ale wcześniej coś jak nocna jazda samochodem pustą drogą przez gęsty las (znam takie miejsce - jadąc z Popielowa do Kup; kilkanaście kilometrów od Opola) . Coraz szybciej, na coraz większym gazie, chociaż tak na prawdę słychać tylko szum wiatru i silnika (mruczenie bardziej)… tak samo delikatnie jak w “Ridern on the Storm” Doorsów (mam na myśli wrażenie, a nie jakiekolwiek muzyczne porównania!). Tyle, że nagle wyrasta przed nami na owej drodze betonowy mur, w który wgniatamy się całym impetem. I za chwilę ponownie. I dalej, i szybiciej i na nowo z każdym kawałkiem. Są też piosenki. Po prostu piosenki, a to dość nietypowe dla Reznora… takie jak np. singlowy “The Hand That Feeds” czy “Only”. Mistrzostwo świata, trzeba posłuchać. Dzięki “With teeth” sięgnąłem po starsze płyty NIN. I nie żałuję. Już mnie uszy nie bolą.

Aviator

Sat, 05 Mar 2005 13:20:46 +0000

Kolejny film, wielki kandydat do Oscarów i chyba wielki przegrany (od lat właściwie) - Martin Scorsese i jego Aviator. Tym razem porażka totalna. O czym jest ten film? Czemu ma służyć? Jak napisałem na pl.rec.film:

“Zestawienie dość ładnych zdjęć, kilka scenek jedna za drugą, ale tak na prawdę - o co chodzi? No był bogaty gość, robił samoloty i filmy, obracał się w towarzystwie gwiazd i co z tego? Jak dla mnie - szkoda było taśmy… Myślałem, że Martin S. zrobi coś lepszego po “Gangach NY”, ale widocznie się przeliczyłem… I dobrze, że nie dostał tylu Oskarów ile by chciał.”

Piła

Sat, 05 Mar 2005 13:17:24 +0000

Ostatnio nadrabiałem zaległości filmowe. Filmów było kilka, szczerze mówiąc nie bardzo wszystkie pamiętam! Na pierwszy ogień pójdzie Piła. Film niczego sobie. Trochę chyba uprzedziłem się czytając przed obejrzeniem coś na sieci (głównie na pl.ref.film), ale to nie wszystko. Początek - jak z Cube, który bardzo lubię… Potem całkiem nieźle, ale mocno zalatując Se7en - też lubię… nawet bardziej. Są jednak w moim odczuciu filmy (i piosenki), których nie należy dotykać i wręcz obchodzić się z nimi jak ze świętym jajkiem. Połączenie Cube z Se7en - fajny pomysł, mógł być bardzo udany. Niestety - Piła w napięciu mnie nie trzymała, była momentami przewidywalna, na nogi nie powaliła. Zobaczyć jednak warto. Powiedzmy 6.5/10.

Pozycjonowanie Grupy Rafała Kmity - część druga

Sat, 05 Mar 2005 13:11:20 +0000

Hmm… kilka nowych słów kluczowych (tak naprawdę zebranych na podstawie logów… mojej strony), kilka przeróbek i poprawek, a strona Kmitów ma się lepiej w googlach. Wciąż wszystko na wyczucie tak na prawdę, bez sztuczek - czysty kod, niezbyt (mimo wszystko - ciągi są za długie) dobrze dobrane słowa kluczowe (ale ważne że słowa te są) i wypełnione inne META-tagi. A dziś trafiła w sieć nieco poprawiona strona www.grafologia.pl (odpowiadam tylko za “tuning” pod względem pozycjonowania) - za 2-3 dni powinna się pojawiać w googlach. Mam nadzieję… bo kod jest rozpieprzony i strona jest tak na prawdę do zrobienia na nowo. Niestety nie dysponuję całą grafiką (najchętniej w PSD oczywiście) i nie jestem w stanie wiele namieszać… Liczę po ciuchu na to, że moje drobne poprawki coś poprawią…

Pozycjonowanie Grupy Rafała Kmity

Tue, 25 Jan 2005 21:27:02 +0000

Jakiś czas temu (bodaj na początku grudnia) ruszyła zrobiona przeze mnie strona Grupy Rafała Kmity. I hula ładnie, chociaż jest taka sobie graficznie (cóż… nie mam do tego zdolności i nic już na to nie mogę poradzić). Ale ja nie o tym. Strona ta była dla mnie wyzwaniem nie tylko pod względem zrobienia jakiegoś layoutu i napisania kawałka kodu w HTMLu (niestety - nie poradziłem sobie ze względów czasowych z rozpisaniem tego na CSSie, ale większej potrzeby też nie było) ale również pod względem pozycjonowania. Nacisk położyłem na google - dla mnie jedyną wyszukiwarkę sieciową, w którą warto “inwestować” swój wysiłek. No i udało się właściwie. Udało się lepiej niż sądziłem. Google wyszukują wspomnianą stronę po frazy typu “Grupa Rafała Kmity” czy też tytuły poszczególnych spektakli i jest ona w pierwszych pięciu wynikach (niestety nie zawsze udaje się przeskoczyć starą wersję strony umieszczoną na innej domenie). Największym jednak sukcesem dla mnie okazała się fraza “skecz o radiu” - taki ciąg zaproponował Arek Lipnicki (“bo ludzie nas z tym kojarzą”) - tutaj kmita.art.pl jest na pierwszym miejscu. Dzisiaj wprowadziłem kilka zmian (jakich to tajemnica ;-) ale prostych i banalnych wręcz) na dodanej kilka dni temu podstronie “Powiedzieli o nas…” - ciekaw jestem jak się sprawdzą w wyszukiwarkach (swoją drogą - właśnie sprawdziłem szukaczki onetu, wp i interii - pozycjonują stronę właściwie tak samo jak google) i czy na zapytania o nazwiska, które coś powiedziały w wynikach będzie strona Kmitów… Jeśli tak to dla mnie pełen sukces :D

21 gramów

Wed, 19 Jan 2005 10:06:58 +0000

Robię sobie ostatnio co wieczór maraton filmowy. No… maraton to za dużo powiedziane - po jednym filmie dziennie (“wieczornie” właściwie). Przedwczoraj “Donnie Darko” w wersji reżyserskiej, wczoraj “21 gramów”. O ile pierwszy taki sobie (tym bardziej, że widziałem go już wcześniej kilka lat temu) o tyle drugi rewelacyjny. Żałuję, że nie załapałem się na seanse w kinie… Naomi Watts boska, piękna (nawet jak robi “grymaśne” miny albo dopiero co jest po przebudzeniu - no, ale to uroda kobiety dokładnie w moim typie) i rewelacyjna. Sean Penn jeszcze lepszy, tak samo Benicie Del Toro. Świetny film o życiu, śmierci, trochę o miłości i przede wszystkim o tym jaki ten świat jest mały i jak trudno czasami zrozumieć drugiego człowieka, szczególnie stojąc z boku i tylko przyglądając się jego życiu, nie znając całości. Gorąco polecam, powinien być w wypożyczalniach.

Olympus C-765

Tue, 11 Jan 2005 23:07:27 +0000

Olympus C-765 to mój nowy nabytek. Wreszcie kuiłem sobie aparat cyfrowy! Fociłem nieco kilka lat (to już “lat”!) Prakticą PLC 3, z krótej jestem bardzo zadowolony, ale… albo ja mam coś z oczami, albo aparat nie trzymał mi ostrości. Z czasów manuala zostało mi zamiłowanie do fotografii (totalnie amatorskiej, bądź co bądź) i chorowałem na cyfrę. Na analogowe odbitki nigdy nie było mnie stać. Teraz mogę sobie chodziaż dowoli popstrykać :) A z efektów jestem jak na razie zadowolony (z kilkoma rzeczami trzeba się pogodzić, cóż…). Przykład - poniżej. Oczywiście pomniejszony, więc nie oddaje ten obrazek tego co potrafi aparat.

Marzyciel

Tue, 11 Jan 2005 22:58:57 +0000

Obejrzałem dwa dni temu “Finding Neverland” z Johnnym Deppem. Świetny film, polecam. Już jakieś 2 miesiące temu w “Talking Movies” na BBC o nim słyszałem i o tym, że bije rekordy w Ameryce, a Amerykanie są zachwyceni. Hmm… szczerze mówiąc dla mnie to żadna rekomendacja, wręcz przeciwnie. Ale coś mi mówiło, że warto film zobaczyć i kazało na niego czekać. Pewnie gdyby nie DivX to poszedłbym do kina (a do kina chodzę na bardzo wyselekcjonowane pozycje - tym bardziej, jak tak na prawdę nie mam ostatnio kiedy iść do kina). Film o powstawaniu “Piotrusia Pana”, ot co. Ma w sobię i konkret i magię - doskonale to wszystko łączy. Depp świetny. Gorąco polecam. W Polsce w kinach bodaj w lutym.

Pink Floyd nieznany

Tue, 04 Jan 2005 22:23:52 +0000

Od kilku dni słucham (każdego dnia po jednej płytce) kolejnych płyt z pakietu A Tree Full Of Secrets. To taki pakiecik (bootleg) 18 kompaktów z niepublikowanymi wcześniej utworami Floydów. I tak na przykład dzisiaj po przesłuchaniu piątej płytki na nowo zakochałem się w “Wish You Were Here”… bo na piątym kompakciku są właściwie tylko dwa utwory - “Shine On You Crazy Diamond” i “Have A Cigar”. Wersje short, demo, mono, fake stereo i Bóg wie jakie jeszcze. Tak czy inaczej - polecam to wydawnictwo (pewnie trudno zdobyć, ja znalazłem dojście w sieci), szczególnie dla fanów PF.