Mudanças nos esquemas de Bancos de dados

http://nothing.tmtm.com/2009/02/gradual-deployment-of-schema-changes/

http://rbtcollins.wordpress.com/2012/08/13/minimising-downtime-for-schema-changes-with-postgresql/

Robert Collins: minimising downtime for schema changes with postgresql

titulo

texto quote

def codigo_python():    pass

Video sobre Python -  "Aplicações Corporativas"

Video sobre Python "Aplicações Corporativas"

http://streaming.serpro.gov.br/cisl/itheora/itheora.php?v=http://200.198.201.131/cisl/cisl140311.ogv&s=defaut&d=tsf&l=pt-br&w=1079&h=747

Eu estava procurados causos sobre python, e achei este link em um blog perdido !

Google Maps Geocode

titulo

texto quote

  Endereço:

Lat / Lon:
    
    
    

Python Brasil [7]

Antes de mais nada queria dizer que foi a melhor e maior Python brasil que já estive ! ([1], [5], [6] e [7])

Parabéns ao Érico. Já na entrada se podia ver que aquela seria uma Python Brasil diferente.

A organização foi de longe a melhor de todas, e a infra estrutura nem se fala -  3 telões, o áudio, etc etc ... impecável;

Parabéns ao Érico e Karin, e a todos que ajudaram a fazer esta  Python Brasil.

Sempre tem pontos a melhorar, mas perto do evento que foi, são irrelevantes.

Espero que o Érico dê seus "pitacos" na próxima python brasil.

Logo depois da primeira Keynote, tive uma boa conversa com  Wesley Chun, e foi o que me motivou durante todo o resto da Python Brasil;

Porque Python ? e como "vender" python. Quem usa ? onde ?

Não obtive nenhuma resposta milagrosa, mas confirmei aquilo que nós já sabemos; PYTHON É F***. E python está em lugares que nem imaginamos. 

Pessoas menos  prováveis usam e indicam python como solução para seus negócios, uma pena, Chun confirma que muitos  "escondem" python, por ser uma ferramenta estratégica dentro do negócio. Grandes empresas  usam como solução interna, mas não divulgam o uso de Python.

Depois assisti palestras como  :

 - Listas, deques, heaps e outras bestas mitológicas: Adriano Petrich

 - OO em Python sem sotaque: Luciano Ramalho (todo mundo deveria ver o

slideshare disso - tem sempre um tip a mais)

 - Us, an Open Source Community: Alan Runyan

 - Ensinando OO com Python, Django e Pygame: Luciano Ramalho

 - Tudo que você sempre quis saber sobre Bindings: Gustavo  Barbieri.

 - Escalabilidade em projetos Django:Francisco Souza

entre outras...

Um ponto que merece destaque, e isso você não terá em nehuma lista de discussão nem em outro congresso, são as conversas no corredor com pessoas como Senra, Ikke, Luciano Ramalho, Petrich, Douglas, Tania,  Osvaldo entre outros Pythonistas, que compartilham comigo o uso de Python no dia-a-dia. A cervejinha de todos os dias, imperdível. Ali também se constroem os laços que fazem as listas ficarem um pouco mais divertidas e interessantes. Conversas com o Henrique Bastos (RJ), Marcel (PE), e outros caras que fazem a diferença na comunidade Pytthon -  são inspriradoras.

Sobre as palestras relâmpago, não vou listar nenhuma porque seria uma injustiça. Seria possível fazer uma lista pós com as palestras relampago? (boa aplicação pra fazer)  Pra quem não estava lá, é outro prejuízo que não tem como remediar.

Alias, fizemos (Luiz Vital e eu ) nossa primeira palestra relâmpago - nenhuma descoberta técnica que irá mudar sua vida, mas relevante para alguns poucos desavisados.

Era sobre os projetos que desenvolvemos aqui na ZNC, não deu pra mostrar muito, a net não estava ajudando na hora de acessar os sistemas ou o nosso repo. Pegamos então algumas telas que estavam no

HD,  principalmente telas de mapas para ilustrar e mostrar que os

sistemas

existiam. Django nasceu para fazer sistemas web - Mostramos rapidamente algumas telas de sistemas desenvolvidos por nós,  principalmente, para soluções que necessitam interfaces GIS. Existem  outros projetos mais complexos que aqueles mostrados, com uma grande quantidade de dados e workflows,  sempre utilizando Django. 

A propaganda não era sobre a ZNC, mas sobre o DJANGO! ele vai muito além de blogs :( 

A próxima será, "como Django me salvou" e como ganhamos eficiência no desenvolvimento web com o uso do Django.

Hora hobby - No último dia, passei pelo menos 1 hora com o pessoal da Global Code falando de arduino, e eletrônica digital.

Hora responsa- E claro, a Assembléia da Associação Python Brasil - Eu deveria ter levantado a mão!

Meus parabéns a velha e a nova diretoria da APyB. Não sei se já falaram aqui, o Osvaldo Santana é o novo presidente da APyB, acho que o pessoal da diretoria irá fazer uma apresentação mais formal pra lista. Caso contrário, deveriam. 

Lamento por aqueles que não puderam ir, e lamento pela comunidade também,  que perde com a "não presença" de alguns Pythonistas. Essa vale  pro Marinho Brandão, que tem na manga alguns projetos muito  interessantes, pra dizer o mínimo. Esse goiano é mineiro (é é mesmo, como descobri semanas atrás quando nos encontramos ! hehehe)  um dos grandes contribuidores para o universo de aplicações Django. Sobre os projetos, deixo pra ele um dia comentar. 

Agora vou colocar um lembrete no google calendar para que em março ou abril do ano que vem, eu reescreva os benefícios de participar de uma Python Brasil, esperando que o lembrete ajude mais gente a se programar para a Python Brasil do ano que vem.

Saio da Python Brasil com um grande ímpeto em colaborar mais. Não basta estar aqui na lista.

 - A APyB precisa de ajuda para desenvolver algumas aplicações para auxiliar na administração de assinantes e participantes de eventos (por exemplo). 

 - Conversando com o Henrique Bastos (roda que falava sobre a Django Brasil - ver post na lista Python-BR) o Henrique acha que precisamos de mais 

blogs, código e how tos sobre Django, não tinha essa "idéia" mas acabei concordando. Isso poderia ajudar na falta da documentação em PT-BR , talvez enfatizar nos how-tos a leitura do código fonte do django.

um projeto novo: uma  "Base de Conhecimento Django"  - onde será proibido publicar comentários em qualquer coisa diferente de PT-BR, acho que pode ajudar o desenvolvedores local.

A cada ano, após a Python Brasil, me sinto um pouco mais "dentro" da comunidade, e esse é um dos benefícios de estar lá. Conhecer pesssoalmente os grandes contribuidores da comunidade Python no brasil. 

Pra quem ainda não afiliou-se, uma ótima maneira de começar a contribuir é afiliar-se a APyB. - 40 pilas no ano ?!?! pois é.

Saudações a todos.

Postgres: Qual o tamanho do banco de dados no seu sistema de arquivos (disco) ?

... na linha de comando, através do 'psql' 




postgres=# SELECT pg_database.datname,
postgres-# pg_size_pretty(pg_database_size(pg_database.datname)) AS size
postgres-# FROM pg_database;


datname | size
------------------+---------
template1 | 4272 kB
template0 | 4272 kB
postgres | 4364 kB
znc | 4272 kB
teste | 8128 kB
template_postgis | 7416 kB
circuitonobre | 8336 kB
postfix | 4908 kB
teste | 11 MB
znc_gerencia | 9048 kB
pam | 14 MB
tnc_uc | 48 MB
(12 rows)


postgres=# SELECT pg_size_pretty(pg_database_size('sorocaba_sig')) As fulldbsize;


fulldbsize
------------
8568 kB
(1 row)


postgres=# SELECT pg_database.datname,
pg_size_pretty(pg_database_size(pg_database.datname)) AS size
FROM pg_database where datname = 'sorocaba_sig';


datname | size
--------------+---------
sorocaba_sig | 8568 kB
(1 row)

Official Gmail Blog: Pasting images into messages just got easier

Official Gmail Blog: Pasting images into messages just got easier: "Posted by Daniel Cheng, Software Engineer They say a picture is worth a thousand words, and people certainly like to spice up their emai..."

Google Analytics Blog: What’s new about Analytics Intelligence?

Google analytics : Links interessantes

Novidades : Google Analytics Blog: What’s new about Analytics Intelligence?

Variáveis (customizáveis): http://thinkvitamin.com/business/analytics/google-analytics-tweaks/

4 links para publicar e compartilhar seu código

Post Original : 4 Places Where You can Write, Publish and Share: "

Pastebin.com

Pen.io

Freedomshare.eu

Tidypub.org

Queryset com aggregate utilizando uma "parte" de um date time field.

LeituraConsolidada.objects.filter(data_leitura__year='2011').extra(select = {'mes':'extract(month from data_leitura)'}).values('mes').annotate(Avg('ozonio'), Avg('dioxido_enxofre'))

#Saida
[{'ozonio__avg': 24.965, 'dioxido_enxofre__avg': -0.42499999999999999, 'mes': 1.0}, {'ozonio__avg': 43.613333333333337, 'dioxido_enxofre__avg': -0.28000000000000003, 'mes': 2.0}]

LeituraConsolidada.objects.filter(data_leitura__year='2011').extra(select = {'mes':'extract(month from data_leitura)'}).values('mes').annotate(Avg('ozonio'), Avg('dioxido_enxofre'))

Transações de banco de dados postgres no django

O django, por padrão faz commit automaticamente as transações no banco de dados.

Django’s default behavior is to run with an open transaction which it commits automatically when any built-in, data-altering model function is called. For example, if you call model.save() or model.delete(), the change will be committed immediately.

Isso quer dizer que caso haja um erro durante a transação no banco de dados as transações subsequentes também não serão executadas. Este comportamento poder ser útil em alguns casos, mas não todos! Mas o django como sempre lhe dá liberdade para alterar o comportamento padrão, e geralmente de uma maneira muito simples. Este é o caso.

Vamos supor que queremos inserir 100 registros novos no banco de dados Postgres que foram lidos de um excel.
E no 10º registro ocorra em um campo string que exceda o tamanho do campo no banco de dados, como abaixo

* DatabaseError('value too long for type character varying(70)
* DatabaseError('current transaction is aborted, commands ignored until end of transaction block
...
* DatabaseError('current transaction is aborted, commands ignored until end of transaction block]

o primeiro erro é por causa de uma string maior do que a aceita pelo campo no banco de dados.
Os error subsequentes, ocorreram simplesmente porque houve um erro ! oops, confuso?
veja a primeira mensagem de error

• mensagem 1 - value too long for type character varying(70)
• mensagem 2 em diante - current transaction is aborted, commands ignored until end of transaction block

a partir da msg de erro 2, o que temos é um erro de transação pendente, porque o commit automático não ocorreu.
O código executado é algo parecido com isso abaixo

for row_index in range(20 ):
    try:
        model_instance.save()            # salvar o modelo
    except Exception, error_str:
                error_list.append(error_str)

No meu caso, eu quero continuar as inserções no banco, mesmo que haja erro em algumas delas.
A saida é fazer um Savepoint Rollback! THANKS DJANGO !

Savepoint rollback
If you are using PostgreSQL 8 or later, you can use savepoints to control the extent of a rollback. Before performing a database operation that could fail, you can set or update the savepoint; that way, if the operation fails, you can roll back the single offending operation, rather than the entire transaction.

O que é dito aqui, é que ao salvar um ponto de rollback, eu posso comitar as transações que ocorreram sem erro, e dar um "rollback" somente na transação que falhou.
O código ficaria assim

for row_index in range(20 ):
    try:
        sid = transaction.savepoint()  # salvar ponto da transação
        model_instance.save()            # salvar o modelo
        transaction.savepoint_commit(sid)  # aplicamos o commit da transação
    except  Exception, error_str:
        error_list.append(error_str)
        transaction.savepoint_rollback(sid) #rollback somente da transação que falhou

leia mais na docs do Django  em :   http://docs.djangoproject.com/en/1.3/topics/db/transactions/

Gráficos e tabelas na WEB

http://www.jsgantt.com/ - gráfico Gantt

http://www.datatables.net/ - tabelas interativas de dados

http://code.google.com/p/jquery-gantt-chart/  - jquery Gantt

https://github.com/thegrubbsian/jquery.ganttView  gráfico Gantt

http://code.google.com/p/flot/  - gráficos

https://app.gantter.com/ Gantt app  - project manager bem legal

slider para o jquery gantt - http://blog.pathtosharepoint.com/2009/01/21/a-slider-for-the-gantt-view/

https://bitbucket.org/lgs/pycha/wiki/Home python charts

Ubuntu: como trocar o editor padrão ? Nano, Vi ou outro de sua preferencia.

Para alterar o editor padrão no debian  digite na linha de comando
$sudo update-alternatives --config editor

Google Geo Developers Blog: Displaying the World's Information: New Articles for KML

Google Geo Developers Blog: Displaying the World's Information: New Articles for KML: "Displaying the World's Information: New Articles for KML"

Coisas que eu devo lembrar sobre o Python

Funções com parâmetros  "defaults" para objetos mutáveis .

In [1]: def funcao(x, lista=[]):
   ...:     lista.append(x)
   ...:     return lista
   ...:

In [2]: print funcao('a')
------> print(funcao('a'))
['a']

In [3]: print funcao('b')
------> print(funcao('b'))
['a', 'b']

In [4]: print funcao('c')
------> print(funcao('c'))
['a', 'b', 'c']

In [5]: print funcao('d')
------> print(funcao('d'))
['a', 'b', 'c', 'd']

sendo que o esperado seria

print funcao('d')

>>['d']

print funcao('e')

>>['e']

 como acontece abaixo

In [27]: def funcao(a=0):
   ....:     return a
   ....:

In [28]: funcao(1)
Out[28]: 1

In [29]: funcao(2)
Out[29]: 2

In [30]: funcao()
Out[30]: 0

O problema é que o "default value" é  assinalado uma única vez, e não é quando a função é chamada, mas sim, quando é definida.

Problema parecido acontece quando o default value é um método....

In [66]: def funcao(tempo=time.time()):
   ....:     print tempo
   ....:    
   ....:    

In [67]: funcao
Out[67]: <function funcao at 0x95f9534>

In [68]: funcao()
1254349399.98

In [69]: funcao()
1254349399.98

In [70]: funcao()
1254349399.98

In [71]: funcao()
1254349399.98






caso seja para sempre retornar o valor atualizado, devemos passar a referência à função


In [73]: def funcao(tempo=time.time):
   ....:     print tempo()
   ....:    


In [74]: funcao
Out[74]: <function funcao at 0x95f933c>

In [75]: funcao()
1254349428.79

In [76]: funcao()
1254349429.94

In [77]: funcao()
1254349431.35
 

Os cometários que  explicam este comportamento:

    "The default value is evaluated only once. This makes a difference when the default is a mutable object such as a list, dictionary, or instances of most classes. For example, the following function accumulates the arguments passed to it on subsequent calls:  "

                Guido Van Russel [1] 

ou 

uma discussão sobre o assunto em [2]

Mas se isso é verdade, se o porque do "acúmulo"  da varável é porque os valores defaults bem como variáveis e ou  métodos de uma classe são "atribuidos" uma única vez quando a função é interpretada,  então porque quando definimos def " funcao(x=0): " o problema nao occore não ocorre?

In [81]: def funcao(x=0):
   ....:     x = x+1
   ....:     return x
   ....:

In [82]: funcao(2)
Out[82]: 3

In [83]: funcao(2)
Out[83]: 3

In [84]: funcao(2)
Out[84]: 3

Não está faltando nada no porque ? 

se o valor default da var x, é assinlado somente uma única vez quando a função foi criada, porque ao alterar o valor de x dentro da minha função, também não ocorre o acúmulo? ou porque x não permanece com o último valor como acontece quando passado um método ou uma lista ?


pensando em ponteiros e memória, não consigo imaginar porque o comportamento diferente de uma var ou um metodo ou lista.

[1] http://www.network-theory.co.uk/docs/pytut/DefaultArgumentValues.html

[2] http://www.deadlybloodyserious.com/2008/05/default-argument-blunders/

Ferramenta de Encode de Polyline do Google

NO endereço abaixo, tem uma ferramenta para desenhar polígono no mapas.
Útil para quem trabalha com desenvolvimento GIS


http://code.google.com/apis/maps/documentation/polylineutility.html

django-caching - Aplicação com cache de queryset no django

mmalone’s django-caching

Uma aplicação django que usa "managers" customizados, fields, e querysets para cachear

objetos de uma maneira mais transparent

Mike Malone, disponibilizou uma app utilizada no POWNCE para ter cache de querysets dentro do django.

post original http://simonwillison.net/2009/May/7/

ler dólar do banco central

Função para ler um feed do banco central retornar, Dolar, Taxa de inflação e outros

 import feedparser,sys

def f(data):
    return data.encode("latin1","ignore")

try:
    feed = sys.argv[1]
except IndexError:
    feed = "http://www4.bcb.gov.br/feed/taxas.ashx"

d = feedparser.parse(feed)
print f(d.feed.title),";",f(d.feed.link),";",f(d.feed.subtitle),";",f(d.version),";",f(d.encoding),";",len(d.entries)
for entry in d.entries:
    print f(entry.title),";",
    print f(entry.link),";",
    try:
        print f(entry.author_detail.name),";",
    except AttributeError:
        pass  
    try:
        print f(entry.content)
    except AttributeError:
        pass
    try:
        print f(entry.description)
    except:
        pass
  
    print

uso do dict para retornar objeto passado na url e utilizar uma unica view

'''

lista qualquer modelo

Usar somente quando nao for possível generic views !!

'''

def lista_model(request, model_name=''):
    #print '--%s--' % request.GET.get('cidade', None)
      
    cidade_id =request.GET.get('cidade', None)
    tipo_instituicao = request.GET.get('tipo', "0")

    locais = False
    if model_name=="Locais":
        locais = True;
        model_name = "Instituicao"
       
    model_selected = models_inscricoes.__dict__[model_name]
    if cidade_id<>"0":
        queryset = model_selected.objects.filter(municipio = cidade_id)
    else:
        queryset = model_selected.objects.all()

    municipio_list = Municipio.objects.all()
    context_instance = RequestContext(request)

   queryset = queryset.filter(local_evento=True)
 return object_list(request, queryset=queryset, template_name='inscricoes/local_list.html',
                           extra_context={'model_name':model_selected.__name__,

                                          })
 

Lista de Widgets do XML do Glade

wTree.get_widget_prefix('')  #utilizando o "get by prefix" sem paramentro, a resultado é uma lista de OBJETOS widgets

#por exemplo .....
[ ,
< gtk.vbox>,
,
.....
,
,
,